网易首页 > 网易号 > 正文 申请入驻

清华系明星创企掏出AI应用开发利器,接入500多个大模型,API成本降低37%

0
分享至


智东西
作者 程茜
编辑 云鹏

智东西1月29日报道,今日下午,清华系AI Infra明星创企清程极智发布一站式大模型服务测评与API调用平台AI Ping。该平台目前覆盖了500多个主流大模型及30多个大模型服务商。

这一平台可以为开发者的两大核心需求提供支持:一是通过7×24小时专业的持续评测,为开发者提供可验证的大模型性能榜单;二是借助统一API接口、智能路由调度等功能,帮助需通过云端调用大模型的开发者缩快速选定高性价比模型、大模型API服务商等。


清程极智联合创始人、产品副总裁师天麾透露,在可用性方面,AI Ping的服务路由功能可以将API服务调用成功率提升到99.99%以上,在性价比方面,开发者使用服务路由功能,相比于直接调用模型,API的平均成本可以降低37%、延迟降低超20%、吞吐量提升超90%。

AI Ping已经于2025年9月9日开启公测,今天正式发布,师天麾称,公测至今,该平台累计注册了数万名用户,承载了单日500亿token的消耗与请求量。


未来,AI Ping的升级重点将围绕接入更多模型和服务商、更全面的评测体系和更丰富的评测指标、更强稳定性和高性价比的智能路由展开。

一、7×24小时不间断测评,智能路由使调用成本降低37%

AI Ping有三大核心优势,其接入了30多家大模型服务商和500多个大模型;并且会对大模型API服务进行7×24小时的不间断测试;智能路由能力会根据用户需求提供高性价比大模型。


其中,师天麾谈道,AI Ping的评测有以下几个特点,他们的评测会从真实用户视角出发,进行端到端评测;模型会在同模型、同输入、同时段进行对比;通过动态输入设计,规避缓存的干扰;7×24小时的多地域分布式监测;评测结果还会与厂商的后台数据进行交叉验证。

AI Ping平台上会展示大模型的延迟吞吐等基本性能,以及多个热门模型在7天内的指标。如下图所示,其中纵轴是延迟、横轴是吞吐。开发者可以根据这样的图表,快速选择低延迟、高吞吐的大模型。


在每个模型的详情页面下,其还会汇总各个服务商七天内的评测指标。对于用户关心的大模型服务指标,AI Ping会对上下文长度、最大输入输出长度进行汇总,并对模型厂商提供的指标进行测试验证。

AI Ping也会为开发者提供筛选、排序功能。开发者可以根据关键词筛选、按照一定顺序排序等,快速找到符合自己需求的大模型。


师天麾提到,为了让用户更方便、快捷选择模型,AI Ping还提供了智能路由功能。

智能路由的第一个阶段是模型路由。他补充说,假设这样一个场景,A模型便宜但只能回答80%的问题、B模型贵但能回答95%的问题。模型路由就可以将这两个模型混合成一个模型,提供价格适中、准确率更高的模型。


研究人员在AI Ping上选择了当前较热门的几个模型进行了实验,其中的成本优先、均衡模式、效果优先三个路由模型证明,模型路由的纵坐标性能高于任何一个单一模型,且成本并不是非常高。


第二个阶段是选择大模型API服务商,也就是服务路由。

AI Ping可以帮助用户把每一条请求发送给当前满足用户需求、性价比高的大模型API服务商。开发者可以在AI Ping里描述自己的请求,如延迟在3秒以内等,网页上就会自动弹出符合这些需求的服务商。


师天麾透露,在可用性方面,AI Ping的服务路由功能可以将API服务调用成功率提升到99.99%以上,在性价比方面,开发者使用服务路由功能,相比于直接调用模型,API的平均成本可以降低37%、延迟降低超20%、吞吐量提升超90%。

二、AI应用开发平终极目标:用户提需求就能自动匹配

大模型API的服务形式对开发者和应用AI的企业有不少优势。

师天麾谈道,其中有低门槛、低使用成本,可扩展性强,开箱即用,免费的安全部署等增值服务四大优势。


基于此,开发者既可以低成本部署模型,也可以避免自己部署模型带来的安全风险。

国际市研机构IDC的数据显示,2025年上半年,国内大模型API服务呈现爆发式增长态势,同比增长421.2%。

大模型API服务在国内发展迅猛背后有两大关键原因。首先在供给侧,中国拥有最繁荣的开源模型生态,且国产AI算力增长飞速,其次在需求侧,企业希望大模型服务能够做到低成本、低门槛。


但在真正的AI应用开发过程中,想要选择合适的大模型以及大模型API服务并不容易。

师天麾称,AI应用开发大致可以分为分析问题、设计工作流、选择大模型、选择大模型API服务商、输出结果、优化效果几个环节。但企业和开发者在选择大模型、选择大模型API服务时有较多痛点。

首先在模型层面,模型更新迭代速度快,开发者需要在多家平台反复切换模型、互相对比、验证效果,还要考虑模型定价、上下文窗口长度、使用场景等的影响。


其次,大模型API服务商即使提供相同模型,但服务性能的差距也会很大。再加上需求侧企业的关注点各不相同,需要和大模型服务商的产品相匹配。

因此,在师天麾看来,未来开发者需要一个统一的平台,用户可以在此之上查看、使用模型,以数据评测驱动为企业提供科学的标准,最后基于评测数据提供进一步服务。

这样的平台比较理想的终极目标就是,用户发送请求,平台可以直接匹配最适合的模型服务商。

三、清程极智已围绕大模型训练、推理、应用全栈布局

清程极智作为AI Infra创企,目前已经围绕大模型训练、大模型推理、大模型应用推出了不同的产品。

八卦炉解决的是大模型训练与微调的场景需求。

此前,由于国内大模型研究机构受限于海外先进算力难获取、国内算力软件生态相对不够完善,清程极智构建了智能计算软件栈八卦炉,围绕跨体系架构的算子适配、集群通信、负载均衡等进行了优化。

清程极智创始人、CEO汤雄超透露,该产品已经在多个重大项目中落地,支撑大模型的大规模集群训练需求。

在大模型推理层面,清程极智推出了大模型推理引擎赤兔。汤雄超称,目前只需要一台国产智算服务器就可以部署DeepSeek超大参数量的模型。

去年年底,该公司进一步发布了针对大规模集群进行特定深度优化的版本,支持了包括华为CM384超节点等多种集成环境。

该推理引擎已经在金融、能源安全等领域落地,满足企业在华为昇腾、海光、沐曦、英伟达等多种算力平台上部署高性价比大模型的需求。

此次AI Ping平台,是清程极智围绕大模型规模化应用落地、AI智能体爆发的行业背景推出的。


汤雄超认为,在大模型应用场景中,最关键的AI Infra需求是智能路由,基于此,海量应用可以找到最好、最快、最稳定、最便宜的大模型服务。

结语:一站式搞定大模型选型与调用,普惠中小开发者

从大模型应用生态视角看,清程极智AI Ping的出现,或有望破解大模型服务碎片化、选型难、成本高、稳定性差的行业痛点,进一步加速大模型从技术到商业落地的全链路效率。

其采用一站式评测+智能路由的方式,开发者无需自行测试、对比多家服务商,可快速锁定高性价比模型,直接降低大模型应用的试错与研发成本。这将进一步普惠中小开发者与创业团队,其无需自建算力、精通底层Infra,就能通过API调用低成本使用顶级大模型能力。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
国家一级女演员陈丽云被逮捕!

国家一级女演员陈丽云被逮捕!

许三岁
2026-03-28 09:24:30
80岁还扮嫩捞金?潘迎紫、赵雅芝穿古装商演,网友:说不出来的怪

80岁还扮嫩捞金?潘迎紫、赵雅芝穿古装商演,网友:说不出来的怪

削桐作琴
2026-04-07 15:14:18
国务院825号令正式落地!这些执法全被叫停,老百姓收好维权干货

国务院825号令正式落地!这些执法全被叫停,老百姓收好维权干货

混沌录
2026-04-07 17:59:04
伊朗发出最后通牒!俄通告全球将参战,法国上将:中估计也要到了

伊朗发出最后通牒!俄通告全球将参战,法国上将:中估计也要到了

观察者小海风
2026-04-07 16:07:23
A股,尾盘传来一个“重磅信号”,周三,或将迎来大变盘!

A股,尾盘传来一个“重磅信号”,周三,或将迎来大变盘!

夜深爱杂谈
2026-04-07 16:09:23
反对派对欧尔班釜底抽薪:上台后修改宪法,欧尔班无法再担任总理

反对派对欧尔班釜底抽薪:上台后修改宪法,欧尔班无法再担任总理

史行途
2026-04-07 03:42:49
34分狂胜,1分险胜!西部第一伪强队诞生,申京别高兴得太早

34分狂胜,1分险胜!西部第一伪强队诞生,申京别高兴得太早

世界体育圈
2026-04-07 20:23:34
三国臭名昭著的4个名人,结果被小说洗白,摇身一变成了正面人物

三国臭名昭著的4个名人,结果被小说洗白,摇身一变成了正面人物

铭记历史呀
2026-04-07 15:47:12
我们并没有用40年走完发达国家200年的路

我们并没有用40年走完发达国家200年的路

文青大叔说
2026-03-13 08:13:38
王楚钦孙颖莎夺冠不足24小时,日媒报道国乒有深意,重点提及一人

王楚钦孙颖莎夺冠不足24小时,日媒报道国乒有深意,重点提及一人

萌兰聊个球
2026-04-06 17:28:58
潘石屹再预言未来楼市,前两次已应验,今明两年或大概率也是对的

潘石屹再预言未来楼市,前两次已应验,今明两年或大概率也是对的

专业聊房君
2026-04-06 17:35:09
张雪母亲改嫁后成为作家!回应:张雪骑车撞人我赔3万 借给他55万

张雪母亲改嫁后成为作家!回应:张雪骑车撞人我赔3万 借给他55万

念洲
2026-04-07 09:37:27
国家动真格,严查国企历史遗留问题!下岗职工工龄社保统统重算

国家动真格,严查国企历史遗留问题!下岗职工工龄社保统统重算

陈博世财经
2026-04-06 14:27:33
伊朗这回开窍了!他们不炸军营,不炸核设施,专门炸这几个大工厂

伊朗这回开窍了!他们不炸军营,不炸核设施,专门炸这几个大工厂

鉴史录
2026-04-07 00:10:03
局势恶化,中方接到高市消息,日本专机将飞越南,对华包围圈成型

局势恶化,中方接到高市消息,日本专机将飞越南,对华包围圈成型

牛锅巴小钒
2026-04-07 17:43:10
李亚鹏含沙射影,官媒下场无缝衔接配合,陈光标遮羞布被撕得粉碎

李亚鹏含沙射影,官媒下场无缝衔接配合,陈光标遮羞布被撕得粉碎

潮鹿逐梦
2026-04-05 16:56:45
陈丽华公司曝离世内幕!对迟重瑞称呼暴露真实关系,遗言看哭众人

陈丽华公司曝离世内幕!对迟重瑞称呼暴露真实关系,遗言看哭众人

一盅情怀
2026-04-07 16:21:17
刚刚,大轰炸!全线大跳水!特朗普威胁:“一个文明将彻底消亡"

刚刚,大轰炸!全线大跳水!特朗普威胁:“一个文明将彻底消亡"

中国基金报
2026-04-07 20:56:22
不装了,摊牌了!日本18岁新星承认,乒超练1年,顶在日本打10年

不装了,摊牌了!日本18岁新星承认,乒超练1年,顶在日本打10年

萌兰聊个球
2026-04-07 20:33:11
深圳一救护车违反调度指令,将患者拉至所属民营医院,家属称因延误抢救致死 涉事医院被处罚

深圳一救护车违反调度指令,将患者拉至所属民营医院,家属称因延误抢救致死 涉事医院被处罚

红星新闻
2026-04-07 13:56:02
2026-04-07 21:28:49
智东西 incentive-icons
智东西
聚焦智能变革,服务产业升级。
11520文章数 117024关注度
往期回顾 全部

科技要闻

满嘴谎言!OpenAI奥特曼黑料大起底

头条要闻

美军拯救飞行员差一点失败 从40英里外用摄像头对准他

头条要闻

美军拯救飞行员差一点失败 从40英里外用摄像头对准他

体育要闻

官宣签约“AI球员”,这支球队被骂惨了...

娱乐要闻

女首富陈丽华离世 被曝生前已分好遗产

财经要闻

10万亿财政转移支付,被谁拿走了?

汽车要闻

不止是大 极狐首款MPV问道V9静态体验

态度原创

家居
房产
健康
数码
军事航空

家居要闻

雅致惬意 感知生活之美

房产要闻

重磅!三亚拟出安居房新政!

干细胞抗衰4大误区,90%的人都中招

数码要闻

1999元就能买Mini LED电视 海信Vidda小钢炮S Mini开售

军事要闻

美军营救飞行员出动155架飞机

无障碍浏览 进入关怀版