网易首页 > 网易号 > 正文 申请入驻

21年老系统接入6家大模型,成本压降95%的实战代码

0
分享至

200多个新闻网站,21年技术债务,18个月接入OpenAI、Anthropic、Google、DeepSeek、Groq、Mistral六家大模型——这不是技术演示,是土耳其一个CMS团队的真实生产环境。

他们没写PPT,只写能跑的代码。核心就两件事:任务该派给谁,以及一家挂了怎么办。


先说钱。GPT-4o输入token要价2.5美元/百万,Gemini Flash只要0.075美元——差33倍。一篇简单摘要用不着GPT-4o的推理能力,硬上就是烧钱。他们的解法叫"cascade routing":给任务分级,便宜够用的先上,不行再换贵的。


代码里枚举了六种任务类型:简单摘要、标题建议、SEO元数据、内容生成、事实核查、翻译。每种任务配一个模型优先级队列。摘要任务先走Groq的Llama 3.1 70B,挂了或质量不达标就换Gemini Flash。事实核查只能走Claude Sonnet,准确度不容妥协。

2024到2025年OpenAI多次宕机,纯绑GPT-4的网站直接停摆。他们的系统默默切到Claude或Gemini,用户无感知。这是多供应商架构的硬价值——不是"最好"的模型,是"能用"的模型在关键时刻救场。

每个供应商SDK、请求格式、错误码都不一样。他们包了一层抽象层,路由代码只认TaskType和modelId,底层谁来实现不关心。质量门控(QualityGate)是最后防线:模型返回了,但得验收过线才算数。


这套东西跑在PHP 8.2上。不是追新,是21年的老系统动不了。他们用严格类型和只读属性,让 legacy code 勉强跟上现代节奏。

最终数字:推理成本压降约95%,质量没掉。秘诀不是某个黑科技,是把"该用谁"的判断权从程序员手里交给代码——按任务、按成本、按可用性实时决策。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
追踪德国华人迷奸案,性犯罪何以组成“共同体”?

追踪德国华人迷奸案,性犯罪何以组成“共同体”?

南方都市报
2026-05-26 09:22:24
投毒杀人者、 三体公司原CEO许垚被执行死刑:他使用了见效更快、毒性更强的毒剂

投毒杀人者、 三体公司原CEO许垚被执行死刑:他使用了见效更快、毒性更强的毒剂

志云说
2026-05-26 13:05:30
你们都是什么时候对男女之事开窍的?网友:果然还是拦不住有心人

你们都是什么时候对男女之事开窍的?网友:果然还是拦不住有心人

夜深爱杂谈
2026-02-21 21:37:02
警惕未成年发生性关系,网友说19岁男子跟13岁女孩发生关系获刑!

警惕未成年发生性关系,网友说19岁男子跟13岁女孩发生关系获刑!

灯锦年
2026-05-25 12:40:14
三十万顶大盖帽,一夜之间说没就没了。

三十万顶大盖帽,一夜之间说没就没了。

笔墨V
2026-05-26 06:09:38
乌克兰袭击学校宿舍,军事专家:因俄军击落乌军一架远程指挥飞机

乌克兰袭击学校宿舍,军事专家:因俄军击落乌军一架远程指挥飞机

健身狂人
2026-05-26 12:26:41
陕西老总3年赚42亿,女秘书换12个,知情人士吐露:吃人不吐骨头

陕西老总3年赚42亿,女秘书换12个,知情人士吐露:吃人不吐骨头

悬案解密档案
2025-05-19 14:44:14
800万年薪!杨鸣弃辽宁投北京,铁腕能镇住更衣室吗?

800万年薪!杨鸣弃辽宁投北京,铁腕能镇住更衣室吗?

观星娱记
2026-05-26 12:39:24
中东核基地被炸成火海!伊朗先下手为强,特朗普紧急叫停决战

中东核基地被炸成火海!伊朗先下手为强,特朗普紧急叫停决战

最新声音
2026-05-23 19:32:27
云南高院以涉密决定不公审的贪污案,被证实依据错误

云南高院以涉密决定不公审的贪污案,被证实依据错误

法治边角料
2026-05-25 23:17:16
四川5地登上全国高温榜!今起四川大部有雨,局地有强降水、雷暴大风

四川5地登上全国高温榜!今起四川大部有雨,局地有强降水、雷暴大风

鲁中晨报
2026-05-26 09:10:07
燃气公司上门安检,根本不是查漏气!真实目的其实是这3个

燃气公司上门安检,根本不是查漏气!真实目的其实是这3个

小影的娱乐
2026-05-23 20:32:29
胡彦斌也开始用 AI 写代码了,还说 “Vibe Coding 的都懂这个姿势!” 我怒怼:“花哨,不如我来教你 9 大 AI 编程提效技巧吧!”

胡彦斌也开始用 AI 写代码了,还说 “Vibe Coding 的都懂这个姿势!” 我怒怼:“花哨,不如我来教你 9 大 AI 编程提效技巧吧!”

程序员鱼皮
2026-05-25 22:45:26
B费:我找索帅要了基恩的电话,我不喜欢他歪曲我的言论

B费:我找索帅要了基恩的电话,我不喜欢他歪曲我的言论

懂球帝
2026-05-25 22:03:20
赴陆活动重申“和平兴台”,萧旭岑:台湾人也是堂堂正正的中国人

赴陆活动重申“和平兴台”,萧旭岑:台湾人也是堂堂正正的中国人

海峡导报社
2026-05-26 10:42:25
他建国前战功平平,建国后却立不世之功,毛主席直言堪比三大战役

他建国前战功平平,建国后却立不世之功,毛主席直言堪比三大战役

比利
2026-05-26 10:25:21
准时上硬菜,中国发布5号公告,冯德莱恩沉默,欧盟错失最后机会

准时上硬菜,中国发布5号公告,冯德莱恩沉默,欧盟错失最后机会

游古史
2026-05-26 10:50:36
孙子在我家吃住8年,考上大学我卖房旅游,儿媳:我的钱你凭啥花

孙子在我家吃住8年,考上大学我卖房旅游,儿媳:我的钱你凭啥花

茶余饭后故事会
2026-05-25 11:39:19
刘銮雄又拍卖佳酿卖了3685万,最贵一瓶65万,五年卖酒成交2.75亿

刘銮雄又拍卖佳酿卖了3685万,最贵一瓶65万,五年卖酒成交2.75亿

好贤观史记
2026-05-24 13:21:38
单日票房断崖下跌,《给阿嬷的情书》后继乏力,20亿票房梦要碎了

单日票房断崖下跌,《给阿嬷的情书》后继乏力,20亿票房梦要碎了

影视高原说
2026-05-25 18:21:42
2026-05-26 13:43:00
固件更新中
固件更新中
有态度网友ytd
4745文章数 38关注度
往期回顾 全部

科技要闻

今年秋季,麒麟芯片将首次落地"逻辑折叠"

头条要闻

上海一小区车库土多得离谱 居民吐槽:不敢呼吸

头条要闻

上海一小区车库土多得离谱 居民吐槽:不敢呼吸

体育要闻

上赛季差点降入英甲,下赛季要踢英超了

娱乐要闻

景甜被曝停工失联 富商索要2亿和解费

财经要闻

中国铝行业爆单 下一个“煤炭”大周期?

汽车要闻

纯电续航310km 2026款海狮06DM-i上市售12.99万元起

态度原创

教育
房产
亲子
公开课
军事航空

教育要闻

中小学生2026年入学将迎来“大调整”!教育部新规,9月1日将实行

房产要闻

招商地产接盘碧桂园!海口这个烂尾豪宅,要彻底改命?

亲子要闻

什么牌奶粉好?恬 适 奶 粉 以多维配方助力宝宝舒适成长

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美伊在阿巴斯港附近短暂交火 交战过程披露

无障碍浏览 进入关怀版