网易首页 > 网易号 > 正文 申请入驻

“美国最该尴尬的,是今天中国开源模型们重大的贡献”

0
分享至


作者 | 张潇雪
邮箱 | JessicaZhang@pingwest.com

最近在许多美国开发者的口中,一个开源模型经常被提及,它的发音听起来是“困”。乍一听到总让人一头雾水。哪个开发者天天用中文说困啊。

其实,这就是阿里的开源模型通义千问,这个取自拼音缩写的名字Qwen,被老外自成一体给了一个新发音。

除了Qwen,还有好几个国产开源大模型在海外激战正酣,并且频繁刷新各项benchmarks,呼声和反响甚至比在国内还高。这些来自中国团队的开源模型们不仅不“困”还进展飞速。

Stability AI研究主管Tanishq Mathew Abraham干脆发文提醒道:“许多最具竞争力的开源大模型,包括Owen、Yi、InternLM、Deepseek、BGE、CogVLM 等正是来自中国。关于中国在人工智能领域落后的说法完全不属实。相反,他们正在为生态系统和社区做出重大贡献。”


那到底现如今,中国的开源大模型们厉害到什么程度?下面逐一来看。

1

通义千问:登顶主流开源榜,八种尺寸个个能打

5月9日,阿里云正式发布地表最强中文开源大模型通义千问2.5。相较上一版本,2.5版模型的理解能力、逻辑推理、指令遵循、代码能力分别提升9%、16%、19%、10%,中文语境下性能“全面赶超 GPT-4”。

上月底,团队刚开源了Qwen1.5系列首个千亿参数级别模型Qwen1.5-110B,能处理 32K tokens 上下文长度,支持英、中、法、西、德等多种语言。技术上采用Transformer架构,并具有高效的分组查询注意力机制。基础能力可逼近Meta-Llama3-70B和Mixtral-8x22B,在MT-Bench和AlpacaEval 2.0的聊天场景评估中也表现出色。


Liquid AI高级机器学习科学家Maxime Labonne看了表示:“太疯狂了。Qwen1.5-110B在 MMLU 上的得分竟然高于‘性能野兽’ Llama 3 70B的instruct版本。微调后它将有可能成为最强开源SOTA模型,至少能和Llama 3媲美。”


Qwen1.5-110B还曾凭实力登顶Hugging Face 开源大模型榜首。


实际上,自从通义千问去年8月宣布“全模态、全尺寸”开源路线以来,就开始马不停蹄地迭代狂飙,强势闯入海外AI开发者社区的视野。

为满足不同场景需求,通义一共推出横跨5亿到1100亿参数规模的八款大模型,小尺寸如0.5B、1.8B、4B、7B、14B可以在端侧设备便捷部署;大尺寸如72B、110B能支持企业和科研级应用;而32B的中等尺寸则力求在性能、效率和内存之间找到最佳性价比。

在各种尺寸的灵活选择下,通义千问其它参数的模型性能也好评如潮。

其中Qwen-1.5 72B曾在业界兵家必争之地:LMSYS Org推出的基准测试平台Chatbot Arena上夺冠,Qwen-72B也多次进入“盲测”对战排行榜全球前十。


推特大V 、Abacus.AI公司创始人和首席执行官Bindu Reddy直接挂出Qwen-72B的基准测试成绩兴奋地说:“开源的 Qwen-72B 在一些benchmarks上击败了 GPT-4!中国正在回击困扰美国的AI公司垄断!加入全球开源革命吧!”


另有网友指出Qwen-72B基础模型在VMLU ,也就是越南语版本的MMLU上无需微调、开箱即用,即可达到与 GPT-4 相同分数的最先进水平。


较小参数的Qwen家族成员更是备受欢迎。

在Hugging Face平台上,Qwen1.5-0.5B-Chat和CodeQwen1.5-7B-Chat- GGUF上月分别获得22.6万次和20万次下载量。包括Qwen1.5-1.8B和Qwen1.5-32B在内的5个模型上月下载量都在10万次以上。(总共发布76个模型版本,也真的堪称行业劳模。)


我们还注意到,在今天很多的对模型性能进行分析的论文中,Qwen也几乎成为必选的分析标的,成为开发者和研究者默认的最有代表性的模型之一。

1

DeepSeek V2:大模型届的“拼多多”

5月6日,私募巨头幻方量化旗下的AI公司深度求索发布全新第二代MoE大模型DeepSeek-V2,模型论文双开源。

其性能在AlignBench排行榜中位列前三,超过GPT-4且接近GPT-4-Turbo。MT-Bench中属于顶尖级别,与LLaMA3-70B比肩,远胜Mixtral 8x22B。支持 128K 的上下文窗口,专精于数学、代码和推理任务。

除了采用MoE架构,DeepSeek V2还创新了Multi-Head Latent Attention机制。在总共 236B 参数中,仅激活21B 用于计算。计算资源消耗仅为Llama 3 70B 的五分之一,GPT-4 的二十之一。


除了高效推理,最炸裂的是,它实在太物美价廉了。

DeepSeek V2在能力直逼第一梯队闭源模型的前提下, API定价降到每百万tokens输入1元、输出2元(32K上下文),仅为Llama3 70B七分之一,GPT-4 Turbo的近百分之一,完全就是价格屠夫。


便宜归便宜,DeepSeek却并不赔钱。它在 8 x H800 GPU 的机器上可以实现每秒5万tokens峰值吞吐。按输出API 价格计算,相当于每个节点每小时收入50.4 美元。国内 8xH800 节点的成本约 15 美元/小时,因此假设利用率完美,DeepSeek 每台服务器每小时的利润高达 35.4 美元,毛利率可达 70% 以上。

另外DeepSeek平台还提供与OpenAI兼容的 API,注册就送500万tokens。

——高效、好用、击穿地板的价位,不正是开源社区迫切需要的吗?

这直接引起权威半导体研究和咨询公司SemiAnalysis高度关注,5月7日发长文点名DeepSeek V2是“东方崛起的神秘力量”,凭超高性价比对其它模型实现“经济学碾压”,指出“OpenAI和微软的行业挑战可能不只来自美国。”


Hugging Face技术主管Philipp Schmid在X发文,列出DeepSeek V2各项技能点向社区隆重推荐。上线仅四天,Hugging Face上的下载量已达3522次,在GitHub也瞬间收获1200颗星星。


1

面壁智能:另辟蹊径、以小博大

在通往 AGI 的路上,有的像DeepSeek这样面对算力为王,主攻经济高效;也有像通义千问那样全面开花,布局各种模型规模;但绝大多数公司的路线是遵循Scaling Law,狂卷大参数。

而面壁智能却在走一条相反的路线:尽可能把参数做小。以更低的部署门槛、更低的使用成本让模型效率最大化,“以小博大”。

今年2 月 1 日,面壁智能推出只有24亿参数量的 MiniCPM-2B模型,不仅整体领先于同级别Google Gemma 2B,还超越了性能标杆之作 Mistral-7B,且部分胜过大参数的Llama2-13B、Llama2-70B-Chat等。

在海外社区开源后,Hugging Face联合创始人Thomas Wolf紧接着发文说,“中国出现了一系列令人惊叹的技术报告和开源模型,比如 DeepSeek、MiniCPM、UltraFeedback...它们的数据和实验结果都被公开分享,这种对知识的坦诚分享在最近的西方科技模型发布中已经丢失了。”

网友转发赞同:“MiniCPM 实在令人印象深刻,拥有 20 亿参数,并从这么微小的模型中获得了最佳结果。”


另一位同读过MiniCPM模型论文的网友更是激动盛赞,“面壁智能正掀起一场改变游戏规则的革命。”

“想象一下,在你口袋里拥有强大的人工智能,而不仅仅是云端。MiniCPM-2B 不是普通的模型。它只拥有 24 亿参数,却超越了自己 5 倍大的巨人!尺寸并不是唯一标准,关键在于如何利用它。这就是边缘人工智能未来的愿景,可能重新定义我们与技术的互动。”


70天后,面壁智能乘胜追击,继续发布了新一代“能跑在手机上的最强端侧多模态大模型”MiniCPM-V 2.0,参数规模 2.8B。

据其在Hugging Face上介绍,MiniCPM-V 2.0 在包括 OCRBench、TextVQA、MME在内的多个基准测试中都达到了开源社区最佳水平。在覆盖 11 个流行基准测试的OpenCompass 综合评估上,它的性能超过Qwen-VL-Chat 9.6B、CogVLM-Chat 17.4B 和 Yi-VL 34B。甚至在场景文字理解方面已接近 Gemini Pro 的性能。

1

“与Mistral们相比,中国的许多模型是真的在开源”

除了以上提到的DeepSeek、Qwen和MiniCPM,上海人工智能实验室和商汤联合研发的InternLM、零一万物的Yi系列、智谱AI的多模态大模型CogVLM等等中国的开源模型也在开发者社区里备受欢迎。

人们在推特还特别讨论到,由于中英文间的语言障碍,海外通常能看到中国大模型也只是发布的一部分,太多AI应用和集成没有被完全展现。推测这些模型在中文上表现应该比英文更好。但即便如此,它们在英文基准测试上已具备相当的有竞争力。


还有人提出,自己属实被过去一年中Arxiv上AI论文里中文署名作者的庞大数量震惊到了。


前斯坦福兼职讲师、Claypot AI联合创始人Chip Huyen在调研过900个流行开源AI工具后,在个人博客中分享自己的发现:“在GitHub排名前20的账户中,有6个源自中国。


开源的一个好处就是让阴谋论无法继续。

OpenAI早期投资人Vinod Khosla曾在X发文称,美国的开源模型都会被中国抄去。

但这番言论马上被Meta的AI教父Yann LeCun反驳:“AI不是武器。无论我们是否把技术开源,中国都不会落后。他们会掌控自己的人工智能,开发自己的本土技术堆栈。”


而且,在开源的诚意上,中国模型也开始被开发者认可。有在斯坦福读书的同学也分享到,教授在课堂上大力称赞中国开源模型,特别是开诚布公地与社区积极分享成果,跟欧美一些头顶“开源”名号的明星公司不同。有网友也表达了和这个教授相似的观点,“美国最该尴尬的,是今天中国开源模型们重大的贡献”。


大模型技术的发展中开源注定将继续扮演重要的推动角色,而且这也是首次有开源和闭源技术几乎齐头并进的景象出现。在这股浪潮里,中国的开源贡献者正在通过一个个更有诚意的开源产品给全球社区做着贡献。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
解放军大规模演习,台军全线溃败!台股票惨遭抛售,外部势力胆寒

解放军大规模演习,台军全线溃败!台股票惨遭抛售,外部势力胆寒

说天说地说实事
2024-05-23 17:25:46
出镜忏悔的“老虎”敛财超4亿!曾说想“搞一点大动静”来“引起上级注意”

出镜忏悔的“老虎”敛财超4亿!曾说想“搞一点大动静”来“引起上级注意”

政知新媒体
2024-05-23 18:41:06
闪崩!俄罗斯天然气彻底凉凉了

闪崩!俄罗斯天然气彻底凉凉了

娱宙观
2024-05-23 14:57:28
巴萨新时代降临:弗里克同意执教,将签约2年!哈维下课在即!

巴萨新时代降临:弗里克同意执教,将签约2年!哈维下课在即!

风过乡
2024-05-23 20:19:57
警号000001落马了,大快人心!

警号000001落马了,大快人心!

华人星光
2024-05-22 15:03:01
姑娘以后别穿这么紧的裤子上街了,走在你身后都不知道往哪看,太尴尬了哈哈哈

姑娘以后别穿这么紧的裤子上街了,走在你身后都不知道往哪看,太尴尬了哈哈哈

匹夫来搞笑
2024-04-28 07:50:20
中国一旦进入战争,这些数字告诉你,只有一个结论:缴械投降

中国一旦进入战争,这些数字告诉你,只有一个结论:缴械投降

蓝婉莹
2024-05-12 02:22:39
许家印的保护伞,终于被查了!

许家印的保护伞,终于被查了!

华人星光
2024-05-23 15:35:13
三次台海军演,从半包围到全包围只要一个战区就能搞定

三次台海军演,从半包围到全包围只要一个战区就能搞定

三叔的装备空间
2024-05-23 15:27:11
罕见!郑树森院士被国际期刊终身禁稿

罕见!郑树森院士被国际期刊终身禁稿

TOP大学来了
2024-05-23 19:57:53
3-0!张本美和打疯了,淘汰中国选手,15岁赢25岁,刘国梁该反思

3-0!张本美和打疯了,淘汰中国选手,15岁赢25岁,刘国梁该反思

足球慢镜头
2024-05-23 18:29:47
霍启刚36岁弟弟即将大婚!泰国女友长相端庄,缅甸老妈朱玲玲力挺

霍启刚36岁弟弟即将大婚!泰国女友长相端庄,缅甸老妈朱玲玲力挺

快乐娱文
2024-05-23 16:18:29
520当天结婚1.4万对,比去年1.6万激增13.4%?四川民政闹出个数学笑话

520当天结婚1.4万对,比去年1.6万激增13.4%?四川民政闹出个数学笑话

可达鸭面面观
2024-05-23 16:35:02
解放军5面包围台岛,美军提前后撤3000公里,台军悲观:已成弃子

解放军5面包围台岛,美军提前后撤3000公里,台军悲观:已成弃子

青年的背包
2024-05-23 17:34:02
曝45岁伏明霞离婚,净身出户原因揭晓,71岁百亿丈夫只说6个字

曝45岁伏明霞离婚,净身出户原因揭晓,71岁百亿丈夫只说6个字

深度知局
2024-05-20 19:25:53
本田车被撞维修近两月,车主日花300元租宝马要肇事者负担,法院判了

本田车被撞维修近两月,车主日花300元租宝马要肇事者负担,法院判了

极目新闻
2024-05-23 12:32:25
中国扩大对美制裁后,美国反应很快来了,美高官:表示强烈反对

中国扩大对美制裁后,美国反应很快来了,美高官:表示强烈反对

影孖看世界
2024-05-23 15:41:18
周冬雨,真实身高只有1米55,周冬雨的身材单薄的像个“小孩”。

周冬雨,真实身高只有1米55,周冬雨的身材单薄的像个“小孩”。

知秋侃史
2024-05-22 04:05:18
副厅级的他,56岁退休、退休5年后“落马”,现涉嫌三项罪名被公诉

副厅级的他,56岁退休、退休5年后“落马”,现涉嫌三项罪名被公诉

极目新闻
2024-05-23 20:20:24
中国制裁12家美企,不到24小时,沙利文发声,否认中国军援俄罗斯

中国制裁12家美企,不到24小时,沙利文发声,否认中国军援俄罗斯

杨门灼见
2024-05-23 17:15:37
2024-05-23 22:00:49
硅星人
硅星人
硅(Si)是创造未来的基础,欢迎来到这个星球。
1266文章数 10249关注度
往期回顾 全部

科技要闻

黄仁勋业绩会万字实录:我们的压力太大了

头条要闻

媒体:大陆对赖清德彻底失望 或先收回几个离岛控制权

头条要闻

媒体:大陆对赖清德彻底失望 或先收回几个离岛控制权

体育要闻

欧文,三十二而立

娱乐要闻

大S儿子被学校退学,张兰称孙子没人管

财经要闻

九鼎金租减值罗生门:郑州银行藏雷?

汽车要闻

上汽大通大家7超混/大家9超混将于6月7日正式上市

态度原创

游戏
时尚
旅游
教育
亲子

一句话得罪80%粉丝!靠女玩家撑起来的Steam游戏,日增2500条差评

去了杭州才发现:满大街都在穿“超短裙+长筒袜”,时髦又显瘦

旅游要闻

日本航空飞机在羽田机场地面与其他飞机发生接触

教育要闻

交警进校快问快答,小学生机智避“坑”

亲子要闻

3岁哥哥生病住院,1岁妹妹做了啥?这一幕太暖心了

无障碍浏览 进入关怀版