网易首页 > 网易号 > 正文 申请入驻

“美国最该尴尬的,是今天中国开源模型们重大的贡献”

0
分享至


作者 | 张潇雪
邮箱 | JessicaZhang@pingwest.com

最近在许多美国开发者的口中,一个开源模型经常被提及,它的发音听起来是“困”。乍一听到总让人一头雾水。哪个开发者天天用中文说困啊。

其实,这就是阿里的开源模型通义千问,这个取自拼音缩写的名字Qwen,被老外自成一体给了一个新发音。

除了Qwen,还有好几个国产开源大模型在海外激战正酣,并且频繁刷新各项benchmarks,呼声和反响甚至比在国内还高。这些来自中国团队的开源模型们不仅不“困”还进展飞速。

Stability AI研究主管Tanishq Mathew Abraham干脆发文提醒道:“许多最具竞争力的开源大模型,包括Owen、Yi、InternLM、Deepseek、BGE、CogVLM 等正是来自中国。关于中国在人工智能领域落后的说法完全不属实。相反,他们正在为生态系统和社区做出重大贡献。”


那到底现如今,中国的开源大模型们厉害到什么程度?下面逐一来看。

1

通义千问:登顶主流开源榜,八种尺寸个个能打

5月9日,阿里云正式发布地表最强中文开源大模型通义千问2.5。相较上一版本,2.5版模型的理解能力、逻辑推理、指令遵循、代码能力分别提升9%、16%、19%、10%,中文语境下性能“全面赶超 GPT-4”。

上月底,团队刚开源了Qwen1.5系列首个千亿参数级别模型Qwen1.5-110B,能处理 32K tokens 上下文长度,支持英、中、法、西、德等多种语言。技术上采用Transformer架构,并具有高效的分组查询注意力机制。基础能力可逼近Meta-Llama3-70B和Mixtral-8x22B,在MT-Bench和AlpacaEval 2.0的聊天场景评估中也表现出色。


Liquid AI高级机器学习科学家Maxime Labonne看了表示:“太疯狂了。Qwen1.5-110B在 MMLU 上的得分竟然高于‘性能野兽’ Llama 3 70B的instruct版本。微调后它将有可能成为最强开源SOTA模型,至少能和Llama 3媲美。”


Qwen1.5-110B还曾凭实力登顶Hugging Face 开源大模型榜首。


实际上,自从通义千问去年8月宣布“全模态、全尺寸”开源路线以来,就开始马不停蹄地迭代狂飙,强势闯入海外AI开发者社区的视野。

为满足不同场景需求,通义一共推出横跨5亿到1100亿参数规模的八款大模型,小尺寸如0.5B、1.8B、4B、7B、14B可以在端侧设备便捷部署;大尺寸如72B、110B能支持企业和科研级应用;而32B的中等尺寸则力求在性能、效率和内存之间找到最佳性价比。

在各种尺寸的灵活选择下,通义千问其它参数的模型性能也好评如潮。

其中Qwen-1.5 72B曾在业界兵家必争之地:LMSYS Org推出的基准测试平台Chatbot Arena上夺冠,Qwen-72B也多次进入“盲测”对战排行榜全球前十。


推特大V 、Abacus.AI公司创始人和首席执行官Bindu Reddy直接挂出Qwen-72B的基准测试成绩兴奋地说:“开源的 Qwen-72B 在一些benchmarks上击败了 GPT-4!中国正在回击困扰美国的AI公司垄断!加入全球开源革命吧!”


另有网友指出Qwen-72B基础模型在VMLU ,也就是越南语版本的MMLU上无需微调、开箱即用,即可达到与 GPT-4 相同分数的最先进水平。


较小参数的Qwen家族成员更是备受欢迎。

在Hugging Face平台上,Qwen1.5-0.5B-Chat和CodeQwen1.5-7B-Chat- GGUF上月分别获得22.6万次和20万次下载量。包括Qwen1.5-1.8B和Qwen1.5-32B在内的5个模型上月下载量都在10万次以上。(总共发布76个模型版本,也真的堪称行业劳模。)


我们还注意到,在今天很多的对模型性能进行分析的论文中,Qwen也几乎成为必选的分析标的,成为开发者和研究者默认的最有代表性的模型之一。

1

DeepSeek V2:大模型届的“拼多多”

5月6日,私募巨头幻方量化旗下的AI公司深度求索发布全新第二代MoE大模型DeepSeek-V2,模型论文双开源。

其性能在AlignBench排行榜中位列前三,超过GPT-4且接近GPT-4-Turbo。MT-Bench中属于顶尖级别,与LLaMA3-70B比肩,远胜Mixtral 8x22B。支持 128K 的上下文窗口,专精于数学、代码和推理任务。

除了采用MoE架构,DeepSeek V2还创新了Multi-Head Latent Attention机制。在总共 236B 参数中,仅激活21B 用于计算。计算资源消耗仅为Llama 3 70B 的五分之一,GPT-4 的二十之一。


除了高效推理,最炸裂的是,它实在太物美价廉了。

DeepSeek V2在能力直逼第一梯队闭源模型的前提下, API定价降到每百万tokens输入1元、输出2元(32K上下文),仅为Llama3 70B七分之一,GPT-4 Turbo的近百分之一,完全就是价格屠夫。


便宜归便宜,DeepSeek却并不赔钱。它在 8 x H800 GPU 的机器上可以实现每秒5万tokens峰值吞吐。按输出API 价格计算,相当于每个节点每小时收入50.4 美元。国内 8xH800 节点的成本约 15 美元/小时,因此假设利用率完美,DeepSeek 每台服务器每小时的利润高达 35.4 美元,毛利率可达 70% 以上。

另外DeepSeek平台还提供与OpenAI兼容的 API,注册就送500万tokens。

——高效、好用、击穿地板的价位,不正是开源社区迫切需要的吗?

这直接引起权威半导体研究和咨询公司SemiAnalysis高度关注,5月7日发长文点名DeepSeek V2是“东方崛起的神秘力量”,凭超高性价比对其它模型实现“经济学碾压”,指出“OpenAI和微软的行业挑战可能不只来自美国。”


Hugging Face技术主管Philipp Schmid在X发文,列出DeepSeek V2各项技能点向社区隆重推荐。上线仅四天,Hugging Face上的下载量已达3522次,在GitHub也瞬间收获1200颗星星。


1

面壁智能:另辟蹊径、以小博大

在通往 AGI 的路上,有的像DeepSeek这样面对算力为王,主攻经济高效;也有像通义千问那样全面开花,布局各种模型规模;但绝大多数公司的路线是遵循Scaling Law,狂卷大参数。

而面壁智能却在走一条相反的路线:尽可能把参数做小。以更低的部署门槛、更低的使用成本让模型效率最大化,“以小博大”。

今年2 月 1 日,面壁智能推出只有24亿参数量的 MiniCPM-2B模型,不仅整体领先于同级别Google Gemma 2B,还超越了性能标杆之作 Mistral-7B,且部分胜过大参数的Llama2-13B、Llama2-70B-Chat等。

在海外社区开源后,Hugging Face联合创始人Thomas Wolf紧接着发文说,“中国出现了一系列令人惊叹的技术报告和开源模型,比如 DeepSeek、MiniCPM、UltraFeedback...它们的数据和实验结果都被公开分享,这种对知识的坦诚分享在最近的西方科技模型发布中已经丢失了。”

网友转发赞同:“MiniCPM 实在令人印象深刻,拥有 20 亿参数,并从这么微小的模型中获得了最佳结果。”


另一位同读过MiniCPM模型论文的网友更是激动盛赞,“面壁智能正掀起一场改变游戏规则的革命。”

“想象一下,在你口袋里拥有强大的人工智能,而不仅仅是云端。MiniCPM-2B 不是普通的模型。它只拥有 24 亿参数,却超越了自己 5 倍大的巨人!尺寸并不是唯一标准,关键在于如何利用它。这就是边缘人工智能未来的愿景,可能重新定义我们与技术的互动。”


70天后,面壁智能乘胜追击,继续发布了新一代“能跑在手机上的最强端侧多模态大模型”MiniCPM-V 2.0,参数规模 2.8B。

据其在Hugging Face上介绍,MiniCPM-V 2.0 在包括 OCRBench、TextVQA、MME在内的多个基准测试中都达到了开源社区最佳水平。在覆盖 11 个流行基准测试的OpenCompass 综合评估上,它的性能超过Qwen-VL-Chat 9.6B、CogVLM-Chat 17.4B 和 Yi-VL 34B。甚至在场景文字理解方面已接近 Gemini Pro 的性能。

1

“与Mistral们相比,中国的许多模型是真的在开源”

除了以上提到的DeepSeek、Qwen和MiniCPM,上海人工智能实验室和商汤联合研发的InternLM、零一万物的Yi系列、智谱AI的多模态大模型CogVLM等等中国的开源模型也在开发者社区里备受欢迎。

人们在推特还特别讨论到,由于中英文间的语言障碍,海外通常能看到中国大模型也只是发布的一部分,太多AI应用和集成没有被完全展现。推测这些模型在中文上表现应该比英文更好。但即便如此,它们在英文基准测试上已具备相当的有竞争力。


还有人提出,自己属实被过去一年中Arxiv上AI论文里中文署名作者的庞大数量震惊到了。


前斯坦福兼职讲师、Claypot AI联合创始人Chip Huyen在调研过900个流行开源AI工具后,在个人博客中分享自己的发现:“在GitHub排名前20的账户中,有6个源自中国。


开源的一个好处就是让阴谋论无法继续。

OpenAI早期投资人Vinod Khosla曾在X发文称,美国的开源模型都会被中国抄去。

但这番言论马上被Meta的AI教父Yann LeCun反驳:“AI不是武器。无论我们是否把技术开源,中国都不会落后。他们会掌控自己的人工智能,开发自己的本土技术堆栈。”


而且,在开源的诚意上,中国模型也开始被开发者认可。有在斯坦福读书的同学也分享到,教授在课堂上大力称赞中国开源模型,特别是开诚布公地与社区积极分享成果,跟欧美一些头顶“开源”名号的明星公司不同。有网友也表达了和这个教授相似的观点,“美国最该尴尬的,是今天中国开源模型们重大的贡献”。


大模型技术的发展中开源注定将继续扮演重要的推动角色,而且这也是首次有开源和闭源技术几乎齐头并进的景象出现。在这股浪潮里,中国的开源贡献者正在通过一个个更有诚意的开源产品给全球社区做着贡献。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
人民币结算伊朗石油首单,美国想退回金本位,我国有多少黄金储备

人民币结算伊朗石油首单,美国想退回金本位,我国有多少黄金储备

说故事的阿袭
2024-05-23 07:55:26
撤销ST第3天!连续3个天板,300万手封单,股民惜售明显

撤销ST第3天!连续3个天板,300万手封单,股民惜售明显

惜别的海岸
2024-05-23 10:25:56
结束2年任期?曝曼联确定解雇滕哈格!否决穆帅回归,新帅或3选1

结束2年任期?曝曼联确定解雇滕哈格!否决穆帅回归,新帅或3选1

我爱英超
2024-05-23 00:00:56
美国空军发布首批B-21轰炸机飞行照片

美国空军发布首批B-21轰炸机飞行照片

发现与发掘
2024-05-23 07:25:02
一部代表作都没有,却能高高在上当评委,小丑的闹剧何时才能结束

一部代表作都没有,却能高高在上当评委,小丑的闹剧何时才能结束

四川囧囧呀
2024-05-22 23:59:53
6月开始,新一轮“涨价潮”要来?4样东西或大涨,早看早准备

6月开始,新一轮“涨价潮”要来?4样东西或大涨,早看早准备

平说财经
2024-05-22 15:07:14
多挣4100万!华子和哈利伯顿的合同都从5年2.04亿变为5年2.45亿

多挣4100万!华子和哈利伯顿的合同都从5年2.04亿变为5年2.45亿

直播吧
2024-05-23 08:13:09
北京一家七口集体失联,亲戚爬窗查看,一眼魂飞天外

北京一家七口集体失联,亲戚爬窗查看,一眼魂飞天外

世异时移
2024-05-23 05:16:39
印度男子靠整容逆天改命,成为宝莱坞新一代男神,曾在迪拜留学

印度男子靠整容逆天改命,成为宝莱坞新一代男神,曾在迪拜留学

听瓜瓜讲故事
2024-05-20 22:09:44
5月23日今天有国乒直播吗?CCTV5现场直播WTT太原挑战赛吗?

5月23日今天有国乒直播吗?CCTV5现场直播WTT太原挑战赛吗?

阳阳聊情感
2024-05-23 11:21:20
南北身高差在这一刻具象化,广东辽宁小学生打篮球赛,评论笑疯了

南北身高差在这一刻具象化,广东辽宁小学生打篮球赛,评论笑疯了

熙熙说教
2024-05-21 17:09:48
刘大锤爆料汪峰章子怡离婚原因:不是因为男方

刘大锤爆料汪峰章子怡离婚原因:不是因为男方

未来不可欺
2024-05-22 09:36:28
彻底撕破脸!汪小菲深夜再失控,大s的终极大料或已曝光

彻底撕破脸!汪小菲深夜再失控,大s的终极大料或已曝光

娱乐八卦木木子
2024-05-20 20:31:06
芬兰和立陶宛彻底傻眼,俄罗斯宣布不承认与两国的海上边界

芬兰和立陶宛彻底傻眼,俄罗斯宣布不承认与两国的海上边界

体坛片语
2024-05-22 20:46:31
“轰轰烈烈”的大食堂,突然没了音讯,有什么不对劲儿的吗?

“轰轰烈烈”的大食堂,突然没了音讯,有什么不对劲儿的吗?

花小萌和你聊情感
2024-05-22 07:10:28
马兴瑞、袁家军、徐麟,有统一动作

马兴瑞、袁家军、徐麟,有统一动作

政知新媒体
2024-05-22 21:35:56
杨丽萍上台没穿衣服?服装都是彩绘的,镜头放大时有点“抢眼”

杨丽萍上台没穿衣服?服装都是彩绘的,镜头放大时有点“抢眼”

元芳
2024-05-22 09:33:45
硬气!“你已进入我火力范围!”台媒披露解放军拦截不明飞机语音

硬气!“你已进入我火力范围!”台媒披露解放军拦截不明飞机语音

点兵
2024-05-22 23:45:00
徐梓钧真的太美了,但高亚麟你也太糊涂了!

徐梓钧真的太美了,但高亚麟你也太糊涂了!

阿芒娱乐说
2024-05-08 21:44:22
直击“抓嫖新科技”,看完后你还敢去特殊场所玩吗?

直击“抓嫖新科技”,看完后你还敢去特殊场所玩吗?

华庭讲美食
2024-05-22 07:10:21
2024-05-23 13:42:44
硅星人
硅星人
硅(Si)是创造未来的基础,欢迎来到这个星球。
1266文章数 10249关注度
往期回顾 全部

科技要闻

英伟达狂飙 黄仁勋说要开启"新的工业革命"

头条要闻

岛内关注东部战区联合演训:围岛军演比想象中更快出现

头条要闻

岛内关注东部战区联合演训:围岛军演比想象中更快出现

体育要闻

张氏父子的一场大梦

娱乐要闻

大S儿子被学校退学,张兰称孙子没人管

财经要闻

英伟达Q1收入猛增三倍、利润翻五倍!

汽车要闻

上汽大通大家7超混/大家9超混将于6月7日正式上市

态度原创

艺术
本地
游戏
手机
军事航空

艺术要闻

穿越时空的艺术:《马可·波罗》AI沉浸影片探索人类文明

本地新闻

强制措施展铁腕 “交叉执行”勇亮剑

坤哥爆料《COD》新作主视图:《冷战》阿德勒或回归?

手机要闻

智云 SMOOTH 5S Ai 云台上市:水晶机身、磁吸跟拍,849 元起

军事要闻

以军继续杰宁攻势 巴武装组织打击以目标

无障碍浏览 进入关怀版