网易首页 > 网易科技 > 网易科技 > 正文

最强开源大模型亮相:开发2个月,花费约1000万美元

0
分享至

3月28日消息,美国当地时间周三,企业软件公司Databricks宣布推出了新的开源人工智能模型DBRX,声称这一模型在开源人工智能领域的效率和性能上树立了新的行业标准。

Databricks宣称,DBRX模型拥有1320亿个参数,在语言理解、编程和数学技能等关键领域的基准测试中,其性能超过了其他领先的开源人工智能模型,包括Meta的Llama 2-70B和法国初创企业Mixtral AI的模型。


虽然DBRX在某些原始功能上还无法与OpenAI的GPT-4相比,但Databricks高管表示,DBRX无疑是一个功能远超GPT-3.5的替代产品,并且成本只是GPT-3.5的一小部分。

Databricks的首席执行官阿里·戈德西(Ali Ghodsi)在新闻发布会上表示:“我们非常高兴能向全世界展示DBRX,并带动整个行业向更强大、更高效的开源人工智能方向前进。虽然GPT-4这类基础模型无疑是极其优秀的通用工具,但Databricks专注于为客户量身打造模型,这些模型能深入解析他们的专有数据。DBRX的发布正体现了我们实现该目标的决心。”

创新的“专家混合”架构

Databricks的研究团队揭示了DBRX模型的关键创新之处——“专家混合”架构。这一架构使DBRX与其他竞争模型显著不同,后者往往利用所有参数生成每个单词。相较而言,DBRX巧妙地整合了16个专家子模型,并在实时处理中为每个token准确挑选最相关的四个子模型。

这种设计的巧妙之处在于,它使DBRX在任何时刻只需激活360亿个参数,因而实现了更高的性能输出。这不仅显著提高了模型的处理速度,还大幅降低了运行成本,使其更为高效和经济。

这一创新策略是基于Mosaic团队在早期Mega-MoE项目上的进一步研究而开发的。Mosaic团队是去年被Databricks收购的一个研究部门。

戈德西高度评价了Mosaic团队的贡献,他表示:“多年来,Mosaic团队在更高效训练基础人工智能模型方面取得了显著进步。正是他们的努力让我们能够迅速开发出如DBRX这般卓越的人工智能模型。实际上,开发DBRX只用了约两个月时间,成本大概在1000万美元左右。”

推进Databricks的企业AI战略

通过将DBRX开源,Databricks的目标不仅是在前沿人工智能研究领域确立其领导者地位,而且还希望促进其创新架构在整个行业中的更广泛采用。此外,DBRX也致力于支持Databricks的核心业务——为客户定制和托管基于其专有数据集的人工智能模型。

在如今的市场环境中,很多Databricks的客户都依赖于OpenAI及其他供应商提供的GPT-3.5等模型来支撑其业务运作。然而,将敏感的企业数据托管给第三方,常常会激起关于安全性和合规性的一系列担忧。

针对这一点,戈德西表示:“我们的客户相信,Databricks能够妥善处理跨国界数据监管的问题。他们已在Databricks平台上存储并管理了庞大数据量。现在,有了DBRX以及Mosaic的定制模型功能,客户们能够在保障数据安全的同时,充分利用先进人工智能技术带来的诸多益处。”

在日益激烈的竞争中占据一席之地

随着DBRX的推出,Databricks在核心数据和人工智能平台业务领域面临着激烈的竞争。竞争对手诸如数据仓库巨头Snowflake已通过推出自有的人工智能服务Cortex,复制了Databricks的部分功能。同时,亚马逊、微软和谷歌等领先的云计算服务供应商也正纷纷在其技术堆栈中集成生成式人工智能功能。

Databricks借助其开创性的开源项目DBRX,自诩具备最前沿的人工智能研究能力,旨在确立自身作为该领域领导者的地位,并吸引顶尖的数据科学人才。这一策略也反映了人们对大型科技公司将人工智能模型商业化的越来越多的抵制,许多人批评这些商业模型像“黑盒子”,缺乏透明度和可解释性。

DBRX面临的真正挑战在于市场的接受程度以及它为Databricks客户所创造的具体价值。在企业越来越多寻求利用人工智能推动业务增长和创新的同时,还要保持对自有数据的控制,Databricks赌注于其尖端研究与企业级平台的完美融合能够让它在竞争中脱颖而出。

Databricks已经向大型科技公司及开源社区的竞争对手抛出了挑战,要求他们在创新上与其一较高下。人工智能领域的竞争日趋激烈,而Databricks已明确宣布其志在成为这场竞争的关键力量。(小小)

延伸阅读
相关推荐
热点推荐
很多地方把“为人民服务”变成“为大局服务”,这两者有啥区别?

很多地方把“为人民服务”变成“为大局服务”,这两者有啥区别?

翻开历史和现实
2024-04-25 13:12:17
蒙古国宣布:2025年恢复使用传统蒙古文,与内蒙古实现语言相通?

蒙古国宣布:2025年恢复使用传统蒙古文,与内蒙古实现语言相通?

我是斌哥哥
2024-04-27 11:29:21
队记:如果快船得到的是这个版本的莱昂纳德 那他G4最好别上了

队记:如果快船得到的是这个版本的莱昂纳德 那他G4最好别上了

直播吧
2024-04-27 11:00:30
“为大局服务”,到底什么才是大局呢?有网友想到答案!

“为大局服务”,到底什么才是大局呢?有网友想到答案!

翻开历史和现实
2024-04-26 14:51:46
博主们春夏照片里无所谓的轻松慵懒劲儿,怎么总有它?

博主们春夏照片里无所谓的轻松慵懒劲儿,怎么总有它?

创作者_WCD3
2024-04-25 20:12:44
犯人在监狱里最真实的生活有多惊人?网友:晚上根本不敢睡

犯人在监狱里最真实的生活有多惊人?网友:晚上根本不敢睡

大宗看萌宠
2024-04-27 15:02:00
0-1!U23亚洲杯越南出局!别吹越南足球了,他们还不是国足的菜

0-1!U23亚洲杯越南出局!别吹越南足球了,他们还不是国足的菜

体育世界
2024-04-27 03:58:27
下一站切尔西!穆里尼奥收三年合同,高层给出承诺,球迷笑了

下一站切尔西!穆里尼奥收三年合同,高层给出承诺,球迷笑了

祥谈体育
2024-04-27 15:57:14
小伙来义乌造爆款,一年卖出6000万,“70%的爆款来自我的工厂”

小伙来义乌造爆款,一年卖出6000万,“70%的爆款来自我的工厂”

电商在线
2024-04-26 20:32:12
最新|许家印的保护伞被查了!

最新|许家印的保护伞被查了!

前沿科技学习分享圈
2024-04-27 14:59:29
“男子帮被打女子报警被砍成重伤”调查:两打人者最高被判3年半,家属称将起诉索赔

“男子帮被打女子报警被砍成重伤”调查:两打人者最高被判3年半,家属称将起诉索赔

红星新闻
2024-04-26 12:23:48
替补出战轰21+6+1!快船队第6人得分超3巨头总和,比肩哈登太关键

替补出战轰21+6+1!快船队第6人得分超3巨头总和,比肩哈登太关键

熊哥篮球
2024-04-27 18:44:56
1987年12月,英国王室晚宴上,陈冲和戴安娜王妃的罕见合影

1987年12月,英国王室晚宴上,陈冲和戴安娜王妃的罕见合影

视点历史
2024-04-25 20:36:32
刺激消费不成,就开始明抢?92号汽油逼近九元大关,何等的疯狂?

刺激消费不成,就开始明抢?92号汽油逼近九元大关,何等的疯狂?

鹏飞深文
2024-04-25 12:54:30
男子2000元搞定女邻居,发生20次关系后,女子终于兽性大发

男子2000元搞定女邻居,发生20次关系后,女子终于兽性大发

娱乐小可爱蛙
2024-04-27 14:02:03
“内控重大缺陷”!会计师事务所出具否定意见,这家A股公司将戴帽!

“内控重大缺陷”!会计师事务所出具否定意见,这家A股公司将戴帽!

证券时报e公司
2024-04-27 08:26:17
国际奥委会主席:涉案中国游泳选手可参与巴黎奥运会

国际奥委会主席:涉案中国游泳选手可参与巴黎奥运会

花非花008
2024-04-27 16:46:04
首次披露!韩树旺、杨晓明,涉嫌严重违纪违法,被罢免这一职务

首次披露!韩树旺、杨晓明,涉嫌严重违纪违法,被罢免这一职务

政知新媒体
2024-04-26 21:37:04
赖清德喊话中国,让大陆接纳台湾民进党政府,两岸展开自信交流

赖清德喊话中国,让大陆接纳台湾民进党政府,两岸展开自信交流

慕容青霄
2024-04-26 13:11:32
办完退休手续,中午独自一人吃了碗面,终于明白,人生皆是过客

办完退休手续,中午独自一人吃了碗面,终于明白,人生皆是过客

穷游天下的阿等
2024-04-26 20:32:40
2024-04-27 19:00:49

科技要闻

特斯拉这款车型刚上市几天,就上调价格

头条要闻

去世半年前 90岁老太被摄影师外孙女爆改成"19岁少女"

头条要闻

去世半年前 90岁老太被摄影师外孙女爆改成"19岁少女"

体育要闻

时代要落幕了?詹姆斯杜兰特陷0-3绝境

娱乐要闻

金靖回应不官宣恋情结婚的原因

财经要闻

北京房价回到2016年

汽车要闻

5月上市/智能化丰富 海狮 07EV正式到店

态度原创

本地
时尚
教育
艺术
公开课

本地新闻

蛋友碰碰会空降西安!5.1山海境等你!

七八十岁男人,尽量别穿“背心+大裤衩”出门,显老油腻、很邋遢

教育要闻

闹大了!公务员聘用全是有留英背景的毕业生,网友纷纷质疑合理性

艺术要闻

画廊周北京迎来第八年, “漂留” 主题聚集 30 余家艺术机构与 40 场展览

公开课

睡前进食会让你发胖吗?

无障碍浏览 进入关怀版
×