网易首页 > 网易号 > 正文 申请入驻

科普|大模型训推一体机:“开箱即用”的人工智能

0
分享至

  新华社北京5月21日电 自美国开放人工智能研究中心(OpenAI)发布聊天机器人程序ChatGPT及其背后的GPT系列大语言模型以来,人工智能大模型热潮持续蔓延,全球科技企业竞相宣布研发或推出自己的大模型,数量迅速增长的大模型如何实现商业化落地成为行业关注焦点。
  除了OpenAI、谷歌等公司采取的提供云端大模型应用程序编程接口(API)的商业模式之外,另一条备受关注的商业化路径是销售“软硬件结合”的大模型训推一体机。这种商业模式在中国市场上热度较高,特别是多家中小型科技企业都推出了大模型训推一体机产品。这类“开箱即用”的人工智能产品可以在企业内进行本地化部署,使最新人工智能技术能够方便地在工业场景中落地应用,实现从人工智能技术到生产力的转化,加速人工智能与产业深度融合。
  大模型训推一体机一般指集成了大模型训练和推理功能的“全栈式”人工智能设备,通常包含中央处理器(CPU)、图形处理器(GPU)、存储器、操作系统、深度学习模型等软硬组件,能通过大规模数据训练掌握数据处理和预测等能力。
  与通过应用程序编程接口使用大模型功能相比,企业利用训推一体机实现大模型部署具有多方面优势。首先,训推一体机可以针对企业的特定业务需求提供“开箱即用”的定制化大模型解决方案,并通过软硬件协同优化提高性能,降低大模型部署、业务方案建设和调适的门槛。例如,佳都科技基于华为“昇腾AI”基础软硬件平台推出了“佳都知行交通行业大模型训推一体机”,可面向轨道交通、城市交通、城市安全等智慧城市重点建设领域,提供智能化、高效实时的解决方案和决策支持。
  其次,由于训推一体机将所有计算资源集中到一台设备上,在大规模数据训练中可大幅减少数据传输时间,提高计算速度和模型训练效率,使企业能够更快捷地使用和管理资源。
  此外,本地化部署的训推一体机能最大程度保障数据隐私和模型安全可控,满足企业对数据安全监管的需求。英国《金融时报》日前报道说,在企业内部署的大模型训推一体机产品正在对一些大型科技企业提供的基于公共云的人工智能服务形成冲击。
  该报道说,近期曝出的人工智能企业安全漏洞加剧了用户对数据安全的担忧。例如,ChatGPT将用户的搜索历史分享给他人,以及韩国三星的员工在使用ChatGPT处理工作时无意间泄露了公司的商业机密等。报道援引中国科大讯飞董事长刘庆峰的话说,机构需要能够保护他们的数据,而建立私有云是防止有价值数据泄露的方法。
  但也有观点认为,训推一体机的性能会受到硬件技术限制,这提高了技术持有和更新的成本。《金融时报》的报道援引半导体行业研究机构SemiAnalysis的首席分析师迪伦·帕特尔的话说,相比于公共云服务或使用应用程序编程接口接入大模型,训推一体机的效率更低下。该模式对人工智能大模型的使用非常零散,这意味着企业持有的昂贵人工智能硬件没有得到充分利用。
  许多企业在衡量利弊后选择了训推一体机,这正在成为中国算力行业的趋势之一。2023年7月,华为联合多家伙伴共同发布“昇腾AI”大模型训推一体化解决方案,加速大模型在各个行业落地应用。目前,科大讯飞等多家中国科技企业都发布了基于华为“昇腾AI”基础软硬件平台的训推一体机产品。
  华为董事、ICT(信息与通信技术)产品与解决方案总裁杨超斌在今年3月举行的华为中国合作伙伴大会上表示,2024年中国区人工智能训推一体机市场规模有望达到168亿元人民币。(完)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
几乎全是假货!利润却高达650%,为何消费者还前赴后继争相购买?

几乎全是假货!利润却高达650%,为何消费者还前赴后继争相购买?

贾文彬的史书
2024-05-27 22:02:47
“我希望爸爸早点死”,5岁男孩许下生日愿望后,永远合上了眼睛

“我希望爸爸早点死”,5岁男孩许下生日愿望后,永远合上了眼睛

华人星光
2024-05-31 16:30:46
美国女预言家:曾准确预测美国总统寿命,也曾对中国进行预言

美国女预言家:曾准确预测美国总统寿命,也曾对中国进行预言

祥瑞
2024-06-02 00:53:59
美国就差直接骂人了!美媒评076:造了一个怪物

美国就差直接骂人了!美媒评076:造了一个怪物

杂谈天下式
2024-05-31 00:28:49
章子怡突然高调宣布喜讯!这个瓜,整个娱乐圈都羡慕不来的

章子怡突然高调宣布喜讯!这个瓜,整个娱乐圈都羡慕不来的

柴叔带你看电影
2024-06-03 16:54:42
太狠了!盘中收问询函,闪崩20cm跌停涌出8亿,20万手焊牢地板

太狠了!盘中收问询函,闪崩20cm跌停涌出8亿,20万手焊牢地板

惜别的海岸
2024-06-03 14:48:49
沙俄仅用50多年,让我国领土损失300多万平方公里,失地比印度面积还大

沙俄仅用50多年,让我国领土损失300多万平方公里,失地比印度面积还大

黎庶文史
2024-04-15 23:30:10
李健开演唱会妻子罕现身,下楼梯紧牵手,孟小蓓半年胖30斤变圆润

李健开演唱会妻子罕现身,下楼梯紧牵手,孟小蓓半年胖30斤变圆润

缘浅娱深
2024-06-03 17:55:26
A股知名国企原董事长,被立案调查!涉嫌职务违法

A股知名国企原董事长,被立案调查!涉嫌职务违法

证券时报e公司
2024-06-03 20:03:02
逆天!又有大叔被质疑偷拍,拿手机自证后反被女生斥责:不管你手机里有没有记录

逆天!又有大叔被质疑偷拍,拿手机自证后反被女生斥责:不管你手机里有没有记录

可达鸭面面观
2024-06-02 09:09:44
闹大了!河北三家3口被当街杀害,知情人透露是5万块钱惹的祸

闹大了!河北三家3口被当街杀害,知情人透露是5万块钱惹的祸

亦纯杂谈
2024-06-02 13:47:59
“这里不是中国!不会有人惯你们!”中国大妈已经沦落成世界公害

“这里不是中国!不会有人惯你们!”中国大妈已经沦落成世界公害

三月柳
2024-06-01 15:24:12
证券市场传来3消息,一条比一条重磅,A股明天必让股民大吃一惊!

证券市场传来3消息,一条比一条重磅,A股明天必让股民大吃一惊!

静守时光落日
2024-06-03 11:53:09
荷兰发达到什么程度?人口仅1700万,却已经拥有12个世界五百强!

荷兰发达到什么程度?人口仅1700万,却已经拥有12个世界五百强!

美人茶话会
2024-06-02 21:36:09
医生呼吁:过了65岁的人,宁可在家里躺着,也不要出门做这2件事

医生呼吁:过了65岁的人,宁可在家里躺着,也不要出门做这2件事

今日养生之道
2024-06-01 20:15:52
中国曾三次忍辱负重“装孙子”,完美躲过美国制裁!最终迎来崛起

中国曾三次忍辱负重“装孙子”,完美躲过美国制裁!最终迎来崛起

猫眼观史
2024-05-16 18:11:46
当普通人都感觉经济很难的时候,其实经济危机早就全面爆发了

当普通人都感觉经济很难的时候,其实经济危机早就全面爆发了

芯怡飞
2024-06-01 14:19:03
不出5年,中国贬值最快的不是房子、股票,而是这3个东西

不出5年,中国贬值最快的不是房子、股票,而是这3个东西

庞明说财经
2024-04-16 22:29:34
A股:种种迹象表明,明天周二,市场或将迎来变盘信号!

A股:种种迹象表明,明天周二,市场或将迎来变盘信号!

趋势向阳
2024-06-03 21:29:43
大s哭麻了!儿童节箖箖与奶奶张兰连线,希望奶奶赚100w超温馨!

大s哭麻了!儿童节箖箖与奶奶张兰连线,希望奶奶赚100w超温馨!

八卦爱侃娱
2024-06-02 10:36:09
2024-06-04 00:06:44
新华社
新华社
新华社是国家通讯社
468555文章数 2397645关注度
往期回顾 全部

科技要闻

特斯拉回应单踏板模式可能被禁止:暂无影响

头条要闻

中方被指在中俄天然气项目提不合理诉求 外交部回应

头条要闻

中方被指在中俄天然气项目提不合理诉求 外交部回应

体育要闻

休假期运作展望<射手篇>

娱乐要闻

混战升级!编剧赵冬苓力挺王阳遭围攻

财经要闻

接班100天,宗馥莉急了

汽车要闻

搭载华为HiCAR 传祺M6 MAX售14.58万元

态度原创

家居
房产
时尚
旅游
公开课

家居要闻

静谧极简 让空间回归本质

房产要闻

12000+起!海口40+楼盘,最新价格曝光!

今年流行“五五分”穿法,太时髦了!

旅游要闻

哈尔滨至香港航线正式开通

公开课

近视只是视力差?小心并发症

无障碍浏览 进入关怀版