网易首页 > 网易号 > 正文 申请入驻

阿里云发布全新多模态交互开发套件 可应用于AI眼镜、机器人等

0
分享至

智通财经APP获悉,据阿里云公众号消息,在阿里云通义智能硬件展上,阿里云全新发布多模态交互开发套件。该套件集成了千问、万相、百聆三款通义基础大模型,并预置十多款生活休闲、工作效率等领域的Agent和MCP工具,除了能听、会看,还能思考并且与物理世界交互,可应用于AI眼镜、学习机、陪伴玩具、智能机器人等硬件设备。

在芯片层面,该套件适配了30多款主流ARM、RISC-V和MIPS架构终端芯片平台,满足市面上绝大多数硬件设备的快速接入需求。未来,通义大模型还将与玄铁RISC-V实现软硬全链路的协同优化,实现通义大模型家族在RISC-V架构上的极致高效部署和推理性能。

在模型优化层面,除通义模型家族外,阿里云还针对大量多模态交互场景进行分析,推出适合AI硬件交互的专有模型,全面支持全双工语音、视频、图文等交互方式,端到端语音交互时延低至1秒,视频交互时延低至1.5秒。

此外,该套件预置十多款MCP工具和Agent,覆盖生活、工作、娱乐、教育等多个场景。例如,基于预置的出行规划Agent,用户可直接调用路线规划、旅行攻略、吃喝玩乐探索等能力。

该套件还接入了阿里云百炼平台生态,用户不仅可以添加其他开发者提供的MCP和Agent模板,还能通过 A2A协议兼容三方Agent,极大程度地扩展了应用的能力边界,帮助企业灵活搭建业务场景。

现场,阿里云还展示了面向智能穿戴设备、陪伴机器人、具身智能等领域的解决方案。例如,在AI眼镜领域,基于千问VL、百聆CosyVoice等模型,阿里云打造了感知层、规划层、执行层以及长期记忆的完整交互链路,可一站式实现同声传译、拍照翻译、多模态备忘录、录音转写功能。

面向家庭陪伴机器人场景,基于千问模型和多模态交互套件,阿里云推出的解决方案不仅可实时监测异常状况,并及时告警信息推送,用户还能基于关键词查找、定位视频,与机器人进行对话交互和控制设备等。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
形势开始大变!西方媒体集体改口:中国已无需再向世界证明什么

形势开始大变!西方媒体集体改口:中国已无需再向世界证明什么

兴史兴谈
2026-04-07 02:48:51
5死!福建私家车坠河,画面曝出,大量隐情披露,一细节令人费解

5死!福建私家车坠河,画面曝出,大量隐情披露,一细节令人费解

温柔看世界
2026-04-07 18:59:09
陈丽华去世48小时内现多件恶心事件

陈丽华去世48小时内现多件恶心事件

晓岇就是我
2026-04-07 20:20:37
黄景瑜和王雨馨 张艺上 迪丽热巴的瓜!

黄景瑜和王雨馨 张艺上 迪丽热巴的瓜!

八卦疯叔
2026-04-05 10:26:43
Cursor 3 发布:IDE 不重要了,智能体控制台上位,VS Code 这一套开始失效

Cursor 3 发布:IDE 不重要了,智能体控制台上位,VS Code 这一套开始失效

InfoQ
2026-04-06 12:00:38
泽连斯基:助力中国崛起的一大功臣

泽连斯基:助力中国崛起的一大功臣

贱议你读史
2026-03-30 06:45:03
韩红减了四十斤,53岁的她确实帅气很多,网友:姐更慈祥了!

韩红减了四十斤,53岁的她确实帅气很多,网友:姐更慈祥了!

草莓解说体育
2026-04-06 01:58:27
24小时内,可能全球巨震

24小时内,可能全球巨震

隔壁老投
2026-04-07 14:27:54
紫色系穿搭:一种不声张的自我表达

紫色系穿搭:一种不声张的自我表达

疾跑的小蜗牛
2026-04-07 23:56:31
“摩”力全开!又一国产,出口爆单!

“摩”力全开!又一国产,出口爆单!

环球网资讯
2026-04-06 07:26:13
菊花和它是绝配!清肝明目,降火又润肺~睡眠也好了~春天养肝正当季!

菊花和它是绝配!清肝明目,降火又润肺~睡眠也好了~春天养肝正当季!

环京快爆
2026-04-07 08:16:07
第四次化债来了!这次和前三次,到底不一样在哪

第四次化债来了!这次和前三次,到底不一样在哪

流苏晚晴
2026-04-07 18:31:23
一空姐机上被打,航司霸气出面:打我家空姐,拉入黑名单

一空姐机上被打,航司霸气出面:打我家空姐,拉入黑名单

中国民航人
2026-04-06 18:10:42
波普一家近照,首发夺2冠,赚1.6亿薪水,娇妻很性感,生了5个娃

波普一家近照,首发夺2冠,赚1.6亿薪水,娇妻很性感,生了5个娃

大西体育
2026-04-07 21:34:21
周杰伦划水争议升级!在日本高亢唱满两小时,国内敷衍兄弟帮唱

周杰伦划水争议升级!在日本高亢唱满两小时,国内敷衍兄弟帮唱

萌神木木
2026-04-07 13:32:18
一条项链7个亿!2亿人贫困背后,印度首富之女戴巨钻亮相奥斯卡

一条项链7个亿!2亿人贫困背后,印度首富之女戴巨钻亮相奥斯卡

果壳
2026-04-07 16:34:19
亚马逊再裁1.4万人:裁员名单完全随机 中国区团队或遭整体裁撤

亚马逊再裁1.4万人:裁员名单完全随机 中国区团队或遭整体裁撤

快科技
2026-04-07 16:39:08
女子假信佛与多位高僧发生不当关系,秘密录制5600段视频。

女子假信佛与多位高僧发生不当关系,秘密录制5600段视频。

特约前排观众
2026-02-09 00:05:05
局势恶化,中方接到高市消息,日本专机将飞越南,对华包围圈成型

局势恶化,中方接到高市消息,日本专机将飞越南,对华包围圈成型

牛锅巴小钒
2026-04-07 17:43:10
港影:从郑伊健“不想红了”说起

港影:从郑伊健“不想红了”说起

唐泪
2026-04-06 15:46:03
2026-04-08 02:12:49
智通财经 incentive-icons
智通财经
全球资本市场财经资讯提供者
1111906文章数 101267关注度
往期回顾 全部

科技要闻

满嘴谎言!OpenAI奥特曼黑料大起底

头条要闻

白宫:美伊谈判进展“只有总统知道实际情况”

头条要闻

白宫:美伊谈判进展“只有总统知道实际情况”

体育要闻

拉门斯:我读过写科比、詹姆斯&乔丹等人的书,学习他们的心态

娱乐要闻

女首富陈丽华离世 被曝生前已分好遗产

财经要闻

10万亿财政转移支付,被谁拿走了?

汽车要闻

不止是大 极狐首款MPV问道V9静态体验

态度原创

房产
游戏
教育
亲子
旅游

房产要闻

重磅!三亚拟出安居房新政!

《GTA6》之后是《大表哥3》?R星更可能做中世纪!

教育要闻

这位学生自制的学具你见过吗?

亲子要闻

春天娃长个黄金期,喝对黑豆水,个子悄悄往上窜

旅游要闻

以花为媒以赛引流 泰安清明迎客83.64万人次

无障碍浏览 进入关怀版