网易首页 > 网易号 > 正文 申请入驻

阿里云发布全新多模态交互开发套件 可应用于AI眼镜、机器人等

0
分享至

智通财经APP获悉,据阿里云公众号消息,在阿里云通义智能硬件展上,阿里云全新发布多模态交互开发套件。该套件集成了千问、万相、百聆三款通义基础大模型,并预置十多款生活休闲、工作效率等领域的Agent和MCP工具,除了能听、会看,还能思考并且与物理世界交互,可应用于AI眼镜、学习机、陪伴玩具、智能机器人等硬件设备。

在芯片层面,该套件适配了30多款主流ARM、RISC-V和MIPS架构终端芯片平台,满足市面上绝大多数硬件设备的快速接入需求。未来,通义大模型还将与玄铁RISC-V实现软硬全链路的协同优化,实现通义大模型家族在RISC-V架构上的极致高效部署和推理性能。

在模型优化层面,除通义模型家族外,阿里云还针对大量多模态交互场景进行分析,推出适合AI硬件交互的专有模型,全面支持全双工语音、视频、图文等交互方式,端到端语音交互时延低至1秒,视频交互时延低至1.5秒。

此外,该套件预置十多款MCP工具和Agent,覆盖生活、工作、娱乐、教育等多个场景。例如,基于预置的出行规划Agent,用户可直接调用路线规划、旅行攻略、吃喝玩乐探索等能力。

该套件还接入了阿里云百炼平台生态,用户不仅可以添加其他开发者提供的MCP和Agent模板,还能通过 A2A协议兼容三方Agent,极大程度地扩展了应用的能力边界,帮助企业灵活搭建业务场景。

现场,阿里云还展示了面向智能穿戴设备、陪伴机器人、具身智能等领域的解决方案。例如,在AI眼镜领域,基于千问VL、百聆CosyVoice等模型,阿里云打造了感知层、规划层、执行层以及长期记忆的完整交互链路,可一站式实现同声传译、拍照翻译、多模态备忘录、录音转写功能。

面向家庭陪伴机器人场景,基于千问模型和多模态交互套件,阿里云推出的解决方案不仅可实时监测异常状况,并及时告警信息推送,用户还能基于关键词查找、定位视频,与机器人进行对话交互和控制设备等。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
米切尔已接纳詹皇!2.6亿名单只能给底薪 格里芬认为老詹会回骑士

米切尔已接纳詹皇!2.6亿名单只能给底薪 格里芬认为老詹会回骑士

颜小白的篮球梦
2026-02-15 21:01:24
《太平年》看到水丘公的惨死,才懂,钱弘俶为何将钱弘倧幽禁至死

《太平年》看到水丘公的惨死,才懂,钱弘俶为何将钱弘倧幽禁至死

掠影后有感
2026-02-07 12:17:49
闺蜜夜谈:齐胸配深 V,我俩处在同一水平

闺蜜夜谈:齐胸配深 V,我俩处在同一水平

飛娱日记
2026-02-12 08:39:28
热搜爆了!宋轶换背景后取关!白敬亭方回应很强势

热搜爆了!宋轶换背景后取关!白敬亭方回应很强势

白色得季节
2026-02-15 18:23:32
为什么这5样“电器”突然没人买了?缺点太多了,白送都没人要!

为什么这5样“电器”突然没人买了?缺点太多了,白送都没人要!

家居设计师苏哥
2025-12-27 14:36:28
突然暴跌!北京降了!价格再下跌!

突然暴跌!北京降了!价格再下跌!

美丽大北京
2026-02-13 16:41:07
炸裂!王菲出席马年春晚,助理拉裙子惹怒她,郭富城、王一博也在

炸裂!王菲出席马年春晚,助理拉裙子惹怒她,郭富城、王一博也在

落雪听梅a
2026-02-15 01:37:44
穆里尼奥欧冠对阵皇家马德里前发出严厉警告:他们受伤了

穆里尼奥欧冠对阵皇家马德里前发出严厉警告:他们受伤了

本泽体育
2026-02-16 16:13:37
全球只有5位领导人被永久保留遗体,他们都是谁

全球只有5位领导人被永久保留遗体,他们都是谁

扶苏聊历史
2026-01-29 16:13:42
男子在老家建别墅花了60万,年底发现村里没几个人:感觉决策失误

男子在老家建别墅花了60万,年底发现村里没几个人:感觉决策失误

唐小糖说情感
2026-01-25 00:04:03
上海为什么要让外环变高架?

上海为什么要让外环变高架?

苗苗情感说
2026-02-16 19:50:25
中戏原表演系主任陈刚主动投案的消息引热议,他的妻子身份被扒出

中戏原表演系主任陈刚主动投案的消息引热议,他的妻子身份被扒出

魔都姐姐杂谈
2026-02-15 18:46:50
真正挣到钱的人,过年都在装穷

真正挣到钱的人,过年都在装穷

观世不语笑红尘
2026-02-16 17:39:09
郑丽文果然没让大陆失望,破天荒出席赖当局活动,两次喊话表立场

郑丽文果然没让大陆失望,破天荒出席赖当局活动,两次喊话表立场

春风笑语
2026-01-03 21:32:39
王艺迪发布自己回家过年的视频,还专门烫卷发,网友:像我大姨

王艺迪发布自己回家过年的视频,还专门烫卷发,网友:像我大姨

凤幻洋
2026-02-15 14:27:34
俄专家:中国1000枚核弹头可覆盖美本土,再拖下去美国打不过了

俄专家:中国1000枚核弹头可覆盖美本土,再拖下去美国打不过了

混沌录
2026-02-13 22:05:11
女孩当小姐,一晚要提供4到5次上门服务,2015年被亲人点到不赴约

女孩当小姐,一晚要提供4到5次上门服务,2015年被亲人点到不赴约

汉史趣闻
2025-11-08 09:27:32
2-0,24岁曼联旧将闪耀西甲:利剑出鞘,助瓦伦西亚终结3连败

2-0,24岁曼联旧将闪耀西甲:利剑出鞘,助瓦伦西亚终结3连败

俯身冲顶
2026-02-16 07:20:09
阿里闪购不惜一切代价冲第一,话音刚落就被紧急叫停

阿里闪购不惜一切代价冲第一,话音刚落就被紧急叫停

流苏晚晴
2026-02-16 17:45:15
沙利文退休之后再谈中国,说了不少以前不敢说的实话

沙利文退休之后再谈中国,说了不少以前不敢说的实话

东极妙严
2026-02-16 16:50:52
2026-02-16 22:40:49
智通财经 incentive-icons
智通财经
全球资本市场财经资讯提供者
1094583文章数 101251关注度
往期回顾 全部

科技要闻

阿里除夕发布千问3.5,性能媲美Gemini 3

头条要闻

伊朗抛出新谈判手段:联合开发油气田 采购美民用飞机

头条要闻

伊朗抛出新谈判手段:联合开发油气田 采购美民用飞机

体育要闻

遭针对?谷爱凌炮轰国际雪联安排

娱乐要闻

2026春晚开始 蔡明和机器人蔡明同框

财经要闻

2025,中国商业十大意外,黄金只排第九

汽车要闻

叫停纯屏操作 工信部拟推车内实体操作件强制国标

态度原创

数码
家居
亲子
公开课
军事航空

数码要闻

荣耀介绍 MagicPad 3 Pro「极客中心」,开放核心底层调校能力

家居要闻

中古雅韵 乐韵伴日常

亲子要闻

非常赞同!自己在家人的不耐下被迫变聪明!网友:这样对大家都好

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

慕安会美国角色逆转 中国议题"打满全场"

无障碍浏览 进入关怀版