网易首页 > 网易号 > 正文 申请入驻

豆包实时音视频通话模型1.0 API上线,支持全模态交互

0
分享至

瑞财经 刘治颖 11月19日,火山引擎正式上线豆包实时音视频通话模型(SeedRealtime 1.0)API服务,带来全模态交互的新体验。

据介绍,SeedRealtime将声音、画面、时序与表达统一到同一个端到端模型中,能在连续的多模态信息流上实时交互,带来“边看、边听、边说”的全新体验。

这大大降低了传统语音级联系统依赖ASR、VLM、TTS等多个模块串联带来的延迟叠加和信息损耗。模型不再只是等待用户提问,而能持续理解场景变化,在合适的时机主动开口,把看、听、说纳入同一套实时决策体系,让“听到的”和“看到的”共同参与每一次实时判断与表达。

SeedRealtime 原生支持声音、画面与时序信息的深度融合,既能结合场景消解同音词歧义,也能准确理解视觉中的时序指代,让所见、所闻与所说融为一体。这意味着,在多人、嘈杂、开放的真实环境中,模型不仅能看懂当前画面,还能分清说话对象、理解上下文关系,并基于多模态信息完成更准确的实时判断。

Seed Realtime 1.0具备持续环境感知与主动表达能力,能够在察觉关键目标出现、画面状态变化或任务节点到来时,主动进行提醒、反馈和补充,让交互从被动响应升级为主动协作。这种能力让模型可以更好适配真实业务流程。

Seed Realtime 1.0能够实时感知用户的对话状态与交流节奏,在适当时机自然接话、停顿与回应,并具备较强的抗干扰能力,可分辨旁人闲聊与背景噪声,不因干扰误触发。

北京火山引擎科技有限公司成立于2020年5月,注册资本10亿元,法定代表人为李飞,经营范围包含:网络与信息安全软件开发;计算机软硬件及辅助设备批发;计算机软硬件及辅助设备零售等。该公司由抖音有限公司间接持股100%。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
普京:在克里米亚大桥遇袭之后,我们将不会进行局部停火谈判

普京:在克里米亚大桥遇袭之后,我们将不会进行局部停火谈判

云上乌托邦
2026-11-20 15:15:04
离开两年后首次以冠军身份回明尼苏达,唐斯说这感觉苦乐参半

离开两年后首次以冠军身份回明尼苏达,唐斯说这感觉苦乐参半

温柔且自由
2026-11-20 15:47:30
商务部:今年以来我国消费市场规模稳步扩大

商务部:今年以来我国消费市场规模稳步扩大

新华社
2026-11-19 18:35:03
下周运势大变局!这3生肖年底收尾干净利落,旧账全清、人缘翻盘

下周运势大变局!这3生肖年底收尾干净利落,旧账全清、人缘翻盘

温暖心语
2026-11-20 11:30:12
不顾西方对俄制裁,高市主动找普京谈话,日俄首脑7年来再次会面

不顾西方对俄制裁,高市主动找普京谈话,日俄首脑7年来再次会面

慢歌轻步谣
2026-11-20 14:53:42
大哥出差嫂子被托付,却在第一天,我看光了她,无法面对

大哥出差嫂子被托付,却在第一天,我看光了她,无法面对

雾岛夜话
2025-06-11 16:24:47
普京那只“晚到的黑箱子”,比十份联合声明都值钱

普京那只“晚到的黑箱子”,比十份联合声明都值钱

风起见你
2026-11-20 15:00:36
“已经确定女儿考不上高中了”,家长在线求助,网友:存个18w给她吧

“已经确定女儿考不上高中了”,家长在线求助,网友:存个18w给她吧

熙熙说教
2026-11-05 14:45:22
连续7场命中三分!恭喜火箭队,内线超级射手诞生,命中率5成,小史密斯没他准

连续7场命中三分!恭喜火箭队,内线超级射手诞生,命中率5成,小史密斯没他准

熊哥爱篮球
2026-11-20 12:30:08
北京社零跌了12.1%,真正让人手紧的是工作

北京社零跌了12.1%,真正让人手紧的是工作

六子吃凉粉
2026-11-20 11:37:57
54年来头一遭,打破美国总统常规,特朗普在深圳到底看到了什么?

54年来头一遭,打破美国总统常规,特朗普在深圳到底看到了什么?

阿凯销售场
2026-11-20 14:10:38
中国搭台真管用!美专家说了实话:中美俄谈好了,全世界都安心

中国搭台真管用!美专家说了实话:中美俄谈好了,全世界都安心

月下守候
2026-11-20 14:53:03
黄金暴跌,到抄底时刻了吗?

黄金暴跌,到抄底时刻了吗?

中国新闻周刊
2026-11-19 18:35:03
伟人这19个字,8个认不全!网友求助:谁才是真正的行家?

伟人这19个字,8个认不全!网友求助:谁才是真正的行家?

书画相约
2026-11-20 07:09:45
裤衩开叉10厘米!被网暴5年!铁三女神夺亚军又被骂,裁判:合规

裤衩开叉10厘米!被网暴5年!铁三女神夺亚军又被骂,裁判:合规

番外行
2026-06-07 15:53:29
又一场“天价豪赌”来了

又一场“天价豪赌”来了

中国新闻周刊
2026-11-20 11:18:03
沈阳新娘远嫁杭州,娘家30口人自驾送亲,新郎只愿付当天住宿费

沈阳新娘远嫁杭州,娘家30口人自驾送亲,新郎只愿付当天住宿费

兰姐说故事
2025-08-21 20:05:04
女子去男友朋友店工作,入职一周便发生关系2次,女子报警称遭骚扰,朋友被判强奸,后因证据不足改判无罪

女子去男友朋友店工作,入职一周便发生关系2次,女子报警称遭骚扰,朋友被判强奸,后因证据不足改判无罪

观威海
2025-08-07 21:14:11
海报实锤!摩尔线程“庐山”消费级显卡确认:32GB、48GB,还是更大?

海报实锤!摩尔线程“庐山”消费级显卡确认:32GB、48GB,还是更大?

芯榜
2026-11-20 08:09:15
被大佬当“玩物”、孕期注射药物百次,最美“三圣母”竟沦落至此

被大佬当“玩物”、孕期注射药物百次,最美“三圣母”竟沦落至此

木鱼l
2026-11-18 21:21:34
2026-11-20 16:07:00
乐居财经官方 incentive-icons
乐居财经官方
中国地产财经信息平台
174295文章数 4920关注度
往期回顾 全部

科技要闻

老黄想回来?英伟达董事会:没门

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

体育要闻

伪强队?拥4亿豪阵欧国联6连败+世界杯出局

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

10万人逼宫英伟达,黄仁勋要复职了?

汽车要闻

全新红旗H9最有意思的地方,是它开始有自己的豪华逻辑了

态度原创

旅游
家居
时尚
艺术
军事航空

旅游要闻

青岛冬日赏鸥地图|沿着海岸线,赴一场海鸥之约

家居要闻

2026建博会(广州) 公装联探展交流活动

秋天衣服别总穿纯色,试试这几件条纹单品,简单时尚又减龄

艺术要闻

投资55亿!深圳歌剧院施工现场更新,主音乐厅马蹄形已现!

军事要闻

美军在中东再成三航母之势

无障碍浏览 进入关怀版