网易首页 > 网易号 > 正文 申请入驻

讯飞星火版《Her》全民开放体验,国内首个极速超拟人交互如何炼成?

0
分享至

8月30日,科大讯飞星火极速超拟人交互技术正式上线讯飞星火App,率先面向全民开放体验。据了解,这是国内首个对标GPT-4o语音的大模型产品,用户可在讯飞星火App中直接体验使用。根据官方介绍,星火极速超拟人交互在响应和打断速度、情绪感知情感共鸣、语音可控表达、人设扮演四个方面实现重大突破,让整体交互体验更自然、更具情感。

上线当天,科大讯飞研究院常务副院长高建清针对星火极速超拟人交互技术及应用展开进一步解读,不仅剖析了星火超拟人交互的“端到端”“共情力”等核心技术亮点,还为公众勾勒出技术产业化的愿景图。

业界首个“端到端”的极速交互体验

笔者第一时间抢先体验星火极速超拟人交互,最直观的感受就是响应速度极快,支持随时打断,可以识别不同的情绪并代入符合情境的对话和回复,丝毫没有“机械感”与“磕巴感”,真的就像平时跟朋友或家人对话那样随和自然。其中,极速响应是确保一切体验的基础,也是区别于其他语音产品的关键能力。

据悉,“端到端”技术框架是实现极速响应的重点。目前在全世界范围内,框架模型算法持续演进。国外以GPT-4o、特斯拉FSD等为代表的多模态端到端方案,已被证实可进一步提升技术效果和用户体验。科大讯飞极速超拟人交互作为业界首个端到端极速超拟人交互,通过将此前级联方案升级为统一神经网络,直接实现语音到语音的“端到端”建模,大幅缩短响应时间,做到了真正的极速。

而人类语言被称为世界上最动听的语言,是因为具有独特的情绪感染力,能够传达复杂的情感和思想,实现文明的传承和进化。但一直以来,智能语音与自然语言处理技术主要针对“内容”模块下功夫,比如能“听懂”更多的语种,“解答”更多的问题。但想要获得拟人化的对话体验,还需要“内容”与“情绪”等模块的协同作用。

大模型时代的到来,恰好能让不同的模块化功能进行“大统一”。高建清表示:“以往语音交互系统都是不同的模块,比如语音识别、语音合成和大语言模型。而科大讯飞星火极速超拟人交互技术基于端到端大模型框架,并结合讯飞多维度语音属性解耦表征训练模块,实现情感、方言、韵律、音色等的可控,实现了对语音交互的拟人化升级。”

大模型开始“情感共鸣”

星火极速超拟人技术还将星火大模型的“共情力”带到了新的高度,在这次单交互系统上线之前,业界的交互系统大多没有情感,均以中性情绪回复,或者个别系统有这种情感,但大多停留在文本层面,而星火极速超拟人技术可以实现情感共鸣,当人机对话时,机器可以理解你的声音内容,包含情绪表达。高建清认为,虽然目前系统暂时不能使用表情,但未来如果将表情、声音内容与声音情绪三者结合在一起,将会是一条可行的新路径。

星火极速超拟人语音的情绪感知能力,能够感知到数十种音频事件与情绪,比如喜怒哀乐、害怕、困惑等,AI会以“感同身受”的方式进行语言组织和情绪表达。而情感共鸣会结合声音和内容等不同维度,在合适的情境下采用合适的情感进行回应,比如用户开心的时候用笑声呼应心情,用户悲伤的时候用安慰语气进行安抚,让AI变得有血有肉有温度。

共情力对于大模型是一项重要的基础能力,或许在未来的人形机器人身上,我们将看到共情力的具象表达。比如你一进门,机器人就向你笑脸相迎地问候道,就像1999年科幻电影《机器管家》里面的人形机器人安德鲁,让人机之间也有情感纽带。当然畅想这些还为时尚早,现阶段的星火极速超拟人交互更有另一部电影《Her》的既视感,TA可以用笑声回应开心,用急促回应愤怒,更自然,更逼真,更还原真人对话的语境。

至于快速打断功能,这也是真人对话中经常出现的状况。比如你入住酒店问前台客服,如果对方答非所问肯定当即打断;同理,没耐心听AI讲一大堆话,或者回答跑偏,立即打断是人的生理本能。“这是个极其复杂的工程问题,需要去判定何时打断、何时不应打断,我们通过技术创新与强化底座认知能力,解决了打断和响应时间平衡的问题。”高建清说道。

谋局未来 挖掘产业应用价值洼地

针对星火极速超拟人交互的未来发展,高建清表示,星火极速超拟人交互的未来计划是“三个更多”,即融入更多模态,具备图片视频模态输入与超拟人虚拟人输入;融入更多语言,增加更多语言、方言的语音交互能力和翻译能力;以及持续拓展情感、人设种类,继而实现诸如口技、唱歌等更多能力与更好体验。

根据中金企信国际咨询测算的数据,我国对话式人机交互核心产品的市场规模将在2025年达到237亿元,直接带动相关产业规模达到1525亿元。同时语音语言技术与大模型结合将赋能更加广阔的应用场景,下游领域包括家电、汽车、消费电子、金融、物流、房产、政务、医疗等,预计智能语音语言技术在垂直行业应用的核心产品规模将在2025年达到159.1亿元,带动相关产业规模达到875.1亿元。

据高建清介绍,星火极速超拟人语音交互在商用领域大致分为三个层级。第一层是闲聊陪伴场景,将在儿童玩具、情感陪伴等品类上增强情感表达能力。第二层是机器人场景,结合多模态能力会加强产品竞争。第三层是智能汽车、智能家电等场景,让车机聊天更具情感,有助于提升车企智能化水平,包括奇瑞汽车、中国一汽、大众汽车等车企都是讯飞星火的合作伙伴。

无论是从技术迭代角度,还是从用户体验角度,星火极速超拟人交互的创新,正让语音交互从“能用”“好用”走向“常用”的新阶段。以讯飞星火为代表的大模型创新,或将重塑语音交互领域,推动语音产业新变革,带来诸如汽车、机器人、家电等更广阔的应用空间,推动万物互联时代的加速到来。

上游新闻 张皓

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
爆冷11连胜!悄悄成为冠军热门,NBA大黑马诞生,东部格局改变了

爆冷11连胜!悄悄成为冠军热门,NBA大黑马诞生,东部格局改变了

篮球扫地僧
2026-03-20 16:29:35
新加坡急了,外长几乎是拍着桌子,让中国“尊重”马六甲的地位。

新加坡急了,外长几乎是拍着桌子,让中国“尊重”马六甲的地位。

南权先生
2026-01-26 15:41:26
何超琼不愧是丰腴美人,穿白色低胸连衣裙凹凸有致,老了更撩人!

何超琼不愧是丰腴美人,穿白色低胸连衣裙凹凸有致,老了更撩人!

蓓小西
2026-03-17 08:39:55
为什么石油是用“桶”而不是“吨”来计算?一桶油到底有多重?

为什么石油是用“桶”而不是“吨”来计算?一桶油到底有多重?

长风文史
2026-03-15 15:49:09
一男子失业拿了50万赔偿回村里,逢人说欠了30万外债,谁料第二天叔伯兄弟,都上门来“送温暖”了

一男子失业拿了50万赔偿回村里,逢人说欠了30万外债,谁料第二天叔伯兄弟,都上门来“送温暖”了

不二大叔
2026-03-19 21:29:20
刘诗诗和唐嫣冲上热搜!曝离婚分割财产完毕,为争抚养权做出妥协

刘诗诗和唐嫣冲上热搜!曝离婚分割财产完毕,为争抚养权做出妥协

离离言几许
2026-03-20 15:24:58
《我的山与海》30集大结局:郝倩倩成全刘柱,温良不是李娟的良配

《我的山与海》30集大结局:郝倩倩成全刘柱,温良不是李娟的良配

阿伧说事
2026-03-20 19:18:01
智能麻将桌杀到:传统麻将馆真的要被“取代”了?

智能麻将桌杀到:传统麻将馆真的要被“取代”了?

生活新鲜市
2026-03-20 06:28:56
中女用一万块在特卖场里“体面”

中女用一万块在特卖场里“体面”

巨潮WAVE
2026-03-19 20:36:26
毛新宇参观祖宅时突然发现家谱记载:原来毛主席是毛太华第20代孙

毛新宇参观祖宅时突然发现家谱记载:原来毛主席是毛太华第20代孙

老杉说历史
2026-03-14 20:54:20
关税反击:特朗普已被逼到了悬崖边上,因为中国击中了他这个要害

关税反击:特朗普已被逼到了悬崖边上,因为中国击中了他这个要害

诡谲怪谈
2025-04-18 11:36:10
巴拿马“夺港”翻车记,现在彻底慌了,开唱求饶大戏

巴拿马“夺港”翻车记,现在彻底慌了,开唱求饶大戏

甜柠聊史
2026-03-20 17:12:29
毛伟杰完爆杨希,改左后卫成功 阿奇姆彭4场造4球 大连继续主场龙

毛伟杰完爆杨希,改左后卫成功 阿奇姆彭4场造4球 大连继续主场龙

替补席看球
2026-03-20 21:08:43
伊朗宣称击中F-35,美方回应却完全相反

伊朗宣称击中F-35,美方回应却完全相反

桂系007
2026-03-20 05:05:15
无锡知名自助餐厅,闭店通知

无锡知名自助餐厅,闭店通知

无锡eTV全媒体
2026-03-20 15:17:44
被爆冷,许利民下课倒计时?新帅有望锁定,52岁名宿,曾亚运夺冠

被爆冷,许利民下课倒计时?新帅有望锁定,52岁名宿,曾亚运夺冠

萌兰聊个球
2026-03-20 09:51:43
等我们老了,最扎心的从不是病与死,而是这无声的“溃败”

等我们老了,最扎心的从不是病与死,而是这无声的“溃败”

青苹果sht
2026-03-18 05:35:16
艾博年在澳洲清真寺遭“围攻”,在场穆斯林大喊“可耻”!总理一行紧急撤离

艾博年在澳洲清真寺遭“围攻”,在场穆斯林大喊“可耻”!总理一行紧急撤离

澳洲红领巾
2026-03-20 11:41:15
去深圳才发现:年轻人都不穿耐克、萨洛蒙了,满街都是这3个品牌

去深圳才发现:年轻人都不穿耐克、萨洛蒙了,满街都是这3个品牌

白宸侃片
2026-03-11 13:18:49
51岁男子突发心梗猝死!不想得心梗,牢记晚饭4不吃,睡前4不要!

51岁男子突发心梗猝死!不想得心梗,牢记晚饭4不吃,睡前4不要!

健康之光
2026-03-20 17:05:06
2026-03-21 04:03:00
上游新闻 incentive-icons
上游新闻
重庆“门户级”新闻客户端
250166文章数 584785关注度
往期回顾 全部

科技要闻

宇树招股书拆解,人形机器人出货量第一!

头条要闻

向特朗普提问日记者遭疯狂网暴 被骂帮中国让高市难堪

头条要闻

向特朗普提问日记者遭疯狂网暴 被骂帮中国让高市难堪

体育要闻

6年前的一场悲剧,造就了“法国瓦尔迪”

娱乐要闻

总台首届电影盛典,“沈马”CP再合体

财经要闻

金融法草案向社会公开征求意见

汽车要闻

何小鹏坦白局:每月3亿的“慌”与通向L4的坚定

态度原创

家居
艺术
亲子
公开课
军事航空

家居要闻

时空交织 空间绮梦

艺术要闻

一位画家跟美少女保姆模特的那个事

亲子要闻

为什么有钱人家孩子一般长相都不错?网友:要有钱有闲

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普会晤高市早苗 把美国袭击伊朗比作偷袭珍珠港

无障碍浏览 进入关怀版