网易首页 > 网易号 > 正文 申请入驻

科学家用数百万种声音训练新型AI智能系统,能让降噪耳机保留人声

0
分享至

我们生活在一个嘈杂的世界里。如果你不喜欢噪音,降噪耳机可以减少环境中的杂音,但它们也会不分青红皂白地过滤掉所有声音,所以你很容易错过你真正想听到的东西。

现在,一个新的人工智能系统旨在解决降噪耳机的这一问题。

该系统名为“收听目标语音(Target Speech Hearing)”,用户可以选择一个人作为目标,即使所有其他声音都被消除,他的声音也依旧能被听到。

尽管这项技术目前仍处在概念验证阶段,但其开发者表示,他们正在与厂商讨论将其加入流行品牌的降噪耳机中,并努力尝试将其用在助听器上。

参与该项目的美国华盛顿大学教授什亚姆·戈拉科塔(Shyam Gollakota)说:“倾听特定人群的声音是我们在世界上如何沟通,以及如何与他人互动的一个基本要素。但在特定情况下,即使你没有任何听力问题,专注于特定的人也可能变得非常有挑战性。”


(来源:STEPHANIE ARNETT/MITTR | PUBLIC DOMAIN,ENVATO)

当人工智能模型需要在计算能力和电池寿命有限的耳机中实时工作时,这种复杂性就成为了一个问题。

为了满足这些限制,神经网络需要做到体积小、能耗低。

因此,该团队使用了一种名为“知识提取”的人工智能压缩技术。

他们使用了一个经过数百万种声音训练的大型人工智能模型(“老师”),并让它训练一个小得多的模型(“学生”),以模仿其行为和表现达到相同的标准。

然后,他们利用降噪耳机上的麦克风捕捉到的环境噪音,训练学生模型从中提取特定声音的发声模式(规律)。

要激活该人工智能系统,佩戴者需要面对目标对象,并按住耳机上的按钮几秒钟。

在这个“注册”过程中,系统会通过耳机上的麦克风捕获音频样本,并使用此录音提取讲话者的声音特征,即使附近有其他人声和噪音。

这些音频特征被输入到第二个神经网络中,该网络运行在一台微控制器计算机上,两者通过通用串行总线(USB,Universal Serial Bus)连接。

这个神经网络会持续运行,将目标声音与其他声音分开,并将其播放给耳机佩戴者。

一旦该系统锁定了一名讲话者,即使佩戴者转身离开,它也会继续优先区分这个人的声音。

该系统从讲话者的声音中获得的训练数据越多,其区分声音的能力就越强。

目前,该系统只能成功注册一种声音,而且该声音必须是注册时最响亮的那个,但该团队的目标是即使特定方向上最大的声音不是目标人物,该系统仍然可以工作。

微软研究语音和人工智能的高级研究员塞菲克·埃姆雷·埃斯基梅兹(Sefik Emre Eskimez)表示,在嘈杂的环境中捕捉一个声音是非常困难的。他没有参与这项研究。

“我知道很多公司都想这么做。”他说,“如果他们能做到这一点,就会解锁很多应用场景,尤其可以用在会议场景中。”

美国卡内基梅隆大学语言技术研究所的研究员萨姆勒·康奈尔(Samuele Cornell)认为,虽然语音分离研究往往是理论性的,而不是实践性的,但这项工作在现实世界中有着明确的应用。

他没有参与该研究。但其表示:“我认为这是朝着正确方向迈出的一步,是很新颖的尝试。”

支持:Ren

排版:溪树

01/ 分布式电合成氨路在何方?科学家开展合成氨热力学分析,首次找出能耗更低的候选介导金属

02/ 科学家打造基于量子芯片的神经储存器,每平方厘米支持万亿节点,有望用于自然语言处理任务

03/ 科学家揭示双层超构光栅新特性,为光子器件提供理论基础,可用于光计算、量子发射和新型显示

04/ 大连化物所团队提出一步法电池回收工艺,极大提高电池回收效率,实现向下一代储能电池的转变

05/ 生命科学大数据操作系统助力研究降本增效?CCF开源创新大赛暨第二届Bio-OS开源开放大赛报名开启


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
姜萍和老师都闯入决赛,老师的导师卢殿臣:互相帮助、共同进步,他们很幸运碰到了一起

姜萍和老师都闯入决赛,老师的导师卢殿臣:互相帮助、共同进步,他们很幸运碰到了一起

红星新闻
2024-06-17 15:13:09
13000颗!马斯克没有料到,6G计划正式公布,外媒:我们输了

13000颗!马斯克没有料到,6G计划正式公布,外媒:我们输了

小蘑菇壹号
2024-06-17 15:48:25
投奔穆帅!世界杯冠军前锋想通了!低配梅西,师徒重聚,冲三冠王

投奔穆帅!世界杯冠军前锋想通了!低配梅西,师徒重聚,冲三冠王

阿泰希特
2024-06-17 14:41:13
当年轻人不再缴纳社保:一场静悄悄的危机

当年轻人不再缴纳社保:一场静悄悄的危机

经济学教授V
2024-06-17 07:04:56
世界联赛7大统计:李盈莹扣球第4,王媛媛拦网第4,刁琳宇二传第1

世界联赛7大统计:李盈莹扣球第4,王媛媛拦网第4,刁琳宇二传第1

刺头体育
2024-06-17 17:10:22
一直以为退圈,原来是去《墨雨云间》给顶流演爸妈了,美人迟暮啊

一直以为退圈,原来是去《墨雨云间》给顶流演爸妈了,美人迟暮啊

兰子记
2024-06-16 20:08:32
玫瑰的故事:刘亦菲的瘪臀、粗腰、粗腿,是对内娱畸形审美的反击

玫瑰的故事:刘亦菲的瘪臀、粗腰、粗腿,是对内娱畸形审美的反击

喵喵娱乐团
2024-06-14 17:56:07
哪些城市市委书记是省委常委?

哪些城市市委书记是省委常委?

职抒胸意
2024-06-17 10:18:31
李鹏新搞“七个有之”,王一新道德败坏,陈玉祥热衷于吃喝享乐,3人同日被处理

李鹏新搞“七个有之”,王一新道德败坏,陈玉祥热衷于吃喝享乐,3人同日被处理

鲁中晨报
2024-06-17 11:35:03
99年,女子被推土坑活埋,死前哀求:求你放了我,女儿还在家等我

99年,女子被推土坑活埋,死前哀求:求你放了我,女儿还在家等我

星辰故事屋
2024-06-11 13:32:59
为什么董事长总经理都要配司机?网友辣评:等你停完车客户都跑了

为什么董事长总经理都要配司机?网友辣评:等你停完车客户都跑了

暖心的小屋
2024-06-17 17:08:59
理想汽车车友汕头活动多车追尾 组织者:突遭大雨,车距较近,致5车追尾

理想汽车车友汕头活动多车追尾 组织者:突遭大雨,车距较近,致5车追尾

红星新闻
2024-06-16 19:16:10
清华大学“立功”了!“中国芯”换道超车,美企集体“破防”了

清华大学“立功”了!“中国芯”换道超车,美企集体“破防”了

科技丰
2024-06-17 09:38:42
退休人员好消息!养老金调整公布,企业退休能涨200元吗?

退休人员好消息!养老金调整公布,企业退休能涨200元吗?

社保小达人
2023-05-29 12:52:10
黑龙江省委原常委,省政府原党组副书记、副省长王一新被“双开”

黑龙江省委原常委,省政府原党组副书记、副省长王一新被“双开”

新京报
2024-06-17 11:09:11
如果以色列敢进攻黎巴嫩!今天各方表态!

如果以色列敢进攻黎巴嫩!今天各方表态!

林林爱天堂
2024-06-17 06:36:39
新疆维吾尔自治区党委原副书记李鹏新严重违纪违法被开除党籍和公职

新疆维吾尔自治区党委原副书记李鹏新严重违纪违法被开除党籍和公职

财联社
2024-06-17 11:06:07
大胃王浪胃仙现身贵州狂吃火锅,从大叔变美女,身体暴瘦疑变性!

大胃王浪胃仙现身贵州狂吃火锅,从大叔变美女,身体暴瘦疑变性!

八卦爱侃娱
2024-06-15 16:55:28
“谁上谁吃亏!”这两类985大学,张雪峰老师提醒:最好别去

“谁上谁吃亏!”这两类985大学,张雪峰老师提醒:最好别去

妍妍教育日记
2024-06-16 12:55:45
大反转,葡萄牙核心发声!C罗很欣慰,球迷:不用枯坐替补席了

大反转,葡萄牙核心发声!C罗很欣慰,球迷:不用枯坐替补席了

阿泰希特
2024-06-17 11:47:30
2024-06-17 18:26:44
DeepTech深科技
DeepTech深科技
麻省理工科技评论独家合作
13928文章数 512003关注度
往期回顾 全部

科技要闻

为什么你的iPhone,肯定用不上"苹果AI"?

头条要闻

烟草局回应"凌晨上门伪造证据":两工作人员移交纪委

头条要闻

烟草局回应"凌晨上门伪造证据":两工作人员移交纪委

体育要闻

豪华阵容,原始战术 英格兰10亿天团就这?

娱乐要闻

上影节红毯:倪妮好松弛,娜扎吸睛

财经要闻

定了!退休人员基本养老金上调3%

汽车要闻

传奇新篇章 全新一代大众迈腾来了

态度原创

艺术
手机
亲子
家居
军事航空

艺术要闻

穿越时空的艺术:《马可·波罗》AI沉浸影片探索人类文明

手机要闻

素皮后盖 + 杜比双扬,传音海外推出 Spark 20 Pro 5G 手机

亲子要闻

暑假来临,家长的崩溃时间又要来了!

家居要闻

研己实景 古典与现代的交融

军事要闻

菲政府申请扩展南海大陆架 专家:中国早有准备

无障碍浏览 进入关怀版