网易首页 > 网易号 > 正文 申请入驻

只需3kbps就能清晰通话,这个谷歌音频工具开源了!

0
分享至

  

子豪 发自 凹非寺
量子位 报道 | 公众号 QbitAI

  3kbps也能清晰通话的神器Lyra,开源了!

  Lyra是谷歌公司推出的一款不惧低带宽的音频编解码器,用来实现随时随地高质量通话。

  3kbps是什么概念?

  换算成生活中常见的单位,等于0.375KB/s

  对比来看更加直观,Skype官网给出的通话最低速度是30kbps,带宽要求整整高出了10倍

  

  Lyra利用机器学习模型,将原始音频压缩到3kbps,即使没有高速网络,也能得到自然清晰的语音。

  它的架构与传统的编解码器类似,分为编码器和解码器两部分:

  

  编码器以40毫秒为单位,从语音中提取特征,进行压缩后通过网络传输。

  解码器利用机器学习模型,能使用最少的数据量重建语音,将特征转换成完整的音频波形,以进行播放。

  带宽要求低、效果更好

  在Lyra之前,音频编解码器的比特率越低,语音的清晰度就越差,并且机械感越重。

  传统的音频编解码器使用的是数字信号处理技术,而Lyra则依赖其强大的信号重建能力

  由于Lyra无需逐个处理信号,因此无需高带宽,而且在保持低比特率的同时,还能提供高质量的音频输出。

  

  谷歌还使用Lyra与Opus、Speex,在6kbps和3kbps的情况下,对同一音频的压缩质量进行对比测试

  结果显示:

  在3kbps的情况下,Lyra性能优于现有的其他编解码器;

  在8kbps的情况下,其性能优于Opus,同时降低了超过60%的带宽;

  甚至,Lyra在3kbps情况下的语音清晰度,也优于6kbps情况下的Opus。

  

  谷歌公司认为Lyra可能有广泛的应用前景,比如:降低音频文件大小,以存储大量语音;节省手机电量;以及缓解网络拥堵等。

  已在GitHub开源

  现在,Lyra已经在GitHub上开源。

  

  Lyra使用Bazel构建框架,并且使用C++编写代码,以保证速度、效率和可操作性。

  这一版本支持用户在Linux上开发和调试,还针对64位ARM Android平台进行了性能优化,使它不仅能在云服务器上运行,而且还可以在手机上实时运行和训练。

  此外,Lyra还为开发人员提供了编码和解码所需的工具。

  谷歌工程师Andrew Storus和Michael Chinen表示:

  

“很高兴看到开源社区的创造力能体现在Lyra上,以开发更多独特和有影响力的应用。”

  感兴趣的读者可戳下方链接了解详情。

  参考链接:
[1]https://github.com/google/lyra
[2]https://venturebeat.com/2021/04/06/google-launches-lyra-codec-in-beta-to-reduce-voice-call-bandwidth-usage/
[3]https://ai.googleblog.com/2021/02/lyra-new-very-low-bitrate-codec-for.html
[4]https://opensource.googleblog.com/2021/04/lyra-enabling-voice-calls-for-next-billion-users.html

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐

乌合麒麟发了张“老照片”,角落的细节亮了

中国网
2021-05-07 14:52:04

单日新增超41万例!疫情失控的印度:人间地狱众生相

本星事
2021-05-07 17:17:34

突发!吉林延边一景区,高空玻璃栈道的玻璃真的掉了!被困人员已自行爬回……

每日经济新闻
2021-05-07 16:09:07

戏真多!美防长答问称“有能力做很多事,但没计划将中国火箭残骸击落”

环球网资讯
2021-05-07 17:45:12

“做完就饶了你!”14岁少女被迫当众发生关系,网友:丧心病狂!

微梦白昼
2021-05-07 16:30:22

上海女教练“半裸”健身,引网友舔屏:这身子我馋!

高效燃脂大法
2021-05-07 12:57:45

横店18线小演员被大佬邀约“三亚游”......

Buy遍全球1004
2021-05-07 11:45:26

“华裔打女”杨紫琼:喜欢真枪实战,情史泛滥,男友团曾覆盖中外

八姐论八卦
2021-05-07 06:44:21

三亚红衣女子在高楼阳台外热舞,活活摔死!遗书曝光!疑点重重!

微悉尼
2021-05-07 17:14:50

上海暂停为五菱宏光MINI EV上绿牌,4S店回应:属实

EV世纪
2021-05-07 15:56:22

刚刚,中国工商银行发布重要公告,7月起清理长期不动个人银行账户

每日经济新闻
2021-05-07 16:09:07

打肿脸充胖子!澳4艘战舰进入南海,澳军将领:中国敢越界就轰炸

绝望的充电器呀
2021-05-07 17:29:11

3年前因保姆纵火案痛失妻儿的林生斌,如今过得怎么样了?

李砍柴
2021-05-06 17:07:24

“3天10次”!六年级女孩被侵犯后强迫接客,自语:泄欲工具

深度小哥哥
2021-05-07 05:53:04

五一妻子跟别的男人去旅游,丈夫带儿子现场撞破:搂着你的是谁?

消费生活报
2021-05-07 17:41:35

半天没了近千亿!为了印度放弃疫苗知识产权,到底因为啥。。。

大猫财经
2021-05-07 11:54:22

4年后,携50万跳过结婚直接生娃的叶海洋,如今再次出国拼二胎

梦鹿非梦露
2021-05-07 13:18:55

“上下运动”!小情侣骑单车上演不雅动作,网友:连电影都不敢拍

深度小哥哥
2021-05-07 05:49:20

是谁发明了调休式「小长假」|大象公会

大象公会
2021-05-06 23:19:48

五一期间上海一家四口来北京爬野长城,父亲因迷路从15米高断崖坠落,因背包中数瓶矿泉水才免于重伤,仅脚踝扭伤

北京人不知道的北京事儿
2021-05-07 15:36:42
2021-05-07 19:45:07
量子位
量子位
追踪人工智能动态
4863文章数 102539关注度
往期回顾 全部

科技要闻

盖茨离婚细节曝光:家人几乎都站梅琳达

头条要闻

麻醉不足!女子手术中苏醒:感知刀划腹部 眼睛哭肿

头条要闻

麻醉不足!女子手术中苏醒:感知刀划腹部 眼睛哭肿

体育要闻

埃梅里淘汰枪手创历史 黄潜疯狂庆祝

娱乐要闻

杨超越穿甜美白裙上班 巨型水壶抢镜

财经要闻

汽车要闻

不只有SUV车型 WEY品牌将发布轿车/MPV等

态度原创

艺术
健康
数码
时尚
军事航空

艺术要闻

贾又福:山水画最忌小打小闹、细声细气

减肥有捷径可走吗?

数码要闻

女装大佬晒性感私房照被围观:感受颜值暴击!

在韩出道3年的流量女星,回国会更好吗?

军事要闻

罕见美军B2轰炸机腹部照:弹仓修补多次