网易首页 > 网易号 > 正文 申请入驻

乐鑫发布 ESP-WebRTC 方案发布,为物联网设备解锁实时音视频能力

0
分享至

近日,乐鑫信息科技(688018.SH)正式推出 ESP-WebRTC 音视频实时通信方案,面向 ESP32 系列 SoC,以模块化架构帮助开发者快速构建具备低延迟、高可靠性的音视频应用。在智能设备加速走向"实时交互化"的行业趋势下,该方案的发布标志着乐鑫在物联网多媒体通信领域的又一次重要布局。

ESP-WebRTC 方案基于 WebRTC 标准协议栈构建,将实时通信能力拆分为四大功能组件:ESP-Signaling 负责信令交互与会话建立,支持 OpenAI、WHIP、AppRTC、KVS、Janus 及自定义信令等多种云端服务接入;ESP-Peer 提供 Peer Connection、媒体流与 Data Channel 核心能力,实现音视频与业务数据的双通道传输;ESP-Capture 统一管理摄像头、麦克风等输入设备,完成媒体采集与预处理;AV-Render 负责音视频解码、渲染与输出,保障终端侧流畅播放。四大组件协同运作,形成从设备端采集到远端播放的完整闭环。


在连接与安全层面,ESP-WebRTC 集成了 ICE、STUN、TURN 等 NAT 穿透与连接优化机制,配合双角色 ICE 候选策略,确保在复杂网络环境下实现高成功率的 P2P 穿透连接。媒体面通过 DTLS-SRTP 协议进行加密与完整性保护,信令面支持 TLS 加密传输,为可视对讲、远程预览等对安全敏感的场景提供端到端防护。在编解码方面,方案广泛支持 H.264、MJPEG 视频编码与 OPUS、G.711A、G.711U 音频编码,兼顾主流兼容性与嵌入式轻量需求。

硬件层面,ESP-WebRTC 深度适配乐鑫旗下多款高性能 SoC。ESP32-S3 凭借其双核 Xtensa LX7 处理器、向量扩展指令集与 DVP 摄像头接口,成为中端音视频产品的优选平台;ESP32-P4 搭载自研双核 RISC-V 处理器(主频 400MHz,集成单精度 FPU 与 AI 扩展指令集),并内置 H.264 硬件编码器与 MIPI-CSI 摄像头接口,可在极低 CPU 负载下完成高清视频编码,是智能门铃、视频通话与实时推流等场景的理想主控。配合乐鑫 ESP32-P4X-Function-EV-Board 开发板与 ESP-Insights 远程诊断平台,开发者可在本地快速搭建原型并实现云端状态监控,显著压缩从技术预研到量产落地的周期。

在应用层面,ESP-WebRTC 覆盖智能门铃双向可视对讲、远程设备视频预览与控制、AI 语音助手实时交互、安防摄像头云端推流与回放、便携式 USB 摄像头桥接等典型场景。其灵活的 Data Channel 能力还可同步承载设备状态上报、远程配置下发等业务消息,使单一通信链路承载多重交互逻辑,降低了系统复杂度和硬件物料成本。

从产业视角看,ESP-WebRTC 与乐鑫此前推出的 ESP-BLE-UART 无线串口方案、ESP-NOW 无连接协议、Wi-Fi Mesh 自组网方案形成多层互补,共同构建了从低速传感、无线串口透传、实时音视频通信到大规模设备组网的完整物联网连接矩阵。这一全栈式通信能力布局,将有力推动音视频交互能力在消费电子、智能家居与工业物联等场景中的规模化落地。

作为乐鑫科技官方授权的一级代理商,飞睿科技深耕 IoT 领域多年,可为企业客户提供乐鑫全系列 SoC 及模组的稳定货源保障、专业 FAE 技术选型支持等开发服务。从芯片评估选型、射频天线匹配到批量交付与量产测试,飞睿以完善的供应链体系与本地化工程师团队,助力客户高效完成从方案设计到产品化落地的全过程,缩短产品上市时间,降低研发投入风险。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
河南男子在县城买下127平房子,4年后回来结婚,打开房门他愣住了

河南男子在县城买下127平房子,4年后回来结婚,打开房门他愣住了

民间精选故事汇
2025-02-01 11:20:02
我国最长海底公路隧道完成盾构掘进

我国最长海底公路隧道完成盾构掘进

新华社
2026-10-02 13:03:03
赵本山落网后宅内搜出20吨黄金,暗中移民海外?私生活传闻太扯

赵本山落网后宅内搜出20吨黄金,暗中移民海外?私生活传闻太扯

翰飞观事
2026-09-30 14:28:42
瞒不住了!刘嘉玲除了洁癖之外,不和梁朝伟生孩子也是有原因的

瞒不住了!刘嘉玲除了洁癖之外,不和梁朝伟生孩子也是有原因的

天马幸福的人生
2026-10-01 15:15:49
32岁女子“肉偿”300万债务,33个男子接受服务后,多人举报她

32岁女子“肉偿”300万债务,33个男子接受服务后,多人举报她

四海神君
2026-09-30 10:00:12
中国最好喝茶叶排名出炉,第一实至名归,懂茶的人都服气!

中国最好喝茶叶排名出炉,第一实至名归,懂茶的人都服气!

椰青美食分享
2026-10-01 18:10:04
刘欢去世第7天,妻子终于说出17年真相:害死他的不是酒,是父爱

刘欢去世第7天,妻子终于说出17年真相:害死他的不是酒,是父爱

王姐懒人家常菜
2026-10-02 12:47:43
没人愿意生活在告密成灾的社会里:为了保研而举报,致20名同学受处分,这届大学生变坏了吗?

没人愿意生活在告密成灾的社会里:为了保研而举报,致20名同学受处分,这届大学生变坏了吗?

呦呦鹿鸣
2026-09-30 22:44:32
国际原油走低

国际原油走低

界面新闻
2026-10-02 15:40:15
江苏某中学教师,2026年6月退休,为何每月基本养老金能过万元?

江苏某中学教师,2026年6月退休,为何每月基本养老金能过万元?

趣味萌宠的日常
2026-10-02 14:04:34
鸿蒙智行被小米小鹏反超,网友留言不忍直视

鸿蒙智行被小米小鹏反超,网友留言不忍直视

ZAKER新闻
2026-10-01 19:55:26
夺回藏南要打一场大战?没必要,中国,正在,“温水煮青蛙”!

夺回藏南要打一场大战?没必要,中国,正在,“温水煮青蛙”!

超喜欢我
2026-08-15 11:44:22
意外!76%葡萄牙民众不满C罗 总裁大姐连发7动态发声:天道好轮回

意外!76%葡萄牙民众不满C罗 总裁大姐连发7动态发声:天道好轮回

风过乡
2026-10-02 11:40:53
原来他就是宋佳丈夫,实力背景不一般,难怪自带旺妻体质一路开挂

原来他就是宋佳丈夫,实力背景不一般,难怪自带旺妻体质一路开挂

潋滟晴方DAY
2026-10-02 15:04:18
刘国梁也没想到,当众贴脸开大的张继科,竟不给王楚钦留一丝体面

刘国梁也没想到,当众贴脸开大的张继科,竟不给王楚钦留一丝体面

大眼妹妹
2026-09-30 19:48:14
收视指南!亚运会10月2日男排半决赛,中国男排PK东道主日本

收视指南!亚运会10月2日男排半决赛,中国男排PK东道主日本

排球大视界
2026-10-02 12:52:51
女子啃老10年,自尽后老母亲收拾房间发现银行卡,查看余额后崩溃

女子啃老10年,自尽后老母亲收拾房间发现银行卡,查看余额后崩溃

白云故事
2025-03-17 07:55:10
为什么美国死刑执行要拖上三十年才了结

为什么美国死刑执行要拖上三十年才了结

小眼睛小世界
2026-10-02 04:18:41
特讯!马克龙当众打脸欧盟!"别跟中国打贸易战,毫无意义!"网友:嘴上说不要,身体很诚实!

特讯!马克龙当众打脸欧盟!"别跟中国打贸易战,毫无意义!"网友:嘴上说不要,身体很诚实!

科技虎虎
2026-10-01 13:21:55
“给你钱,让我搞一下”:29岁女子独自骑马到新疆,被一个70岁大爷性骚扰,摸了她两次大腿

“给你钱,让我搞一下”:29岁女子独自骑马到新疆,被一个70岁大爷性骚扰,摸了她两次大腿

江山挥笔
2026-09-13 11:03:46
2026-10-02 16:23:00
深圳市飞睿科技有限公司
深圳市飞睿科技有限公司
远距离WiFi微波雷达技术
1561文章数 20关注度
往期回顾 全部

科技要闻

“分手”15天后,华为与赛力斯签约新五年

头条要闻

41岁独身女子离世9位长辈争遗产 400万元房产收归国家

头条要闻

41岁独身女子离世9位长辈争遗产 400万元房产收归国家

体育要闻

30天30队·快船:被莱纳德挂在半空的未来?

娱乐要闻

奚梦瑶晒四太豪礼!22只龙凤镯近300万

财经要闻

珠宝黑马爆雷,老板全家跑路泰国!

汽车要闻

2027款极氪001将于明年一季度上市 现款猎装同步推新配色

态度原创

本地
游戏
时尚
教育
公开课

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

PS6技术继续下放!PS5也能用上了、画质优于FSR 3.1

秋天真的适合穿格纹长裙,不花哨、不老气,大方高级又复古

教育要闻

以为很简单,没想到,还挺难呀

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版