银牛微电子发布高性能3D图像和视觉处理器NU4500

5月17日，以“驱动智能机器人创新”为主题的“第十四届松山湖中国IC创新高峰论坛”正式在广东东莞松山湖召开。合肥银牛微电子有限责任公司研发副总裁周凡在论坛上推出了其最新的高性能3D图像和视觉处理器NU4500。

3D视觉和AI是3D空间计算的关键技术，是智能识别、自主决策和精准控制的基础，应用前景广阔，不仅在智能制造、自动驾驶、机器人等领域发挥重要作用，还将在元宇宙XR、消费电子、物流无人机、3D扫描、虚拟数字人等前沿应用领域中展现出巨大的潜力。周凡博士也表示，3D空间计算技术正逐步渗透到各个领域，彻底改变人类的生活方式和生产方式。

目前空间计算的应用面临三大痛点：1、2D视觉已经无法满足日益复杂的终端应用要求 ；2、延时大功耗大软件化3D算法+传统AI芯片或者FPGA芯片的方案不可持续。3、适用于复杂场景的3D感知设备价格昂贵 、多传感器融合大幅增加系统成本及复杂度 单芯片解决方案 。

为了破解这三大痛点，银牛微电子聚焦于3D视觉、3D双目立体算法芯片化，并单芯片实现了3D+SLAM+AI，无需额外的AI芯片及激光SLAM，可以助力设备实现低功耗、低成本、小型化。

作为一家长期深耕于3D视觉领域的企业，银牛微电子总部位于合肥，并在上海、以色列、北京和深圳设立了公司和分公司。需要特别指出的是，银牛微电子在2020年就完成对于全球知名的3D计算机视觉和图像处理器芯片设计厂商以色列Inuitive的收购。

Inuitive作为一家成立超10年的3D机器视觉厂商，在3D机器视觉领域有着深厚的技术积累，具备丰富的3D视觉、复杂SoC芯片设计、低功耗设计和边缘AI计算经验，其核心的IP都是完全自研的。Inuitive的3D深度感知图像处理器芯片，具有强大的AI能力，结合SLAM实时跟踪建图引擎，以及通用CPU内核与丰富的I/O接口，可以极大限度的满足客户的3D机器视觉产品开发需求，并且芯片的工作功耗也是非常的低。

在收购Inuitive之后，2021年，银牛微电子就推出了基于NU4000芯片的3D机器视觉模组，并在2022年推出了全新的具有3.5Tops算力的NU4100芯片，可以支持6路视频的输入，720P@120FPS，运动到显示延迟仅1ms。2023年9月该芯片成功量产，并获得了多家头部客户的采用。

周凡表示，银牛微电子是目前全球唯一量产单芯片集成芯片化3D视觉感知、Al、SLAM模块的SoC芯片厂商，同时也是全球唯二的3D双目立体算法芯片化的量产芯片厂商。

银牛微电子此次最新发布的NU4500，是一款高度集成的空间计算系统集成主控芯片，基于12nm工艺，拥有八核ARM Cortex-A55 CPU，集成了Synopsys APX5.2/NPU4K 视觉/AI处理器，可提供7.5Tops算力。同时还集成了ARC EM11D音频DSP、高分辨率双摄像头ISP、H264/HEVC 视频编码器引肇、安全子系统。接口方面可支持USB3.0、Pcle-Gen4、SDIO/eMMC和LPDDR4x/5等高速接口。

NU4500还拥有基于硬件的图像深度视觉引擎，包括领先的自研的深度引擎、计算机视觉加速引擎、图像后处理模块、异步时间扭曲(ATW）引擎等，能够与其高性能CPU、VPU、AI和ISP内核紧密结合，可以支持单芯片10个输入视频流，具备强大的3D空间计算功能，能够以低功耗提供3D感知、AI和各种空间计算应用支持。

得益于NU4500强大的性能，其能够支持广泛应用在包括人形机器人/AMR/AGV在内的泛机器人、 元宇宙XR、消费电子、物流无人机3D扫描等前沿应用领域。

周凡表示，目前银牛微电子已赢得全球龙头企业信赖，超过150客户签署合同或上机测试。深度合作客户包括小米、极智嘉、Varjo 等国内外头部企业。

编辑：芯智讯-浪客剑