江苏
5月27日-29日，2026第十届集微大会在上海张江科学会堂隆重举行，思特威车载事业群总经理兼飞凌微电子CEO邵科在大会5月28日召开的“端侧AI峰会”上发表了以《CIS+SoC融合方案助力端侧视觉AI全场景应用》为主题的演讲，分享了端侧视觉AI的应用趋势、行业痛点，以及思特威基于CIS+SoC融合的技术方案与落地进展。
邵科指出，“端侧视觉能有效帮助设备观察环境、识别事件，应用空间非常广阔。思特威的核心业务主要聚焦三大领域：智能安防、车载电子、智能手机。多年来，公司在这三大领域持续深耕，出货量稳居行业领先地位。除了我们的三大主业外，端侧视觉应用也广泛延伸至日常生活场景，包括机器人、工业视觉、AR/VR 等，应用场景非常丰富。”
不过当前端侧视觉AI在方案落地与规模化应用中，仍面临一些痛点，一方面来自CIS本身；另一方面来自CIS与SoC的适配协同。从CIS来看，其成像性能非常关键，直接影响最终算法的效果。同时，视觉系统不仅包含CIS，还包括后端的主控及其他SoC，这带来了适配方面的问题。此外，不同应用对算力的需求各异，因此对SoC的选择和适配在实际应用中也对效果产生重要影响。
邵科提到，“因此，在成像方面，思特威持续投入CIS性能的提升，不断研发新技术，并推出系列化新产品。例如针对高动态范围成像，公司在车载和手机应用中持续迭代，利用自研的SFCPixel®等技术，在单帧曝光中获得更好的成像效果。同时，在夜视成像方面，通过提升像素的感光度、优化噪声控制等方式，持续改善夜间成像质量。另外针对不同行业应用，公司还开发了多种特色技术。例如，车载应用中的LED闪烁抑制技术，手机应用中的相位对焦技术，以及针对电池供电设备的低功耗快启技术等，可以更好地支持多样化的AI应用。”
在CIS+端侧SoC融合上，思特威针对车载和工业视觉等应用推出了一系列方案。在车载方面，覆盖前视/后视、舱内监测（DMS/OMS）、电子后视镜（CMS/E-Mirror）、哨兵模式等车载视觉应用场景，能够在端侧进行图像增强，并为后端处理提供预处理的图像数据。
邵科进一步介绍了思特威已实现大规模量产的舱内OMS方案，“随着智能驾驶的发展，座舱内不仅需要DMS（驾驶员监测系统），OMS的应用也越来越广泛。该方案既需要输出高质量的视频图像用于交互和娱乐，也需要通过近红外成像实现舱内的识别与感知。因此，我们将500万像素的RGB-IR图像传感器与轻量级SoC集成在模组端，能够同时输出RGB和IR图像，并利用ISP技术进行图像增强。”
另外，在车载应用中，越来越多新能源车开始支持“哨兵模式”，这不仅能提升用户体验，也增强了车辆的安全性。思特威基于CIS和轻量级SoC，在模组端实现了全天候、低功耗的哨兵模式。该模式下，传感器以低功耗、低帧率持续输出，模组端通过轻量级算法逐帧检测。当识别到异常时，系统会唤醒后端域控制器，并将预存的异常图像数据发送给后端，以便进行后续处理。在非车载应用方面，思特威聚焦于单目和双目模组端侧的智能感知，可应用于智能硬件、智能家居、工业检测以及各类需要图像增强的场景。
对于端侧视觉AI技术展望，邵科提到：“我们持续迭代CIS技术，同时致力于将视觉与更多AI功能相结合。未来有两个主要方向：第一，在AI Sensor方面，我们预研将CIS与SoC通过3D集成方式结合，在单一芯片上实现高质量的ISP核心功能，并支持AI加速。第二，在AI SoC方面，我们持续研发高性能的近存计算，通过“NPU+ASIC异构”一体化的方式，实现多传感器融合，并探索未来将大模型应用于端侧的场景。”
邵科在演讲的最后表示，“总体而言，思特威坚持以图像传感器和视觉技术为出发点，持续与AI深度融合，覆盖从数据采集、数据处理、数据传输到最终感知的全链条，构建3+AI战略。”
特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
