商汤科技郑祺文：全能感知 畅想驾驶 见证出行方式新变革

9月28日-29日，“中国车谷2021智能汽车产业创新论坛”隆重召开。本次论坛由武汉经济技术开发区和东风汽车集团有限公司联合主办，由武汉市智能汽车产业创新联盟与盖世汽车联合承办，主要围绕智能汽车的创新发展这一主题展开，涉及到人机共驾、地图定位、人工智能与芯片、仿真测试等多个热门领域。论坛期间，商汤科技AI智能网联汽车事业部副总经理郑祺文发表了“全能感知 畅想驾驶 见证出行方式新变革”的演讲，内容如下：

各位朋友大家好，非常荣幸参加“东方风起领航 智能驾驶跃迁”中国车谷2021智能汽车产业创新论坛。我是商汤科技AI智能网联汽车事业部副总经理郑祺文，今天和大家分享的是《全能感知 畅想驾驶 见证出行方式新变革》。整个分享的要点，包括L4级自动驾驶的解决方案，以及我们一直在推进的ADAS整体的解决方案。

下面简单说一下商汤科技，商汤科技是全球领先的人工智能软件公司，我们有一支亚洲最大的人工智能研发团队。我们在20多年的研究历程中，积累了丰富的AI领域人才，现有250+位的人工智能博士，40+位教授，3500+位AI研究员和工程师团队。我们在计算机视觉领域三大顶会对外发表的论文超过500篇。目前我们在四大业务板块（企业服务智能化、城市管理智能化、个人生活智能化、汽车出行智能化）有相应的落地，在全球15个国家及地区开展了相应的业务，有2400+行业顶级客户。

人工智能的发展离不开大算力平台的支撑。商汤自创立之初就已经自建了超大规模的超算集群和分布式的训练数据系统，通过平台性的创新和自主研发的基础算法工具链，加速了各种算法的研发和落地。通过这种大规模的集群，我们也可以更快地推动人工智能应用的落地。

原创在人工智能领域非常重要，商汤凭借着自身的技术实力，搭建了原创深度学习框架SenseParrots，作为未来的学习框架，相较于现有框架具有很多的优势，支持动态图并发运行，千卡级联合训练，大规模集群的弹性通信，支持多种异构处理器，能紧密衔接工业级部署，提供训练的可视化前端。

智能汽车领域，在2021 WAIC世界人工智能大会上，商汤科技了发布了智能汽车平台独立新品牌SenseAuto绝影，并首次展现完整布局。从研发维度来看，商汤绝影已经连续几年拿到了多项国际比赛的顶尖成绩，技术展覆盖了智能汽车的方方面面，包括不同场景的感知、定位、自主导航等技术。在一些视频分割，实例分割，图像增强，动作识别等方面，都有一定的积累。

研发过程中，商汤绝影提出了一横一纵的概念。我们基于SenseParrots打造了自己的算法平台，赋能视觉感知，激光雷达和多传感器融合感知的应用。这些应用最终落地到我们的车路协同，自动驾驶，辅助驾驶等场景。正是由于我们有了这样强大的深度学习平台的积累，使得我们各项技术能够进行快速的迭代，同时也让我们在不同的行业应用，能够快速的落地，达到领先。

自动驾驶感知平台，我们也在不断地进行技术演进和迭代。在多个技术领域我们也处于行业领先水平，比如说我们的远距离超稳定前视感知，30度8M的像素相机，可以清晰地识别到600米的车辆和300米的行人，并能确保相当高的精度。同时稳定的多视角感知，通过360度的多视角传感器，提供相应的感知冗余。前后传感器的信号融合，让我们的结果更加准确且鲁棒。丰富的长尾感知场景，我们对极端天气能够相应的感知，对遮挡、截断、异形车困难样本，都有较强的识别能力。多平台的深度优化沉淀，量化工具链可以加速了模型的推演。

在这种演进过程中，我们积累了丰富的平台适配和性能优化经验，我们也搭建了自己的真值系统，有自己的评测体系。通过打通功能评测闭环、模型迭代闭环，实现了数据的闭环，真值系统可以快速的积累大量的有效数据。

下面给各位展示的是我们纵向全栈智能驾驶模块级技术方案，在感知方面我们有多传感器的融合3D感知，决策规划控制系统有相当高的适应性、智能性、安全性。预测方面，我们有多模态的预测框架，能够实现多模态行为的预测。

同时商汤具备高度自动化的高精度地图建图能力，我们车辆在运行过程中可以高度自动化的建图。我们有多传感器融合定位，支持10种相应的组合模式。自研的预控制器，可以接入多种设备，进行多传感器数据的交互处理。除此以外，我们在全栈智能驾驶系统当中，商汤也具备完备的测试和仿真体系，我们积累了大量的测试数据，问题测试场景库累计1万+；测试数据量达到400TB。

做汽车行业的一些产品，商汤一直怀揣着一种敬畏之心。在此过程中，商汤持续进行能力认证建设，按照车规质量体系完成工作，流程各步骤认真落实，让算法的实现，产品的交付，都形成了一套严密的体系，对客户负责，保证客户的满意度。

我们始终坚持打造开放共赢的生态环境，目前我们已经和30+车厂形成了一些合作关系，同时我们也拓展了一部分生态合作伙伴，我们始终相信，打造良好的生态环境，才能拥有可持续的发展。

下面介绍的是我们智慧出行的产品和一些解决方案。在智能驾驶方面，商汤有两个方向的布局，第一个是量产解决方案，其次是L4级智能驾驶车联网解决方案。

量产解决方案，我们包括Pilot—V和Pilot—P方案。Pilot—V整体算法识别度高，能够适应多种的算法平台。这也是我们的一大优势，我们可以在国家标准上，根据不同的要求，不同的平台，不同的层面，进一步的优化。Pilot-V 视觉感知产品主要针对商用车的场景，能够准确识别200米以内的车辆和150米以内的行人。可以做到百元级低成本的产品，而不降低性能。

Pilot—P领航驾驶产品，采用多传感器的融合感知，实现了360度的全域感知，可以稳定识别前方600米以内的车辆，300米以内的锥形筒，150米以内的交通信号灯；同时，可拓展激光雷达融合解决方案，提升整车的感知能力。

我们将相关功能划分成L0、L1—L2、L2+三个不同的等级，在这个过程中，我们的L2+领航驾驶功能，可以实现超车自动变道，导航自动变道，施工区域通行等相应的功能。以下给各位展示的是我们领航驾驶方案的场景感知视频，包括我们的城市道路，行人意图的识别，制动灯、转向灯的识别，施工区域雪糕筒的识别，还有道路分离点和道路边界等相应的场景识别与预判。

关于L4级自动驾驶车联网产品板块包括三个重要产品：自动驾驶接驳小巴，自动驾驶AR小巴，还有智能车路协同云控平台。

SenseAuto绝影解决方案是一款基于多车型软硬件研发平台，该平台有三个方面的优势，首先我们提出多信号融合感知，这个感知平台可以拆解成不同功能的子模块，这些子模块，可以根据我们项目需求的不同进行快速的整合，举一个简单的例子，我们刚才看到的辅助驾驶产品，可以通过我们的摄像头感知模块，进行持续的迭代。我们的摄像头感知，激光感知，毫米波感知融合到一起，就可以组成我们的L4级自动驾驶感知方案。如果我们要切换车型，也可以随时进行一系列的修改。其次我们也提出了一套统一的硬件平台，这些硬件前期我们已经做过相应的选型和适配。针对不同的车型，我们只需要选取最佳的布设位置，就可以进行高效的移植。最后我们也搭建了一套统一的软件平台，模块化的架构可以针对不同的需求进行高效的功能定位，将相应的功能模块进行快速的拆解组合，这样就可以让我们在项目上能够做到快速的响应。正是由于这三个方面的优势，我们才能将自动驾驶技术在乘用车、小巴，未来其他车型上进行快速移植。

下面向各位展示的是我们的自动驾驶小巴的一些实际运行视频，该小巴已经在江苏无锡车联网先导区落地，我们可以看到该小巴在公开道路，复杂交通场景下可以进行正常的运行。小巴的硬件配置相对比较精简，同时加装了L4级自动驾驶系统，V2X车载终端，以及HMI人机交互系统。同时该车具有智能网联功能，能接入我们车联网云端，接收到云端下发的相应信息，辅助车端做出有效的判断。设计过程中，我们也配备了安全保障模块，保证我们自动驾驶系统整体的安全性和可靠性。未来我们这个小巴也会在全国各地进行相应的部署，让大家能够更快的体验到自动驾驶技术给出行带来的改变。

自动驾驶小巴融合了商汤原创的增强现实技术，创造出了自动驾驶AR小巴，该车适用于产业园区、景区、主题乐园等场景，大家可以简单看一下，这是我们实际运行的一些效果。我们通过车内的显示大屏，结合我们的AR技术，能够直观的呈现出产业发展，经济规划，科技文化等多元内容。在提升乘车体验的同时，能够更好的达到宣传展示的效果。

我们为了更好的实现车路协同的相关功能，我们也研发了智能车路协同云控平台，打造了“车陆云一体化”的协同监管、分析决策。该平台实现了车和路端设备的统一管理，能够提供监管服务，数据服务，出行服务，相关数据能够得到有效的处理，具备存储，融合和分析等功能。当然，针对运营监控中心，我们也能提供可视化的展示功能。

以上就是我们商汤科技在智能网联汽车方面和大家分享的内容，感谢大家的聆听，谢谢大家！