黄仁勋向自动驾驶开出“王炸” 发布开源Alpamayo模型

出品 | 搜狐汽车 · 汽车咖啡馆

作者 | 王雨竹

“物理人工智能的ChatGPT时刻已经到来，机器开始理解、推理并在现实世界中行动。”英伟达CEO黄仁勋在CES上表示。

当地时间1月5日，黄仁勋在拉斯维加斯举行的CES展会上发布了Alpamayo平台，并开源了模型以及用于训练模型的数据。黄仁勋表示，这是全球首个具备思考、推理能力的自动驾驶汽车AI。本次CES，有关汽车的内容在黄仁勋的演讲中少见地占据了很大比重。

Alpamayo包括全球首个用于自动驾驶的开源推理VLA模型Alpamayo R1，和用于高保真自动驾驶测试的完全开源仿真框架AlpaSim。

Alpamayo R1采用端到端训练，从摄像头输入到执行输出，训练数据包括海量的自动驾驶行驶里程，以及人类驾驶示范的里程。此外，英伟达还使用了大量由其研发的世界模型Cosmos生成的里程数据，并标注了数十万个示例以进行训练。

Alpamayo R1能够接收传感器输入并控制方向盘、刹车和加速，还能对即将采取的行动进行推理，得出该行动的原因，以及相应的轨迹。通过像人类一样思考、推理，帮助自动驾驶车辆解决长尾问题。

最重要的是，通过完全的开源，很多此前不具备VLA模型开发经验的中小团队，也能获得与巨头同等的技术积累。通过蒸馏技术，模型还可以被压缩为轻量化版本。

黄仁勋表示，Alpamayo平台将率先搭载于全新奔驰CLA车型，并预计于今年年底前在美国推出。

除Alpamayo平台，在自动驾驶系统中，英伟达还使用了底层整套自动驾驶堆栈来充当安全护栏，两套软件系统互为镜像，并通过策略和安全评估判断当前任务是否能确保安全驾驶。如果能，则交由Alpamayo执行。如不能，系统则切换为更简单、安全的经典架构。黄仁勋表示，搭载英伟达自动驾驶软件的全新奔驰CLA是全球唯一同时运行这两套自动驾驶系统的汽车。

目前，Alpamayo模型的核心代码发布已在Hugging Face上发布。作为配套，英伟达还提供了包含1700余小时的驾驶数据的数据集，覆盖全球不同地理环境和天气条件。

同时，开源仿真框架AlpaSim也已在GitHub开放，能够高保真验证自动驾驶系统，为开发者提供安全、可扩展的虚拟测试环境。

“开发者还可以使用Cosmos生成合成数据，并在真实数据和合成数据的结合上训练和测试基于Alpamayo的自动驾驶应用。”英伟达汽车部门副总裁Ali Kani表示。

英伟达称，捷豹路虎、Lucid、Uber等都已对Alpamayo表现出兴趣。博世也采用了英伟达的NVIDIA NeMo等软件套件，以加速复杂人工智能功能的开发和部署。

黄仁勋还宣布，英伟达的首款自动驾驶汽车将于今年第一季度在美国上路测试，随后在第二季度进入欧洲，他还预计第三和第四季度会进入亚洲。未来，英伟达将持续对Alpamayo进行版本更新。

本次CES上，英伟达依然发布了众多新的开源模型、数据和工具，包括用于智能体AI的NVIDIA Nemotron系列、用于物理AI的NVIDIA Cosmos平台、用于自动驾驶开发的全新NVIDIA Alpamayo系列、用于机器人的NVIDIA Isaac GR00T以及用于生物医学的NVIDIA Clara，为企业提供开发现实世界AI系统的工具。