Waymo如何用AI模拟龙卷风与大象等极端驾驶场景
一辆自动驾驶汽车行驶在空旷的高速公路上，突然远处出现了巨大的龙卷风。这辆无人驾驶汽车接下来会怎么做？
这只是Waymo在其刚刚创建的"超现实"虚拟世界中能够模拟的场景之一，该虚拟世界得到了谷歌DeepMind的帮助。Waymo的世界模型基于Genie 3构建，这是谷歌新推出的AI世界模型，能够通过文本或图像提示生成虚拟交互空间。但Genie 3不仅仅是用来创建任天堂游戏的劣质仿制品；它还可以构建逼真的交互式3D环境，Waymo称这些环境"适应了驾驶领域的严格要求"。
模拟是自动驾驶汽车开发中的关键组成部分，使开发人员能够在各种设置和场景中测试他们的车辆，其中许多可能只在最罕见的情况下出现——而不会对乘客或行人造成任何物理伤害的风险。自动驾驶汽车公司使用这些虚拟环境进行一系列测试，在此过程中累积数百万甚至数十亿英里的行驶里程，希望更好地训练他们的车辆应对现实世界中可能遇到的任何"边缘情况"。
Waymo在测试什么样的边缘情况？除了前面提到的龙卷风，该公司还可以模拟白雪覆盖的金门大桥、有漂浮家具的洪水淹没的郊区死胡同、火焰吞没的社区，甚至与流浪大象的遭遇。在每个场景中，Waymo机器人出租车的激光雷达传感器都会生成周围环境的3D渲染，包括道路上的障碍物。
"Waymo世界模型可以生成几乎任何场景——从常规的日常驾驶到罕见的长尾场景——跨越多种传感器模式，"该公司在博客文章中表示。
Waymo表示，Genie 3是为其机器人出租车创建虚拟世界的理想选择，引用了三个独特的机制：驾驶动作控制、场景布局控制和语言控制。驾驶动作控制允许开发人员模拟"假设"反事实，而场景布局控制则可以自定义道路布局，如交通信号和其他道路使用者行为。Waymo将语言控制描述为其"最灵活的工具"，允许调整时间和天气条件。这在开发人员试图模拟低光或强眩光条件时特别有用，在这些条件下，车辆的各种传感器可能难以看到前方的道路。
Waymo世界模型还可以将真实世界的行车记录仪镜头转换为模拟环境，为虚拟测试提供"最高程度的真实性和事实性"，该公司表示。它还可以创建更长的模拟场景，例如以4倍速度播放的场景，而不会牺牲图像质量或计算机处理能力。
"通过模拟'不可能'的情况，我们主动为Waymo驾驶员准备了一些最罕见和最复杂的场景，"该公司在其博客文章中说。
这不是Waymo第一次依靠谷歌庞大的AI资源来改进其自动驾驶技术。Waymo的EMMA（自动驾驶端到端多模态模型）训练模型是使用谷歌的Gemini构建的。据报道，Waymo正在开发基于Gemini的车内语音助手。而DeepMind，该公司的AI实验室，已经为Waymo提供了解决方案，帮助减少其传感器数据中的"误报"率。
Q&A
Q1：Waymo世界模型是什么？它有什么作用？
A：Waymo世界模型是基于谷歌Genie 3 AI构建的超现实虚拟世界，用于模拟自动驾驶汽车在各种极端场景下的表现，包括龙卷风、洪水、火灾甚至大象等罕见情况，帮助训练车辆应对现实中的边缘情况。
Q2：为什么自动驾驶汽车需要模拟测试？
A：模拟测试是自动驾驶开发的关键组成部分，它允许开发人员在不造成物理伤害风险的情况下测试车辆在各种罕见场景中的表现，通过虚拟环境累积数百万甚至数十亿英里的测试里程。
Q3：Genie 3模型在自动驾驶中有什么特殊功能？
A：Genie 3提供三个独特机制：驾驶动作控制（模拟假设场景）、场景布局控制（自定义道路和交通状况）、语言控制（调整时间和天气条件），特别适合创建适应驾驶领域严格要求的逼真3D环境。