褚文博：进一步集成大模型，优化自动驾驶核心技术

中国青年报客户端讯（中青报·中青网见习记者贾骥业记者张渺）“进一步集成AI大模型成为解决‘端到端’自动驾驶核心壁垒的关键。”中国西部科学城智能网联汽车创新中心总经理、国家智能网联汽车创新中心首席技术专家褚文博，在8月15日举行的2024世界青年发展论坛数字发展主题论坛上说。

“端到端”是一种自动驾驶技术，其核心在于将道路、车辆、视听等感知信息输入自动驾驶系统后，可直接输出决策命令，中间过程由人工智能自动化完成，实现了传统自动驾驶系统中感知、‌决策、‌规划等模块的一体化。

在褚文博看来，大模型的出现促进自动驾驶从模块化向“端到端”的演变。但他也表示，“端到端”自动驾驶依然面临着很大的问题。“端到端”自动驾驶高度依赖于训练数据，而当前可利用的数据存在仿真场景真实度低、训练场景泛化性差、标注数据类型单一等问题。此外，“端到端”的推理过程是隐藏的“黑盒”，还很难对决策过程中的变量进行监管，容易导致一系列安全风险。

“我们需要通过进一步集成AI大模型，来优化‘端到端’这项自动驾驶的核心技术。”褚文博说，首先要使用世界模型（通往通用人工智能的关键路径之一）来增强驾驶感知，除了周边车道线，该技术甚至可以感知到包括天气、光影、形状等更真实的驾驶情况；其次，要利用多模态大模型的信息，除了车辆传感器提供的信息，还要增加来自其他云端的信息。同时，还可以通过视觉语言大模型来实现驾驶交互，让车辆根据驾驶情况形成一系列文本信息，来直接指导车辆的运动决策。

此外，褚文博还提到要“固化安全”，即力争实现“端到端”自动驾驶的可解释性，以减少驾驶风险，一方面要提升模型的可调控性，另一方面可以输出更多中间环节便于安全监控。

8月15日，褚文博：进一步集成大模型，优化自动驾驶核心技术2024世界青年发展论坛数字发展主题论坛在重庆举行，中国西部科学城智能网联汽车创新中心总经理、国家智能网联汽车创新中心首席技术专家褚文博正在发表主旨演讲。主办方供图来源：中国青年报客户端