> 数据图表

请问一下理想:双系统并行,VLM规范端到端模型下限

2025-3-1
请问一下理想:双系统并行,VLM规范端到端模型下限
理想:双系统并行,VLM规范端到端模型下限图31:理想汽车与极佳科技等联合推出ReconDreamer世界模型世界模型是端到端自动驾驶的闭环仿真系统,可视为VLM的逆向工程,通过文字提示生成视频。它与端到端模型可以协同工作——世界模型生成的视频输入车端大模型,车端大模型规划并执行动作,动作产生新场景和视角,再由世界模型生成新数据,形成闭环测试。世界模型可自监督生成视频,无需3D标签,利用海量驾驶视频训练,其核心价值是生成现实中难以采集的长尾场景视频。资料来源:汽车之心,51CTO,国元证券研究所在高级别自动驾驶中,世界模型将替代VLM模型在车端应用。理想目前将世界模型部署在云端,作为仿真器承担测试和训练任务。世界模型构建虚拟世界,为系统1的端到端模型和系统2的VLM模型提供测试环境,模型通过模拟测试后才会交付用户。目前,端到端模型+VLM模型的双系统已能胜任有监督自动驾驶,VLM主要起辅助提醒作用;但随着行业向无监督自动驾驶或L4级别发展,系统需要更强处理未知场景的能力,理想认为最终的方案是在车端使用世界模型替代VLM。世界模型将通过预测未来范式,融合数字与物理世界,打破感知与认知的隔阂,解决端到端模型对样本库外数据的预测失准问题,提升智能驾驶的泛化性和安全性,确保精准控制。请务必阅读正文之后的免责条款部分32