理想汽车近日宣布其智能驾驶技术取得重大突破,正式全量推送端到端+VLM系统,标志着理想汽车正式迈入AI大模型时代。这一创新技术首次亮相于今年7月的理想汽车夏季智能驾驶发布会,以其独特的one-model结构和将视觉语言模型VLM部署到车端芯片上的双系统方案,引起了广泛关注。
理想汽车的端到端+VLM系统在实际场景中表现出色,能够应对路边起步、环岛、U型掉头等复杂场景,同时基于VLM技术,实现了对限时公交车道、潮汐/可变车道等特殊场景的识别和应对,显著提升了驾驶的安全性、舒适性和效率。
此次全量推送的版本是基于V4.8.6模型,是在400万clips基础上迭代的第16个版本。主要升级点包括提升超车场景的理解能力、导航信息理解能力以及障碍物检测精度,使驾驶体验更加流畅和安全。
在交互方面,理想汽车也进行了升级。系统1的端到端模型文字弹窗更加丰富易懂,实时交互展示导航、交规等相关信息。系统2的VLM视觉语言模型则新增了图文视窗,能够在特殊场景下展示模型的思考过程和结果,增强了用户的理解和信任。
理想汽车的这一技术创新,使其在智能驾驶领域实现了弯道超车。尽管面临诸多挑战,但理想汽车通过引入VLM视觉语言模型和使用泛化能力极强的世界模型进行测试,确保了方案的安全性和高效性。
理想汽车智能驾驶副总裁郎咸朋表示,端到端技术的最大改变在于开始真正用人工智能的方式来做自动驾驶。通过给大模型喂高质量的数据并提升模型能力,使系统能够做出更好的规划和决策。
在数据量和算力方面,理想汽车也取得了显著进展。目前其智能驾驶累积训练里程已超过25亿公里,预计年底将超过30亿公里。同时,训练算力也在不断提升,预计到2024年底将超过8EFLOPS。
随着消费者对智能驾驶技术的认可度不断提高,自动驾驶市场正在快速发展。据预测,2024年我国自动驾驶市场规模将达3832亿元。理想汽车的这一技术创新,无疑将为智能驾驶领域的发展注入新的活力。