技术深度解析
理想汽车的Livis代表了与传统自动驾驶架构的重大分野。传统系统依赖模块化流水线:感知(物体检测、车道分割)、预测(轨迹预测)、规划(路径优化)和控制(转向、加速)。Livis将这些阶段整合为一个统一的端到端神经网络,结合了大语言模型(LLM)主干与学习型世界模型。
其核心,Livis采用基于Transformer的架构,摄取多模态数据——摄像头画面、LiDAR点云、雷达信号以及来自座舱麦克风的音频——并将它们编码到共享的潜在空间中。这与Google DeepMind在其Gato模型中采用的方法类似,但针对实时车辆运行进行了扩展。LLM组件负责高级推理:理解自然语言指令(“在咖啡店附近找个停车位”)、解读社交线索(行人挥手),甚至与乘客进行对话。世界模型则基于数百万小时的驾驶数据和合成模拟进行训练,预测环境的未来状态并评估可能的行动。
一个关键创新是Livis执行“主动推理”的能力——系统不仅对环境做出反应,还能主动干预。例如,如果世界模型预测有儿童从停放的货车后冲上街道的概率很高,Livis可以预先减速并发出警告,甚至在儿童可见之前。这超越了传统的预测性制动,后者依赖于首先检测到障碍物。
相关的开源仓库:
- GitHub上的World Model(例如David Ha和Jürgen Schmidhuber的“world-models”): 该仓库提供了学习环境压缩表示的基础架构,理想汽车可能据此调整了自己的世界模型。该项目拥有超过3000颗星,在具身智能研究中被广泛引用。
- LeRobot(来自Hugging Face): 一个社区驱动的机器人学习仓库,包括模仿学习和强化学习。理想汽车的工程师曾为此项目做出贡献,表明他们将其用于训练操作任务。
- DIAMBRA(来自AIcrowd): 一个用于自动驾驶的强化学习框架,理想汽车可能用它进行Livis控制策略的基于模拟的训练。
性能基准测试(理想汽车内部数据,未经独立验证):
| 指标 | 传统AD架构(理想AD Max 2.0) | Livis(具身智能) | 改进幅度 |
|---|---|---|---|
| 感知延迟(毫秒) | 45 | 32 | 快29% |
| 规划时域(秒) | 5 | 15 | 长3倍 |
| 未见场景处理(成功率) | 68% | 89% | +21% |
| 自然语言指令准确率 | 不适用 | 94% | 新能力 |
| 能耗(瓦/次推理) | 250 | 310 | +24%(权衡) |
数据要点: Livis以更高的能耗换取了规划时域和未见场景处理能力的显著提升。能够提前15秒而非5秒进行规划,在安全性上是一个阶跃式变化,尤其是在复杂的城市环境中。然而,功耗增加24%给量产车辆带来了热管理挑战。
关键玩家与案例研究
理想汽车并非孤军奋战。具身智能竞赛正在多条战线上升温:
Tesla 仍然是最直接的竞争对手。其全自动驾驶(FSD)系统正朝着端到端神经网络演进,而公司的Optimus人形机器人共享相同的底层AI架构。Tesla CEO Elon Musk曾表示,Optimus最终将“比汽车业务更有价值”。理想汽车的Livis实质上将两者合二为一——将汽车本身变成了机器人。
Figure AI(由OpenAI、Microsoft和NVIDIA支持)正在开发通用人形机器人。虽然Figure专注于仓库和工厂应用,但其技术可以轻松适配到车辆。该公司最近展示了其机器人使用视觉-语言-动作模型执行自主任务,与Livis类似。
NVIDIA 为这些系统中的许多提供了硬件基础。其DRIVE Thor平台集成了GPU、CPU和专用Transformer引擎,很可能是驱动Livis的计算平台。NVIDIA的Isaac Sim也用于世界模型训练。
中国竞争对手:
- 小鹏汽车 拥有自己的XNGP自动驾驶系统,并通过其子公司小鹏机器人投资于机器人技术。
- 比亚迪 最近与DeepRoute.ai合作开发端到端驾驶模型,但尚未宣布具身智能平台。
具身智能平台对比:
| 公司 | 平台 | 核心技术 | 部署 | 状态 |
|---|---|---|---|---|
| 理想汽车 | Livis | LLM + 世界模型 + 多模态 | 乘用车 | 已宣布,2026年量产 |
| Tesla | FSD + Optimus | 端到端神经网络 | 车辆与机器人 | 已部署(FSD Beta),Optimus原型 |
| Figure AI | Figure 01 | 视觉-语言-动作模型 | 人形机器人 | 原型演示 |
| NVIDIA | DRIVE Thor + Isaac Sim | 硬件+模拟平台 | 跨平台 | 已上市 |
| 小鹏汽车 | XNGP + 小鹏机器人 | 模块化AD + 机器人 | 车辆与机器人 | 已部署(XNGP),机器人研发中 |
| 比亚迪 | 与DeepRoute.ai合作 | 端到端驾驶模型 | 车辆 | 开发中 |