传统自动驾驶系统采用模块化架构:感知→定位→预测→决策→规划→控制,每个模块由不同团队开发,模块之间通过人类可理解的接口(如检测框、高精地图语义、轨迹点)传递信息。

端到端则完全打破这一范式:输入原始传感器数据,直接输出方向盘转角、油门/刹车等车辆控制信号。中间没有任何人工定义的接口,所有计算由一个或极少数的神经网络完成。马斯克将FSD V12称为Full AI End‑to‑End。程序员不再显式编写“识别车道线”、“描述行人意图”的代码,所有驾驶逻辑都隐式地存储在神经网络的权重中,靠数据训练涌现。

特别说明:实际系统中,完全的“传感器到控制”单模型极少被严格采用。更准确的描述是“可求导的端到端”,即整个系统允许梯度从最终驾驶损失一直回传至感知前端,从而实现全局联合优化。V12的端到端并非严格单模型,而是包含数个紧密耦合的神经网络(如感知网络输出隐特征,决策规划网络接力),训练时允许梯度跨模块反传。
算法篇:从BEV+Transformer到端到端大模型
Jethro,公众号:小白楼实验室算法篇:从BEV+Transformer到端到端大模型
预测、决策与规划被集成进同一个神经网络,但感知和决策规划之间仍通过人类可理解的接口(障碍物位置、道路边界)交互,两部分独立训练。优点是模块可单独迭代,缺点是上下游的信息损失无法通过梯度弥补。
感知模块不再输出人类可读结果,而是输出一个特征向量;决策规划网络接收该特征向量直接输出规划轨迹。关键突破在于跨模块梯度传导:两个模块必须联合训练,梯度可以从规划损失一直回传到感知网络,实现全局最优而非局部最优。这正是华为ADS 3.0(采用GOD+PDP两段式端到端,感知与规控分离)、小鹏XNGP(采用XNet+XPlanner两段式端到端)采用的技术路线。
到2026年,世界模型已是主流战场。特斯拉在FSD V12的后续版本中持续融合世界模型预测能力;理想汽车2025年推出的VLA司机大模型采用快慢双系统架构;2026年3月发布的MindVLA-o1则升级为原生多模态MoE Transformer架构;蔚来推送了NWM 2.0世界模型;行业已经跨过了单纯"缩代码"的阶段。
演进关键节点:
2016年,英伟达提出PilotNet CNN网络实现端到端驾驶,但模型过于简单,仅支持高速场景;
2020年,特斯拉发布BEV感知,开启感知端到端;
2023年8月,特斯拉FSD V12亮相,首款全神经网络决策系统;
2024年,华为、小鹏等推出模块化端到端架构;
2025年,世界模型与视觉-语言-动作模型加速落地;
2026年,端到端大模型有成为行业标配的趋势,L3级商用与L4级探索并行推进。

FSD V12的“2000行C++代码”极具象征意义。它意味着过去三十万行显式规则被弃用。驾驶策略从特斯拉车队采集的数十亿英里人类驾驶数据中通过模仿学习涌现。核心优势有二:
规则引擎退场:长尾场景不再依赖工程师打补丁,而是指望数据覆盖。
全局优化:不像模块化架构那样各自优化局部指标(感知mAP、轨迹平滑度),V12直接用“是否安全舒适地到达目的地”这一终极目标来优化整个网络。
Tesla FSD v12.5 will combine highway and city software stacks and bring FSD to the Cybertruck, says Elon Musk
https://www.teslaoracle.com/2024/07/13/tesla-fsd-v12-5-highway-and-city-software-signle-stack-bring-fsd-to-the-cybertruck-elon-musk/
特斯拉FSD V13发布,强大到可怕!2025将是特斯拉关键之年?
吴沛哲,公众号:汽车之家特斯拉FSD V13发布,强大到可怕!2025将是特斯拉关键之年?
![]() | ![]() |
FSD V14(2026年):底层重写AI编译器和运行时,反应速度提升约20%;训练和视觉编码器升级,复杂红绿灯路口处理更聪明;开得更"拟人",车道偏移减少、跟车更自然;泊车更聪明,新增"无干预里程连续计数器";Actually Smart Summon提速约33%。
Tesla increases Actually Smart Summon speed by 33% in new FSD update
https://electrek.co/2026/05/17/tesla-actually-smart-summon-speed-increase-8-mph-fsd-v14-3-3/
Tesla expands ‘Robotaxi’ to entire Austin metro — but still has only ~20 vehicles
https://electrek.co/2026/06/03/tesla-robotaxi-expands-entire-austin-metro-only-20-vehicles/
Tesla confirms Cybercab production has started despite delays in unsupervised driving
https://electrek.co/2026/04/23/tesla-cybercab-production-starts-no-nhtsa-2500-vehicle-cap/
端到端网络的决策过程难以解释。L4的认证体系(如ISO 26262、UL 4600)历来要求可解释、可分解的安全论证。Waymo坚持采用具有可解释约束的模块化架构,配合高精地图和冗余传感,其Robotaxi已在旧金山、凤凰城实现大规模付费运营,安全性记录远优于同期FSD。尽管2025年以后,Waymo也开始引入学习型规划,但其上层仍有确定性的安全包络。
端到端的支持者认为,可解释性是“过时的执念”。飞机的飞控也是高维非线性系统,照样通过形式化验证。针对此,学界和工业界提出多种“端到端+安全护栏”方案:
后验证:用形式化方法在线监控神经网络输出的安全性,必要时触发基于规则的降级策略。
可解释插件:利用大语言模型输出文本解释驾驶决策,再映射为轨迹(如早期探索性的DriveVLM/DriveVLA方案)。
安全强化学习:用约束马尔可夫决策过程,将碰撞、违反交通规则定义为硬约束,内置到训练目标中。

端到端的性能与数据量、多样性呈强正相关。特斯拉基于约5万块NVIDIA H100 GPU构建了Cortex训练集群,于2024年Q4在德克萨斯州超级工厂上线。2025年Q2,特斯拉进一步将Cortex扩展至约6.7万块H100等效算力。马斯克表示训练基础设施投资将持续增长,Optimus机器人的训练需求预计至少是汽车的10倍。即便如此,系统仍会在遇到未覆盖的长尾场景(如突然出现的动物、非标准交通设施)时表现异常。
Tesla’s 50,000 GPU Cortex supercomputer went live in Q4 2024
https://www.datacenterdynamics.com/en/news/teslas-50000-gpu-cortex-supercomputer-went-live-in-q4-2024/
Tesla Dojo: The rise and fall of Elon Musk’s AI supercomputer
https://techcrunch.com/2025/09/02/tesla-dojo-the-rise-and-fall-of-elon-musks-ai-supercomputer/
端到端大模型进入普及期,自动驾驶能否迎来终局?
魏文,公众号:第一财经陆家嘴端到端大模型进入普及期,自动驾驶能否迎来终局?
19.58万元起售,跨时代的AI汽车小鹏G7正式上市
公众号:老司机汽车19.58万元起售,跨时代的AI汽车小鹏G7正式上市
前图森未来创始人侯晓迪揭秘端到端“骗局”
圆周智行,公众号:圆周智行前图森未来创始人侯晓迪揭秘端到端“骗局”
理想汽车发布下一代自动驾驶基础模型MindVLA-o1
理想汽车,公众号:理想汽车理想汽车发布下一代自动驾驶基础模型MindVLA-o1
李想:端到端只能解决L3 解决不了L4
https://weixin.qq.com/sph/AdgCTVwXZO

无论神经网络多强大,总需要一个确定性的安全监控层。该层通过传统方法(如雷达/激光雷达障碍物聚类、规则校验)实时校核网络输出,一旦识别出碰撞风险,立即触发紧急制动或保守轨迹。这相当于给黑盒套上一个白盒笼子。2025年以后的主流端到端方案,无一例外都内建了这类功能安全模块。
华为 ADS4 - ADS5
Jethro,公众号:小白楼实验室算法篇:从BEV+Transformer到端到端大模型
从ADS 4到ADS 5,华为智驾系统有哪些升级?
陈云培,公众号:智驾最前沿从ADS 4到ADS 5,华为智驾系统有哪些升级?
小鹏端到端智驾落地,XNGP迎史诗级更新:L3级自动驾驶来到临界点
https://chejiahao.autohome.com.cn/info/16146989
理想在2025年将空间理解、语言理解与行动决策统一到VLA司机大模型框架,月使用率达80%。2026年3月,在NVIDIA GTC 2026发布MindVLA-o1,通过3D空间理解、多模态思考、统一行为生成、闭环强化学习和软硬件协同设计五大技术创新,构建面向物理世界的通用智能体。
理想汽车发布下一代自动驾驶基础模型MindVLA-o1
理想汽车,公众号:理想汽车理想汽车发布下一代自动驾驶基础模型MindVLA-o1
蔚来于2026年1月推送NWM 2.0世界模型新版本,首装46万辆Banyan车型,首创"世界模型+闭环强化学习"架构,实现城区/高速领航、智能泊车、主动安全全面提升”。
踏实用、放心开,「蔚来世界模型 NWM」全新版本正式推送
蔚来,公众号:蔚来踏实用、放心开,「蔚来世界模型 NWM」全新版本正式推送
华为智驾技术演进史:从ADS 1.0到5.0的跃迁
https://www.leiphone.com/category/transportation/AsDfGhJk5LpQw3ErT.html

结语:
从30万行到2000行,代码的消失不是复杂度的消失,而是复杂度的转移:从人类工程师的显式逻辑,转移到数据和算力构成的隐式模型。2026年的今天,端到端已经证明它可以让辅助驾驶拥有前所未有的丝滑和拟人性,但从L2到L4的最后一步,不是单靠扩大网络能够跨过的。安全验证、因果推理、人机交互、法规体系,每一项都需要技术之外的协同进化。
