自动驶端到端有哪几种模型?

3D视觉工坊 2025-11-25 07:00
当前业界对“端到端”的讨论愈发频繁,但其具体内涵却众说纷纭。
为厘清概念,我们可将端到端模型归纳为以下四种主流架构,它们分别代表了不同的技术路径与产品哲学。

一、感知端到端

感知端到端指的感知任务,从摄像头到检测、跟踪等任务的全模型化,代表工作有sparse-4D / stream PETR。
  • 优势:时空信息高效传输,特别是跟踪任务模型化为动态障碍物轨迹预测提供了完备时空信息;
  • 不足:架构中决策规划还是规则算法,无法像人类司机学习。
自动驶端到端有哪几种模型?图2

二、两段式端到端

两段式端到端指的感知和规划分别完成模型化:感知模型输入传感器数据,输出障碍物、车道线、交通标识等信息;规划模型接收感知模型结果,输出自车行驶轨迹。代表工作是华为ADS3.0 GOD+PDP 端到端。
  • 优势:感知模型和规划模型通过结构化数据链接,可解释性强,仿真、测试、迭代容易;
  • 不足:两模型信息链路只传递结构化的白名单信息,隔断了信息正向和反向传递过程,感知模型和规划模型只能学习到局部最优解,无法学习全局最优解。
自动驶端到端有哪几种模型?图3

三、一段式模块化端到端

将动态、静态、OCC、预测和规划等任务模型化,使用隐式特征 or 向量特征在各子模型中进行信息传递,模型前向和梯度回传全部打通。代表工作有23年的UniAD。
  • 优势:高效信息传递,决策规划任务可以直接从感知隐式特征提取信息,并将规划的梯队反传到感知网络,促使backbone可以提取到一些无法表达信息。
  • 不足:全模型化后可解释性弱,传统规划仿真无法使用,问题复现和定位困难。
自动驶端到端有哪几种模型?图4

四、一段式OneModel端到端

用一个模型同时完成了时空特征信息提取、感知和规划等子任务解码。代表工作有理想的4D OneModel端到端。
  • 优势:信息损耗小,感知和规划query 在解码器中充分交互;并行化输出,耦合小,输出结果可以相互校验,保证结果的准确性和稳定性,可达到的产品上限高。
  • 不足:数据标注质量高,要求数据联合标注;多任务联合训练困难,训练资源消耗大。
自动驶端到端有哪几种模型?图5
来源:http://xhslink.com/o/9fouFaMkV5j 
本文仅做学术分享,如有侵权,请联系删文。

声明:内容取材于网络,仅代表作者观点,如有内容违规问题,请联系处理。 
more
百度“濒危物种AI守护官2.0”获第25届爱护动物年度创新实践奖
每天防范1400万次电信网络诈骗风险!百度安全AI组合拳获北京互联网大会肯定
统一高效图像生成与编辑!百度&新加坡国立提出Query-Kontext,多项任务“反杀”专用模型
顶尖论坛、AI公开课……百度世界2025干货加载中◼︎◼︎◼︎◻︎
仅0.9B!百度新开源模型一夜登顶,识别109种语言,综合分全球第一
定了!百度世界2025,11月13日见
全球第一,最强OCR之神诞生!百度这个0.9B开源模型问鼎SOTA
北航×百度飞桨 | AI人才是如何培育的?
宝马或重新推出增程车,京东外卖员被曝换新工服,传百度裁员赔偿N+3以上,赛博朋克2新爆料,这就是今天的其他大新闻!
今日大厂员工事:饿了么通知期权回购;百度部分团队搬横琴;抖音电商上线大促餐;京东地图扩建;蚂蚁搜推团队合并;理想启动销售PIP
Copyright © 2025 成都区角科技有限公司
蜀ICP备2025143415号-1
  
川公网安备51015602001305号