news 2026/4/16 11:01:19

【论文阅读】SparseDrive: End-to-End Autonomous Driving via Sparse Scene Representation

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
【论文阅读】SparseDrive: End-to-End Autonomous Driving via Sparse Scene Representation

标题:SparseDrive: End-to-End Autonomous Driving via Sparse Scene Representation
作者:Wenchao Sun Xuewu Lin Yining Shi Chuang Zhang Haoran Wu Sifa Zheng

moviation

作者觉得成熟的模块化自动驾驶系统被分解为不同的独立任务,例如感知、预测和规划,从而导致模块间信息丢失和错误累积。相比之下,端到端范式将多任务统一到一个完全可微分的框架中,从而允许以规划为导向进行优化。尽管端到端范式具有巨大潜力,但现有方法的性能和效率都不令人满意,特别是在规划安全方面。作者觉得BEV方案的计算代价太高且模型设计太简单了。因此,作者搞了一个稀疏的sparseDrive模型,又快又好。

methods


是由三部分组成:图像编码器、对称稀疏感知和并行运动规划器;
在对称稀疏感知模块中,特征图被聚合成两组实例,来学习驾驶场景的稀疏表示。这两组实例分别代表周围的智能体和地图元素,被输入到并行运动规划器中,与初始化的自我实例进行交互。运动规划器同时预测周围智能体和自身车辆的多模态轨迹,并通过分层规划选择策略选择一条安全轨迹作为最终规划结果。
Symmetric Sparse Perception:

右边Sparse Detection和左边Sparse Online Mapping,都用相同的sparse4d结构的模型,训练方式也同于sparse4dv3, 只是特征变量不一样:

跟踪也是用的sparse4dv3里面的策略;

Parallel Motion Planner:

作者用前视最小特征图和自车状态进行初始化,并把自车和他车及周围环境信息concat在一起行车整个规划的环境模型;最后做预测和规划。**Hierarchical Planning Selection:**现在有了多模态规划轨迹方案,为了选择一个安全的轨迹,设计了一个分层规划选择策略。首先,选择一个轨迹方案子集 ,对应于高级命令 。然后,采用一种新颖的碰撞感知重新评分模块来确保安全性。利用运动预测结果,我们可以评估每个规划轨迹方案的碰撞风险,对于碰撞概率高的轨迹,我们降低该轨迹的分数。在实践中,我们简单地将碰撞轨迹的分数设置为0。最后,我们选择得分最高的轨迹作为最终的规划输出。

training:
SparseDrive 的训练分为两个阶段。在阶段 1 中,从头开始训练对称稀疏感知模块,以学习稀疏场景表示。在阶段 2 中,稀疏感知模块和并行运动规划器一起训练,没有模型权重冻结,充分感受端到端优化的好处。配置config文件即可:

loss:
另外,作者加了深度预测分支;

code 赏析




experiments

如作者说的,与其他模型相比,拉开了很大的差距。

其他发现:

【完结】

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/7 15:20:57

R3nzSkin英雄联盟换肤工具使用指南

R3nzSkin英雄联盟换肤工具使用指南 【免费下载链接】R3nzSkin Skin changer for League of Legends (LOL).Everyone is welcome to help improve it. 项目地址: https://gitcode.com/gh_mirrors/r3n/R3nzSkin R3nzSkin是一款专为英雄联盟(LOL)玩家设计的开源内存换肤工具…

作者头像 李华
网站建设 2026/3/30 16:42:04

【毕业设计】基于深度学习的垃圾分类识别系统机器学习

博主介绍:✌️码农一枚 ,专注于大学生项目实战开发、讲解和毕业🚢文撰写修改等。全栈领域优质创作者,博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战 ✌️技术范围:&am…

作者头像 李华
网站建设 2026/4/15 14:44:43

终极指南:3步实现扫描图像到CAD模型的智能转换

终极指南:3步实现扫描图像到CAD模型的智能转换 【免费下载链接】Scan2CAD [CVPR19] Dataset and code used in the research project Scan2CAD: Learning CAD Model Alignment in RGB-D Scans 项目地址: https://gitcode.com/gh_mirrors/sc/Scan2CAD Scan2CA…

作者头像 李华
网站建设 2026/4/16 10:44:18

华为光猫配置解密工具:5步快速掌握网络运维核心技术

网络运维工程师在日常工作中是否经常面临这样的困扰:加密的华为光猫配置文件无法直接读取,网络故障排查缺乏有效数据支撑,配置调整只能凭经验摸索?今天我们将深度解析一款能够彻底解决这些痛点的专业工具,让您轻松掌握…

作者头像 李华
网站建设 2026/4/2 7:41:37

Ai2Psd终极指南:3步搞定矢量图形无损转换

Ai2Psd终极指南:3步搞定矢量图形无损转换 【免费下载链接】ai-to-psd A script for prepare export of vector objects from Adobe Illustrator to Photoshop 项目地址: https://gitcode.com/gh_mirrors/ai/ai-to-psd 还在为Illustrator和Photoshop之间的文件…

作者头像 李华
网站建设 2026/4/9 23:37:45

如何快速掌握ImageGlass:Windows轻量级图片查看器的完整指南

如何快速掌握ImageGlass:Windows轻量级图片查看器的完整指南 【免费下载链接】ImageGlass 🏞 A lightweight, versatile image viewer 项目地址: https://gitcode.com/gh_mirrors/im/ImageGlass 还在为Windows自带图片查看器启动缓慢、功能单一而…

作者头像 李华