高端大气网站,怎么做平台推广,专建网站,剪辑培训现在的自动驾驶#xff0c;大多数还是采用的模块化架构#xff0c;但这种架构的缺陷十分明显#xff1a;在一个自动驾驶系统里#xff0c;可能会包含很多个模型#xff0c;每个模型都要专门进行训练、优化、迭代#xff0c;随着模型的不断进化#xff0c;参数量不断提高…现在的自动驾驶大多数还是采用的模块化架构但这种架构的缺陷十分明显在一个自动驾驶系统里可能会包含很多个模型每个模型都要专门进行训练、优化、迭代随着模型的不断进化参数量不断提高所需的研发人员也跟着涨研发成本自然居高不下。
而端到端架构的优势在于只通过一个模型就实现了以上多种模型的功能因此我们只需要调整训练这一个模型就能大大提高性能这让我们可以更好地集中资源实现功能聚焦。
为此端到端架构的研究一直是自动驾驶领域的热门方向我这次也收集整理了36篇端到端自动驾驶论文来和大家分享原文代码已打包文末领取
端到端5
Policy Pre-Training for End-to-End Autonomous Driving via Self-Supervised Geometric Modeling
标题通过自监督几何建模进行端到端自动驾驶的策略预训练
内容作者提出了PPGeo(基于几何建模的策略预训练)这是一个直观和直接的完全自监督框架用于视运动驾驶中的策略预训练。作者的目标是通过对大规模无标注和无标定的YouTube驾驶视频进行3D几何场景建模将策略表示学习为一个强大的抽象。所提议的PPGeo分两个阶段执行以支持有效的自监督训练。在第一阶段几何建模框架同时生成姿态和深度预测以两个连续帧为输入。在第二阶段视觉编码器通过仅基于当前视觉观察预测未来自身运动来学习驾驶策略表示并通过光度误差进行优化。如此预训练的视觉编码器配备了丰富的驾驶策略相关表示从而能够胜任多个视运动驾驶任务。 Trajectory-guided Control Prediction for End-to-end Autonomous Driving: A Simple yet Strong Baseline
标题基于轨迹指导的端到端自动驾驶控制预测一个简单但强大的基准
内容当前的端到端自动驾驶方法要么基于规划的轨迹运行控制器要么直接进行控制预测这两种方法构成了两个相对独立的研究方向。考虑到两者之间的潜在互补优势本文首次探索将这两个成熟的世界结合起来。具体而言作者的集成方法分别有轨迹规划和直接控制两支。轨迹分支预测未来轨迹控制分支采用新颖的多步预测方案以推理当前行为与未来状态之间的关系。两支相连使控制分支在每个时间步都从轨迹分支获得相应指导。然后将两支的输出融合以实现互补优势。作者在封闭环城市驾驶环境中评估结果使用CARLA模拟器中的具有挑战性的场景。即使只使用单目摄像头输入所提方法也位居CARLA排行榜第一大幅领先其他使用多传感器或多融合机制的复杂方法。 ST-P3: End-to-end Vision-based Autonomous Driving via Spatial-Temporal Feature Learning 标题基于空间-时域特征学习的端到端基于视觉的自动驾驶(ST-P3)
内容作者提出了一个空间-时域特征学习方案以同时获得感知、预测和规划任务更具代表性的一组特征称为ST-P3。具体而言在进行鸟瞰图变换用于感知之前作者提出了一种以自身为中心的累积技术来保留3D空间中的几何信息。为了进行未来预测作者设计了一种双通道建模方法来考虑过去的运动变化作者引入了一种基于时间的精炼单元来补偿规划中的基于视觉的元素的识别。 Urban Driver: Learning to Drive from Real-world Demonstrations Using Policy Gradients 标题城市司机使用策略梯度从真实世界演示中学习驾驶
内容本文首次提出了一个离线策略梯度方法用于从大规模真实世界演示中学习复杂城市驾驶的模仿策略。这是通过在感知输出和该区域的高保真高清地图之上构建一个可微分的数据驱动模拟器来实现的。它允许我们使用中间表示从现有演示中合成新的驾驶体验。使用这个模拟器在闭环中采用策略梯度训练一个策略网络。作者在城市道路上训练了提出的方法结果表明它学习到了复杂的驾驶策略并表现出很好的泛化能力能够执行各种驾驶机动操作。 MP3: A Unified Model to Map, Perceive, Predict and Plan
标题MP3一个统一的模型进行映射、感知、预测和规划
内容作者提出了MP3这是一种端到端的无地图驾驶方法其输入是原始传感器数据和高级命令(例如在交叉路口左转)。MP3预测中间表示包括在线地图和当前及未来的动态代理状态并在新颖的神经运动规划器中利用它们做出可解释的决策同时考虑不确定性。与基准和大规模真实世界数据集中的专家驾驶相比作者的方法在复杂的长期闭环模拟中明显更安全、更舒适并且可以更好地遵循命令。 综述3
Recent Advancements in End-to-End Autonomous Driving using Deep Learning: A Survey
标题最近端到端自动驾驶技术中深度学习的进展一项调研
内容本文全面回顾了端到端的自动驾驶技术栈它提供了一个自动驾驶任务的分类其中神经网络已经以端到端的方式被使用涵盖从感知到控制的整个驾驶过程同时解决实际应用中遇到的关键挑战分析了端到端自动驾驶的最新发展并根据基本原理、方法和核心功能对研究进行分类。 End-to-end Autonomous Driving: Challenges and Frontiers 标题端到端自动驾驶挑战与前沿
内容在本论文中作者对250多篇论文进行了全面分析涵盖了端到端自动驾驶的动机、路线图、方法、挑战和未来趋势。作者深入探讨了几个关键挑战,包括多模态、可解释性、因果混淆、鲁棒性和世界模型等。此外还讨论了基础模型和视觉预训练的当前进展以及如何在端到端驾驶框架内部署这些技术。 Delving into the Devils of Birds-eye-view Perception: A Review, Evaluation and Recipe 标题深入研究鸟瞰视角感知的难点:综述、评估与指南
内容本调研回顾了BEV感知的最新工作并对不同解决方案进行了深入分析。此外还描述了几种系统的BEV方法设计。作者还提供了全面的实用指南以提高BEV感知任务的性能包括摄像头、激光雷达和融合输入。最后作者指出了该领域的未来研究方向。 可解释性13 Planning-oriented Autonomous Driving Best Paper Multi-Modal Fusion Transformer for End-to-End Autonomous Driving Learning Situational Driving Learning from All Vehicles Policy Pre-training for Autonomous Driving via Self-supervised Geometric Modeling NEAT: Neural Attention Fields for End-to-End Autonomous Driving TransFuser: Imitation with Transformer-Based Sensor Fusion for Autonomous Driving Safety-Enhanced Autonomous Driving Using Interpretable Sensor Fusion Transformer PlanT: Explainable Planning Transformers via Object-Level Representations Safety-Enhanced Autonomous Driving Using Interpretable Sensor Fusion Transformer ST-P3: End-to-end Vision-based Autonomous Driving via Spatial-Temporal Feature Learning Hidden Biases of End-to-End Driving Models Scaling Self-Supervised End-to-End Driving with Multi-View Attention Learning
模仿学习11 Think Twice before Driving: Towards Scalable Decoders for End-to-End Autonomous Driving Learning by Watching Policy Pre-training for Autonomous Driving via Self-supervised Geometric Modeling End-to-End Urban Driving by Imitating a Reinforcement Learning Coach Hidden Biases of End-to-End Driving Models Scaling Self-Supervised End-to-End Driving with Multi-View Attention Learning Learning by Cheating SAM: Squeeze-and-Mimic Networks for Conditional Visual Driving Policy Learning Urban Driving with Conditional Imitation Learning Learning to Drive from Simulation without Real World Labels Multimodal End-to-End Autonomous Driving
行为克隆3 KING: Generating Safety-Critical Driving Scenarios for Robust Imitation via Kinematics Gradients Learning to Drive by Watching YouTube Videos: Action-Conditioned Contrastive Policy Pretraining Exploring the Limitations of Behavior Cloning for Autonomous Driving
关注下方【学姐带你玩AI】
回复“端到端”免费领取全部论文代码合集
码字不易欢迎大家点赞评论收藏
