个人网站logo,铝基板营销型网站建设,分享到各大网站 代码,模仿建设银行网站截止目前#xff0c;按技术特点#xff0c;自动驾驶技术大致经历了三代发展#xff1a;第一代自动驾驶技术以后融合感知技术#xff0c;高精度地图#xff0c;基于惯导、GPS定位系统#xff0c;预测模块#xff0c;基于优化、搜索的规控等组成。第一代比较成熟的自动驾驶…
截止目前按技术特点自动驾驶技术大致经历了三代发展第一代自动驾驶技术以后融合感知技术高精度地图基于惯导、GPS定位系统预测模块基于优化、搜索的规控等组成。第一代比较成熟的自动驾驶技术的框架其实在2017年已经很清晰了博主本人在2017年参加京东JRC X机器人挑战赛时即采用的当下第一代自动驾驶技术架构即整体框架基于ros增加了数据收发、任务收发和完成的确认机制感知硬件采用Kinect V2使用YOLO做目标识别、检测然后对检测出目标框做大数中值滤波得到目标物体上接近中心的位置分布最后根据像素uv和深度d求目标位置再将位置坐标转换到机械臂坐标系下。定位模块硬件上包括IMU和单线激光雷达采用Gmapping模块进行定位最后的将感知信息、定位信息输入决策模块决策模块通过状态机进行任务规划A*、D*算法进行全局路径规划基于贝塞尔曲线、粒子滤波等进行局部路径规划。经调研了和了解目前技术栈主要基于后融合及感知、定位、预测、规控各模块序贯架构的公司有陕汽、千挂科技、慧拓、以及小米汽车等。
第二代自动驾驶系统在第一代自动驾驶方案基础上算法框架统一BEV框架感知采用了基于共享主干网的Transformer多任务感知模型在输出目标感知的同时几乎所有框架也都包含Occupancy预测同时基于本地实时地图生成方法降低了系统对高精度地图的依赖规控部分仍以搜索和优化方法为主。第二代自动驾驶技术是当前比较主流自动驾驶方案最早以特斯拉AI Day上分享的基于共享主干网络的多任务感知模型和基于动态交互树的决策、轨迹优化模型最为经典当前包括小鹏的Xnet架构百度、华为、小马智行、元戎启行、赢彻、智加科技等都有相关的会议报告或公开资料展示其基于BEV的第二代自动驾驶技术方案。
第三代自动驾驶系统诞生于chatGPT大火之后chatGPT相比于之前指令式聊天模型有了质的飞跃具备根据前后文进行多轮推理生成超长回答支持多模态输入智力水平接近人类等特点其背后代表性技术为基于Transformer的亿级参数大模型和基于巨量网络数据的RLHF人类反馈强化学习技术。chatGPT主要用于自然语言领域属于时序建模方法与自动驾驶技术有一定相似性自动驾驶也需要基于当前观测和历史观测给出车辆当前和未来一段时间控制信号或数据。因此很快在自动驾驶领域得到应用。第三代自动驾驶系统和第二代框架相同均是基于BEV框架但感知、规控算法开始采用端到端的方式并在训练通用自动驾驶控制器的同时利用大规模语料数据训练模型的自动驾驶场景描述能力代表性工作如2023年CVPR Best Paper UniAD和毫末智行的DriveGPT。当前毫末智行公布的涉及第三代自动驾驶方案资料最多其构建的DriverGPT据PPT演示称完成了实车城区自动驾驶并能根据视觉数据用自然语言推理当前自动驾驶系统规划和决策的合理性。实际产品要等到2024年才会上市具体第三代自动驾驶系统表现如何还得看实际测试效果。当前百度也在布局基于大模型、强化学习端到端的自动驾驶系统研究并招募相关人才。
与自动驾驶技术发展相对应的硬件平台与平台算力也在同步发展当前感知模块占用自动驾驶系统绝大部分算力因此硬件平台发展与当下主要感知模型架构密切相关。2018年感知模型以ResNet为代表参数量大概百万级。代表性的硬件芯片有TI TDA4、英伟达Xaiver、地平线J3算力需求大概30TOPS。后面EfficientNet出现其在ImageNet上的准确率为84.3%高于ResNet-200的79%但其推理速度较ResNet在TPU上快6.1倍在GPU上快3.3倍其参数范围达到千万级与其对应的硬件平台为地平线J5、英伟达Orin。当前随着transformer相关模型的上车加速模型参数已经到达亿级相应的硬件也在积极适配transformer相关模型参数及算力需求地平线J5也有相应的工具链可以部署transformer相关模型但完全适配transformer大模型的则是地平线BPU Nash架构可以部署大规模transformerGPT大模型并支持蒙特卡洛树搜索Alpha Go主要技术之一可实现复杂、超大求解空间快速搜索。硬件虽然更新速度较快但目前还不能满足自动驾驶系统移动端算力、架构需求当前根据一众大佬预测完全L4级RoboTaxi的算力需求大约在2000TOPS左右与英伟达下一代自动驾驶SOC Thor算力相同。 作者不优秀博仕Hanker https://www.bilibili.com/read/cv27265402/?spm_id_from333.999.0.0 出处bilibili
