420 FPS!LSTR:端到端实时车道线检测新SOTA!

作者 |  CVer计算机视觉  编辑 | 汽车人

原文链接:https://zhuanlan.zhihu.com/p/331892664

点击下方卡片,关注“自动驾驶之心”公众号

ADAS巨卷干货,即可获取

点击进入→自动驾驶之心【车道线检测】技术交流群

Transformer大法好!表现SOTA!性能优于PolyLaneNet等网络,速度可高达420 FPS!代码已开源!

420 FPS!LSTR:端到端实时车道线检测新SOTA!_第1张图片

车道线检测是将车道标记识别为近似曲线的过程,被广泛用于自动驾驶汽车的车道线偏离警告和自适应巡航控制。流行的分两步解决问题的pipeline:特征提取和后处理。虽然有用,但效率低下,在学习全局上下文和通道的长而细的结构方面存在缺陷。

为了解决这些问题,我们提出了一种端到端方法,该方法可以直接输出车道形状模型的参数,使用通过transformer构建的网络来学习更丰富的结构和上下文。车道形状模型是基于道路结构和摄像头姿势制定的,可为网络输出的参数提供物理解释。

420 FPS!LSTR:端到端实时车道线检测新SOTA!_第2张图片

Transformer使用自注意力机制对非局部交互进行建模,以捕获细长的结构和全局上下文。

420 FPS!LSTR:端到端实时车道线检测新SOTA!_第3张图片

主要贡献

420 FPS!LSTR:端到端实时车道线检测新SOTA!_第4张图片

实验结果

该方法已在TuSimple基准测试中得到验证,并以最轻巧的模型尺寸和最快的速度显示了最新的准确性。此外,我们的方法对具有挑战性的自收集车道线检测数据集显示出出色的适应性,显示了其在实际应用中的强大部署潜力。

420 FPS!LSTR:端到端实时车道线检测新SOTA!_第5张图片 420 FPS!LSTR:端到端实时车道线检测新SOTA!_第6张图片 420 FPS!LSTR:端到端实时车道线检测新SOTA!_第7张图片 420 FPS!LSTR:端到端实时车道线检测新SOTA!_第8张图片

国内首个自动驾驶学习社区

近1000人的交流社区,和20+自动驾驶技术栈学习路线,想要了解更多自动驾驶感知(分类、检测、分割、关键点、车道线、3D目标检测、多传感器融合、目标跟踪、光流估计、轨迹预测)、自动驾驶定位建图(SLAM、高精地图)、自动驾驶规划控制、领域技术方案、AI模型部署落地实战、行业动态、岗位发布,欢迎扫描下方二维码,加入自动驾驶之心知识星球,这是一个真正有干货的地方,与领域大佬交流入门、学习、工作、跳槽上的各类难题,日常分享论文+代码+视频,期待交流!

420 FPS!LSTR:端到端实时车道线检测新SOTA!_第9张图片

自动驾驶之心】全栈技术交流群

自动驾驶之心是首个自动驾驶开发者社区,聚焦目标检测、语义分割、全景分割、实例分割、关键点检测、车道线、目标跟踪、3D目标检测、BEV感知、多传感器融合、SLAM、光流估计、深度估计、轨迹预测、高精地图、NeRF、规划控制、模型部署落地、自动驾驶仿真测试、产品经理、硬件配置、AI求职交流等方向;

420 FPS!LSTR:端到端实时车道线检测新SOTA!_第10张图片

添加汽车人助理微信邀请入群

备注:学校/公司+方向+昵称

你可能感兴趣的:(人工智能,深度学习,计算机视觉,机器学习,目标检测)