Nullmax论文入选ECCV 2024!新方法SimPB实现多相机BEV和图像空间同时检测

发布时间:2024-07-08
当地时间7月1日,欧洲计算机视觉国际会议 ECCV 2024公布论文录用结果,Nullmax感知团队的目标检测论文《SimPB: A Single Model for 2D and 3D Object Detection from Multiple Cameras》成功入选,卓越视觉感知能力再获国际顶级学术会议认可。ECCV是计算机视觉领域的全球三大顶会之一,由欧洲计算机视觉协会(ECVA)主办,每两年一届。ECCV不仅集聚了学术界和工业界的最新研究,吸引了全球顶尖实验室和研究所的优质工作,而且有着极为严苛的录用标准,论文水平备受认可。

在论文中,Nullmax提出了统一的目标检测模型,能够以端到端、单阶段的方式同时检测透视视图中的 2D 目标和 BEV 空间中的 3D 目标,并自动实现2D-3D Box之间的关联,通过循环迭代的方式将2D和3D的结果持续交互,充分发挥图像空间和BEV空间的检测优势,实现了出色的多相机2D和3D检测效果。

论文地址:

https://arxiv.org/abs/2403.10353

图片
对自动驾驶而言,视觉感知是一项关键技术,尤其是利用车辆周身的多颗相机准确全面地感知周围环境,意义重大。从基础的2D目标检测,到基于多相机配置直接在BEV空间推理3D目标,在复杂的自动驾驶应用中都发挥着重要作用。灵活运用不同的感知算法,不仅可以实现最佳的感知性能,而且可以提升自动驾驶系统整体的鲁棒性,提升安全。比如,图像空间的2D检测极为成熟,在远距离和小目标检测方面优势明显,如果将2D检测信息用于BEV空间的3D检测,那么自动驾驶整体的检测性能可以进一步提升,改善漏检、误检、感知不远的情况。而Nullmax提出的新方法SimPB,不仅实现了2D和3D信息的同时输出,而且循环迭代、持续交互,感知性能更加优秀。在高阶智驾功能和多相机配置日益普及的当下,这一方法拥有巨大的应用价值。

同样在今年,Nullmax在视觉感知方面的另一项研究《Enhancing 3D Object Detection with 2D Detection-Guided Query Anchors》也获得了计算机视觉顶会CVPR 2024的录用,研究成果接连获得全球认可,持续证明了Nullmax在自动驾驶方面的卓越技术能力,尤其是国际顶尖的视觉感知技术。

一直以来,Nullmax专注于打造视觉为主的平台化自动驾驶系统,在前沿技术的研发和落地方面取得了众多进展,技术成果持续投入应用。随着商业化步伐不断提速,Nullmax将继续深化最新技术的研发,持续打造独特的自动驾驶产品方案。

欢迎有志于自动驾驶的同学加入Nullmax,一起探索最新技术的研发及应用!

媒体垂询
media@nullmax.ai