FisheyeDetNet:首个基于鱼眼相机的目标检测算法

目标检测在自动驾驶系统当中是一个比较成熟的问题,其中行人检测是最早得以部署算法之一。在多数论文当中已经进行了非常全面的研究。然而,利用鱼眼相机进行环视的距离感知相对来说研究较少。由于径向畸变大,标准的边界框表示在鱼眼相机当中很难实施。为了缓

目标检测在自动驾驶系统当中是一个比较成熟的问题,其中行人检测是最早得以部署算法之一。在多数论文当中已经进行了非常全面的研究。然而,利用鱼眼相机进行环视的距离感知相对来说研究较少。由于径向畸变大,标准的边界框表示在鱼眼相机当中很难实施。为了缓解上述描述,我们探索了扩展边界框、椭圆、通用多边形设计为极坐标/角度表示,并定义一个实例分割miou度量来分析这些表示。所提出的具有多边形形状的模型fisheyedetnet优于其他模型,并同时在用于自动驾驶的valeo鱼眼相机数据集上实现了49.5%的map指标。目前,这是第一个关于自动驾驶场景中基于鱼眼相机的目标检测算法研究。

文章链接:https://arxiv.org/pdf/2404.13443.pdf

网络结构

我们的网络结构建立在YOLOv3网络模型的基础上,并且对边界框、旋转边界框、椭圆以及多边形等进行多种表示。为了使网络能够移植到低功率汽车硬件上,我们使用ResNet18作为编码器。与标准Darknet53编码器相比,参数减少了超过60%。提出了网络架构如下图所示。

FisheyeDetNet:首个基于鱼眼相机的目标检测算法

边界框检测

我们的边界框模型与 YOLOv3 相同,只是 Darknet53 编码器被替换为 ResNet18 编码器。与 YOLOv3 类似,目标检测是在多个尺度上执行的。对于每个尺度中的每个网格,预测对象宽度()、高度()、对象中心坐标(,)和对象类。最后,使用非最大抑制来过滤冗余检测。

旋转边界框检测

在该模型中,与常规框信息(,,,)一起回归框的方向。方向地面实况范围 (-180 到 +180°) 在 -1 到 +1 之间进行归一化。

椭圆检测

椭圆回归与定向框回归相同。唯一的区别是输出表示。因此损失函数也与定向框损失相同。

多边形检测

我们提出的基于多边形的实例分割方法与PolarMask和PolyYOLO方法非常相似。而不是使用稀疏多边形点和PolyYOLO这样的单尺度预测。我们使用密集多边形注释和多尺度预测。

实验对比

我们对Valeo鱼眼数据集进行了评估,该数据集有60K图片。这些图片是从欧洲、北美和亚洲的4个环绕视图相机捕获的。

每个模型都使用IoU阈值为50%的平均精度度量(mAP)进行比较。结果如下表所示。每个算法都基于两个标准进行评估—相同表现和实例分割的性能。

FisheyeDetNet:首个基于鱼眼相机的目标检测算法

FisheyeDetNet:首个基于鱼眼相机的目标检测算法

FisheyeDetNet:首个基于鱼眼相机的目标检测算法

以上就是FisheyeDetNet:首个基于鱼眼相机的目标检测算法的详细内容,更多请关注叮当号网其它相关文章!

文章来自互联网,只做分享使用。发布者:momo,转转请注明出处:https://www.dingdanghao.com/article/408716.html

(0)
上一篇 2024-04-26 11:50
下一篇 2024-04-26 12:25

相关推荐

联系我们

在线咨询: QQ交谈

邮件:442814395@qq.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信公众号