基于YOLOv4网络优化的目标检测装置、方法、设备和介质与流程

未命名 08-14 阅读:124 评论:0

基于yolov4网络优化的目标检测装置、方法、设备和介质
技术领域
1.本技术涉及图像检测的技术领域,尤其涉及一种基于yolov4网络优化的目标检测装置、方法、设备和介质。


背景技术:

2.在自动驾驶技术中,作为实时定位与建图的基础技术之一的目标检测,其核心任务是检测出目标对象。相关技术中,以yolov4目标检测技术为例,其通过卷积对目标物进行位置回归和类别的预测,还具有检测速度快、计算资源消耗少等优点;但考虑到待检测的小目标对象具有目标特征少、数量占比小和目标位置定位精度要求高等问题,会出现比如检测小目标对象漏检误检的问题。
3.尽管现阶段计算机技术和深度学习算法的发展迅猛,目标检测技术也随之得到提高,然而yolov4检测算法应用在小目标对象检测中时,其表现并不十分理想,检测精度和召回率仍然还有待进一步优化。


技术实现要素:

4.为解决或部分解决相关技术中存在的问题,本技术提供一种基于yolov4网络优化的目标检测装置、方法、设备和介质,能够有效提高目标检测精度和召回率。
5.本技术第一方面提供一种基于yolov4网络优化的目标检测装置,所述装置包括:
6.获取模块,其被配置为获取待检测图像;
7.检测模块,其被配置为将所述待检测图像输入基于yolov4改进的目标检测器得到不同尺度目标对象的检测结果;
8.其中,所述目标检测器包括依次相连的主干网络、颈部网络和预测网络;所述主干网络包括focus模块和特征提取网络,所述focus模块被配置为切片处理所述待检测图像,所述特征提取网络被配置为对切片后的待检测图像进行下采样特征提取以得到多个不同尺度的第一特征图;所述颈部网络包括特征金字塔网络和路径聚合网络,所述特征金字塔网络被配置为对各个不同尺度的第一特征图在上采样过程中进行特征融合以输出多个不同尺度的第二特征图,所述路径聚合网络被配置为对各个不同尺度的第二特征图在下采样过程中进行全局特征融合以输出多个不同尺度的第三特征图;所述预测网络被配置为根据多个不同尺度的第三特征图进行对应的目标对象预测,以得到对应的检测结果。
9.在一实施方式中,所述路径聚合网络的输出端通过卷积注意力机制层cbam模块与所述预测网络的输入端相连。
10.在一实施方式中,所述特征提取网络包括自上而下依次相连的第一卷积层、第一c3网络、第二卷积层、第二c3网络、第三卷积层、第三c3网络、第四卷积层、第四c3网络和sppf模块;
11.其中,所述第一卷积层与所述focus模块相连;
12.所述第二c3网络、所述第三c3网络和所述sppf模块均被配置为输出所述第一特征
图。
13.在一实施方式中,所述特征金字塔网络包括自下而上依次相连的第五卷积层、第一上采样模块、第一拼接层、第五c3网络、第六卷积层、第二上采样模块、第二拼接层;
14.其中,所述第五卷积层、所述第一拼接层和所述第二拼接层的输入端与所述sppf模块、所述第三c3网络、所述第二c3网络的输出端对应相连;
15.所述第五卷积层、所述第六卷积层和所述第二拼接层的输出端军被配置为输出所述第二特征图。
16.在一实施方式中,所述路径聚合网络包括自上而下依次相连的第一c3str网络、第七卷积层、第三拼接层、第二c3str网络、第八卷积层、第四拼接层和第三c3str网络;
17.其中,所述第一c3str网络、所述第三拼接层和所述第四拼接层的输入端与所述第二拼接层、所述第六卷积层和所述第五卷积层的输出端对应相连;
18.所述第一c3str网络、所述第二c3str网络和所述第三c3str网络均被配置为输出所述第三特征图。
19.在一实施方式中,所述预测网络包括三个yolov4检测头网络,且所述第一c3str网络、所述第二c3str网络和所述第三c3str网络的输出端各连接一个所述yolov4检测头网络。
20.在一实施方式中,所述第一c3str网络、所述第二c3str网络和所述第三c3str网络的输出端分别通过三个卷积注意力机制层cbam模块与三个所述yolov4检测头网络的输入端相连。
21.本技术第二方面提供一种基于yolov4网络优化的目标检测方法,其应用于如上所述的基于yolov4网络优化的目标检测装置,所述方法包括以下步骤:
22.获取待检测图像;
23.将所述待检测图像输入基于yolov4改进的目标检测器得到不同尺度目标对象的检测结果。
24.本技术第三方面提供一种电子设备,包括:
25.处理器;以及
26.存储器,其上存储有可执行代码,当所述可执行代码被所述处理器执行时,使所述处理器执行如上所述的方法。
27.本技术第四方面提供一种计算机可读存储介质,其上存储有可执行代码,当所述可执行代码被电子设备的处理器执行时,使所述处理器执行如上所述的方法。
28.本技术提供的技术方案可以包括以下有益效果:
29.本技术提供的技术方案,通过获取模块获取到待检测图像,再由检测模块中的基于yolov4网络优化的目标检测器将获取到的待检测图像通过依次相连的主干网络、颈部网络和预测网络来进行目标对象检测;其中,先通过主干网络中的focus模块切片处理所述待检测图像,再由主干网络中的特征提取网络对切片后的待检测图像进行下采样特征提取以得到多个不同尺度的第一特征图,之后,通过颈部网络中的特征金字塔网络对各个不同尺度的第一特征图在上采样过程中进行特征融合来输出多个不同尺度的第二特征图,以及,由颈部网络中的路径聚合网络再对各个不同尺度的第二特征图在下采样过程中进行全局特征融合以输出多个不同尺度的第三特征图,最后,再由预测网络根据多个不同尺度的第
三特征图进行对应的目标对象预测,得到大中小不同尺度目标对象的检测结果。本技术的技术方案,在主干网络下采样中先进行待检测图像的拆分加拼接处理,降低下采样计算过程中所带来的信息丢失,同时,在路径聚合网络中对各个不同尺度的第二特征图在多次下采样的过程中进行全局特征融合,获得更大范围感受野特征信息,有效提高目标对象的检测精度和召回率。
30.应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本技术。
附图说明
31.通过结合附图对本技术示例性实施方式进行更详细地描述,本技术的上述以及其它目的、特征和优势将变得更加明显,其中,在本技术示例性实施方式中,相同的参考标号通常代表相同部件。
32.图1是相关技术中示出的yolov4目标检测模型的网络结构示意图;
33.图2是本技术实施例示出的基于yolov4网络优化的目标检测装置的结构框图;
34.图3是本技术实施例示出的基于yolov4网络优化的目标检测器的网络结构示意图;
35.图4是本技术实施例示出的另一基于yolov4网络优化的目标检测器的网络结构示意图;
36.图5是本技术实施例示出的基于yolov4网络优化的目标检测方法的流程示意图;
37.图6是本技术实施例示出的电子设备的结构示意图。
具体实施方式
38.下面将参照附图更详细地描述本技术的实施方式。虽然附图中显示了本技术的实施方式,然而应该理解,可以以各种形式实现本技术而不应被这里阐述的实施方式所限制。相反,提供这些实施方式是为了使本技术更加透彻和完整,并且能够将本技术的范围完整地传达给本领域的技术人员。
39.在本技术使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本技术。在本技术和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
40.应当理解,尽管在本技术可能采用术语“第一”、“第二”、“第三”等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本技术范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本技术的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
41.在相关技术中,yolov4目标检测技术在小目标对象上容易出现漏检误检的问题,yolov4目标检测的检测精度和召回率仍然还有进一步优化。
42.如图1所示,其为相关技术中示出的一种yolov4目标检测模型的网络结构示意图。
yolov4目标检测模型包括依次相连的主干网络、颈部网络和预测网络,其中主干网络在0~9层进行下采样的过程中,通过对输入到主干网络的图像进行特征提取,得到多个不同尺度的第一特征图;颈部网络在10~16层进行上采样的过程中融合4层、6层和9层输出的第一特征信息,并在17~23层再进行下采样的过程中融合16层、14层和10层输出的第二特征信息,以由17层、20层和23层输出第三特征信息;预测网络主要由三个不同尺度的检测头组成,其中,17层、20层和23层各连接一个检测头,各个检测头对相应的检测特征图进行目标预测,以实现不同大小目标对象的检测。以道路旁边的圆形路牌作为待检测的目标对象,yolov4目标检测模型的精确度precision为0.65783,召回率recall为0.69032。
43.针对上述问题,本技术实施例提供一种基于yolov4网络优化的目标检测装置,有效提高目标对象的检测精度和召回率。
44.以下结合附图详细描述本技术实施例的技术方案。
45.如图2和图3所示,本技术实施例提供一种基于yolov4网络优化的目标检测装置,目标检测装置200包括:
46.获取模块201,其被配置为获取待检测图像;
47.检测模块202,其被配置为将待检测图像输入基于yolov4网络优化的目标检测器得到不同尺度目标对象的检测结果;
48.其中,目标检测器包括依次相连的主干网络、颈部网络和预测网络;主干网络包括focus模块和特征提取网络,focus模块被配置为切片处理待检测图像,特征提取网络被配置为对切片后的待检测图像进行下采样特征提取以得到多个不同尺度的第一特征图;颈部网络包括特征金字塔网络和路径聚合网络,特征金字塔网络被配置为对各个不同尺度的第一特征图在上采样过程中进行特征融合以输出多个不同尺度的第二特征图,路径聚合网络被配置为对各个不同尺度的第二特征图在下采样过程中进行全局特征融合以输出多个不同尺度的第三特征图;预测网络被配置为根据多个不同尺度的第三特征图进行对应的目标对象预测,以得到对应的检测结果。
49.在本实施例中,在主干网络下采样过程中先进行待检测图像的拆分加拼接处理,降低下采样计算过程中所带来的信息丢失,同时,在路径聚合网络中对各个不同尺度的第二特征图在多次下采样的过程中进行全局特征融合,能够获得更大范围感受野特征信息,有效提高目标对象的检测精度和召回率。
50.其中,基于yolov4网络优化的目标检测器,通过大量的训练迭代直至收敛,得到训练好的目标检测器,将训练好的目标检测器部署在自动驾驶设备上,比如道路上形式的汽车。在汽车行驶过程中,汽车上的摄像设备可以实时获取的周围环境的图像,并将该图像作图像处理之后,通过训练好的目标检测器对处理后的图像进行目标对象的检测,目标检测器的精确度precision为0.68873,召回率recall为0.70395,明显都高于相关技术中的yolov4目标检测模型。
51.若以相关技术中的yolov4目标检测模型为基础,将0层改为focus模块,其模型的测试结果的精确度precision为0.68873,召回率recall为0.64649。很明显,尽管精确度略有提升,然而其召回率却出现了下降的情况,因此,如何使得目标检测器的准确率和召回率都有所提高并非易事。
52.如图4所示,作为本技术的一个优选实施例,路径聚合网络的输出端通过卷积注意
力机制层cbam模块与预测网络的输入端相连。在第三特征图输入到预测网络之前,先通过卷积注意力机制层cbam模块对第三特征图中的空间和通道进行特征融合,能够进一步提升检测的准确率和召回率。
53.如图3所示,进一步地,特征提取网络包括自上而下依次相连的第一卷积层、第一c3网络、第二卷积层、第二c3网络、第三卷积层、第三c3网络、第四卷积层、第四c3网络和sppf模块;
54.其中,第一卷积层与focus模块相连;
55.第二c3网络、第三c3网络和sppf模块均被配置为输出第一特征图。
56.在本实施例中,主干网络被配置为对输入的图像进行多次下采样,以输出多个不同尺度的第一特征图;其中,主干网络包括依次相连的focus模块、第一卷积层、第一c3网络、第二卷积层、第二c3网络、第三卷积层、第三c3网络、第四卷积层、第四c3网络和sppf模块。将某一尺度大小的图像输入到主干网络,focus模块进行下采样后得到1/2原尺度大小的特征图,再通过第一卷积层进行下采样操作,再输入到第一c3网络中进行残差处理,同样地再依次通过第二卷积层、第二c3网络以得到1/8原尺度大小的特征图(第一特征图),依次通过第三卷积层、第三c3网络以得到1/16原尺度大小的特征图(第一特征图),依次通过第四卷积层、第四c3网络以得到1/32原尺度大小的特征图,最后,主干网络将1/32原尺度大小的特征图(第一特征图)送入sppf模块进行处理,输入至颈部网络的输入端。
57.其中,focus模块、第一卷积层、第一c3网络、第二卷积层、第二c3网络、第三卷积层、第三c3网络、第四卷积层、第四c3网络和sppf模块依次对应目标检测器的0~9层,即4层输出1/8原尺度大小的第一特征图,6层输出1/16原尺度大小的第一特征图,9层输出1/32原尺度大小的第一特征图。
58.如图3所示,具体地,特征金字塔网络包括自下而上依次相连的第五卷积层、第一上采样模块、第一拼接层、第五c3网络、第六卷积层、第二上采样模块、第二拼接层;
59.其中,第五卷积层、第一拼接层和第二拼接层的输入端与sppf模块、第三c3网络、第二c3网络的输出端对应相连;
60.第五卷积层、第六卷积层和第二拼接层的输出端军被配置为输出第二特征图。
61.在本实施例中,特征金字塔网络将1/32原尺度大小的第一特征图依次通过第五卷积层、第一上采样模块处理后输入第一拼接层,第一拼接层将其与从主干网络输出的1/16原尺度大小的第一特征图进行特征融合,再依次通过第五c3网络、第六卷积层、第二上采样模块处理后输入到第二拼接层,第二拼接层将其与从主干网络输出的1/8原尺度大小的第一特征图进行特征融合,得到1/8原尺度大小的第二特征图;以及,特征金字塔网络中的第五卷积层对主干网络输出的1/32原尺度大小的第一特征图进行处理得到1/32原尺度大小的第二特征图,第六卷积层输出1/16原尺度大小的第二特征图。
62.其中,特征金字塔网络中的第五卷积层、第一上采样模块、第一拼接层、第五c3网络、第六卷积层、第二上采样模块、第二拼接层依次对应目标检测器中的10~16层,10、12和16层对应接收9、6、4层对应输出的1/32、1/16、1/8原尺度大小的第一特征图,10、14、16层对应输出1/32、1/16、1/8原尺度大小的第二特征图。
63.如图3所示,进一步地,路径聚合网络包括自上而下依次相连的第一c3str网络、第七卷积层、第三拼接层、第二c3str网络、第八卷积层、第四拼接层和第三c3str网络;
64.其中,第一c3str网络、第三拼接层和第四拼接层的输入端与第二拼接层、第六卷积层和第五卷积层的输出端对应相连;
65.第一c3str网络、第二c3str网络和第三c3str网络均被配置为输出第三特征图。
66.在本实施例中,路径聚合网络将特征金字塔网络中的第二拼接层输出的1/8原尺度大小的第二特征图依次通过第一c3str网络、第七卷积层处理输入第三拼接层,第三拼接层将其与从特征金字塔网络输出的1/16原尺度大小的第二特征图进行特征融合,再依次通过第二c3str网络、第八卷积层处理输入至第四拼接层,第四拼接将其与从特征金字塔网络输出的1/32原尺度大小的第二特征图进行特征融合,再输入第三c3str网络进行处理,得到1/32原尺度大小的第三特征图;以及,路径聚合网络中的第一c3str网络对特征金字塔网络输出的1/8原尺度大小的第二特征图进行处理得到1/8原尺度大小的第三特征图,第二c3str网络输出1/16原尺度大小的第三特征图。
67.其中,路径聚合网络中的第一c3str网络、第七卷积层、第三拼接层、第二c3str网络、第八卷积层、第四拼接层和第三c3str网络依次对应目标检测器中的17~23层,17、19和22层对应接收16、14、10层对应输出的1/8、1/16、1/32原尺度大小的第二特征图,17、20、23层对应输出1/8、1/16、1/32原尺度大小的第三特征图。
68.进一步地,预测网络包括三个yolov4检测头网络,且第一c3str网络、第二c3str网络和第三c3str网络的输出端各连接一个yolov4检测头网络。
69.在本实施例中,检测头网络优选为yolov4检测头网络,三个yolov4检测头网络对应三个不同的尺度,三个yolov4检测头网络自上而下分别对应8倍、16倍、32倍的视野,也就是分别预测小、中、大目标,其中,32倍的特征图的每个点感受野更大,以供预测大目标。
70.如图4所示,再进一步地,第一c3str网络、第二c3str网络和第三c3str网络的输出端分别通过三个卷积注意力机制层cbam模块与三个yolov4检测头网络的输入端相连。
71.在本实施例中,三个卷积注意力机制层cbam模块依次对应目标检测器的24~26层。
72.其中,在各个yolov4检测头网络的输入端设置卷积注意力机制层cbam模块,经过测试可以得到目标检测器的精确度precision为0.68455,召回率recall为0.76757。很明显,不管是精确度还是召回率均相较于相关技术中均有明显提升。
73.本技术提供的技术方案,通过获取模块获取到待检测图像,再由检测模块中的基于yolov4网络优化的目标检测器将获取到的待检测图像通过依次相连的主干网络、颈部网络和预测网络来进行目标对象检测;其中,先通过主干网络中的focus模块切片处理待检测图像,再由主干网络中的特征提取网络对切片后的待检测图像进行下采样特征提取以得到多个不同尺度的第一特征图,之后,通过颈部网络中的特征金字塔网络对各个不同尺度的第一特征图在上采样的过程中进行特征融合来输出多个不同尺度的第二特征图,以及,由颈部网络中的路径聚合网络再对各个不同尺度的第二特征图在下采样的过程中进行全局特征融合以输出多个不同尺度的第三特征图,最后,再由预测网络根据多个不同尺度的第三特征图进行对应的目标对象预测,得到大中小不同尺度目标对象的检测结果。
74.如图5所示,本技术实施例还提供一种基于yolov4网络优化的目标检测装置的目标检测方法,其应用于基于yolov4网络优化的目标检测装置,方法包括以下步骤:
75.s501:获取待检测图像;
76.s502:将待检测图像输入基于yolov4网络优化的目标检测器得到不同尺度目标对象的检测结果。
77.在本实施例中,先获取到待检测图像,再由检测模块中的基于yolov4网络优化的目标检测器将获取到的待检测图像通过依次相连的主干网络、颈部网络和预测网络来进行目标对象检测。其中,先通过主干网络中的focus模块切片处理待检测图像,再由主干网络中的特征提取网络对切片后的待检测图像进行下采样特征提取以得到多个不同尺度的第一特征图,之后,通过颈部网络中的特征金字塔网络对各个不同尺度的第一特征图在多次上采样的过程中进行特征融合来输出多个不同尺度的第二特征图,以及,由颈部网络中的路径聚合网络再对各个不同尺度的第二特征图在多次下采样的过程中进行全局特征融合以输出多个不同尺度的第三特征图,最后,再由预测网络根据多个不同尺度的第三特征图进行对应的目标对象预测,得到大中小不同尺度目标对象的检测结果。
78.在本实施例中,在主干网络下采样中先进行待检测图像的拆分加拼接处理,降低下采样计算过程中所带来的信息丢失,同时,在路径聚合网络中对各个不同尺度的第二特征图在多次下采样的过程中进行全局特征融合,获得更大范围感受野特征信息,有效提高目标对象的检测精度和召回率。
79.其中,基于yolov4网络优化的目标检测器,通过大量的训练迭代直至收敛,得到训练好的目标检测器,将训练好的目标检测器部署在自动驾驶设备上,比如道路上形式的汽车。在汽车行驶过程中,汽车上的摄像设备可以实时获取的周围环境的图像,并将该图像作图像处理之后,通过训练好的目标检测器对处理后的图像进行目标对象的检测,目标检测器的精确度precision为0.68873,召回率recall为0.70395,明显都高于相关技术中的yolov4目标检测模型。
80.如图4所示,作为本技术的一个优选实施例,路径聚合网络的输出端通过卷积注意力机制层cbam模块与预测网络的输入端相连。在第三特征图输入到预测网络之前,先通过卷积注意力机制层cbam模块对第三特征图中的空间和通道进行特征融合,能够进一步提升检测的准确率和召回率。
81.如图3所示,进一步地,特征提取网络包括自上而下依次相连的第一卷积层、第一c3网络、第二卷积层、第二c3网络、第三卷积层、第三c3网络、第四卷积层、第四c3网络和sppf模块;
82.其中,第一卷积层与focus模块相连;
83.第二c3网络、第三c3网络和sppf模块均被配置为输出第一特征图。
84.如图3所示,具体地,特征金字塔网络包括自下而上依次相连的第五卷积层、第一上采样模块、第一拼接层、第五c3网络、第六卷积层、第二上采样模块、第二拼接层;
85.其中,第五卷积层、第一拼接层和第二拼接层的输入端与sppf模块、第三c3网络、第二c3网络的输出端对应相连;
86.第五卷积层、第六卷积层和第二拼接层的输出端军被配置为输出第二特征图。
87.如图3所示,进一步地,路径聚合网络包括自上而下依次相连的第一c3str网络、第七卷积层、第三拼接层、第二c3str网络、第八卷积层、第四拼接层和第三c3str网络;
88.其中,第一c3str网络、第三拼接层和第四拼接层的输入端与第二拼接层、第六卷积层和第五卷积层的输出端对应相连;
89.第一c3str网络、第二c3str网络和第三c3str网络均被配置为输出第三特征图。
90.如图4所示,进一步地,第一c3str网络、第二c3str网络和第三c3str网络的输出端分别通过三个卷积注意力机制层cbam模块与三个yolov4检测头网络的输入端相连。
91.其中,在各个yolov4检测头网络的输入端设置卷积注意力机制层cbam模块,经过测试可以得到目标检测器的精确度precision为0.68455,召回率recall为0.76757。很明显,不管是精确度还是召回率均相较于相关技术中均有明显提升。
92.关于上述实施例中的方法,其中各个模块执行操作的具体方式已经在有关该装置的实施例中进行了详细描述,此处将不再做详细阐述说明。
93.与前述应用功能实现方法实施例相对应,本技术还提供了电子设备及相应的实施例。
94.图6是本技术实施例示出的电子设备的结构示意图。
95.参见图6,电子设备600包括存储器601和处理器602。
96.处理器602可以是中央处理单元(central processing unit,cpu),还可以是其他通用处理器、数字信号处理器(digital signal processor,dsp)、专用集成电路(application specific integrated circuit,asic)、现场可编程门阵列(field-programmable gate array,fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
97.存储器601可以包括各种类型的存储单元,例如系统内存、只读存储器(rom)和永久存储装置。其中,rom可以存储处理器602或者计算机的其他模块需要的数据或者指令。永久存储装置可以是可读写的存储装置。永久存储装置可以是即使计算机断电后也不会失去存储的指令和数据的非易失性存储设备。在一些实施方式中,永久性存储装置采用大容量存储装置(例如磁或光盘、闪存)作为永久存储装置。另外一些实施方式中,永久性存储装置可以是可移除的存储设备(例如软盘、光驱)。系统内存可以是可读写存储设备或者易失性可读写存储设备,例如动态随机访问内存。系统内存可以存储一些或者所有处理器在运行时需要的指令和数据。此外,存储器601可以包括任意计算机可读存储媒介的组合,包括各种类型的半导体存储芯片(例如dram,sram,sdram,闪存,可编程只读存储器),磁盘和/或光盘也可以采用。在一些实施方式中,存储器601可以包括可读和/或写的可移除的存储设备,例如激光唱片(cd)、只读数字多功能光盘(例如dvd-rom,双层dvd-rom)、只读蓝光光盘、超密度光盘、闪存卡(例如sd卡、min sd卡、micro-sd卡等)、磁性软盘等。计算机可读存储媒介不包含载波和通过无线或有线传输的瞬间电子信号。
98.存储器601上存储有可执行代码,当可执行代码被处理器602处理时,可以使处理器602执行上文述及的方法中的部分或全部。
99.此外,根据本技术的方法还可以实现为一种计算机程序或计算机程序产品,该计算机程序或计算机程序产品包括用于执行本技术的上述方法中部分或全部步骤的计算机程序代码指令。
100.或者,本技术还可以实施为一种计算机可读存储介质(或非暂时性机器可读存储介质或机器可读存储介质),其上存储有可执行代码(或计算机程序或计算机指令代码),当可执行代码(或计算机程序或计算机指令代码)被电子设备(或服务器等)的处理器执行时,
使处理器执行根据本技术的上述方法的各个步骤的部分或全部。
101.以上已经描述了本技术的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的改进,或者使本技术领域的其他普通技术人员能理解本文披露的各实施例。

技术特征:
1.一种基于yolov4网络优化的目标检测装置,其特征在于,所述装置包括:获取模块,其被配置为获取待检测图像;检测模块,其被配置为将所述待检测图像输入基于yolov4网络优化的目标检测器得到不同尺度目标对象的检测结果;其中,所述目标检测器包括依次相连的主干网络、颈部网络和预测网络;所述主干网络包括focus模块和特征提取网络,所述focus模块被配置为切片处理所述待检测图像,所述特征提取网络被配置为对切片后的待检测图像进行下采样特征提取以得到多个不同尺度的第一特征图;所述颈部网络包括特征金字塔网络和路径聚合网络,所述特征金字塔网络被配置为对各个不同尺度的第一特征图在上采样过程中进行特征融合以输出多个不同尺度的第二特征图,所述路径聚合网络被配置为对各个不同尺度的第二特征图在下采样过程中进行全局特征融合以输出多个不同尺度的第三特征图;所述预测网络被配置为根据多个不同尺度的第三特征图进行对应的目标对象预测,以得到对应的检测结果。2.如权利要求1所述的基于yolov4网络优化的目标检测装置,其特征在于,所述路径聚合网络的输出端通过卷积注意力机制层cbam模块与所述预测网络的输入端相连。3.如权利要求1所述的基于yolov4网络优化的目标检测装置,其特征在于,所述特征提取网络包括自上而下依次相连的第一卷积层、第一c3网络、第二卷积层、第二c3网络、第三卷积层、第三c3网络、第四卷积层、第四c3网络和sppf模块;其中,所述第一卷积层与所述focus模块相连;所述第二c3网络、所述第三c3网络和所述sppf模块均被配置为输出所述第一特征图。4.如权利要求3所述的基于yolov4网络优化的目标检测装置,其特征在于,所述特征金字塔网络包括自下而上依次相连的第五卷积层、第一上采样模块、第一拼接层、第五c3网络、第六卷积层、第二上采样模块、第二拼接层;其中,所述第五卷积层、所述第一拼接层和所述第二拼接层的输入端与所述sppf模块、所述第三c3网络、所述第二c3网络的输出端对应相连;所述第五卷积层、所述第六卷积层和所述第二拼接层的输出端军被配置为输出所述第二特征图。5.如权利要求4所述的基于yolov4网络优化的目标检测装置,其特征在于,所述路径聚合网络包括自上而下依次相连的第一c3str网络、第七卷积层、第三拼接层、第二c3str网络、第八卷积层、第四拼接层和第三c3str网络;其中,所述第一c3str网络、所述第三拼接层和所述第四拼接层的输入端与所述第二拼接层、所述第六卷积层和所述第五卷积层的输出端对应相连;所述第一c3str网络、所述第二c3str网络和所述第三c3str网络均被配置为输出所述第三特征图。6.如权利要求5所述的基于yolov4网络优化的目标检测装置,其特征在于,所述预测网络包括三个yolov4检测头网络,且所述第一c3str网络、所述第二c3str网络和所述第三c3str网络的输出端各连接一个所述yolov4检测头网络。7.如权利要求6所述的基于yolov4网络优化的目标检测装置,其特征在于,所述第一c3str网络、所述第二c3str网络和所述第三c3str网络的输出端分别通过三个卷积注意力机制层cbam模块与三个所述yolov4检测头网络的输入端相连。
8.一种基于yolov4网络优化的目标检测方法,其应用于如权利要求1~7任意一项所述的基于yolov4网络优化的目标检测装置,其特征在于,所述方法包括以下步骤:获取待检测图像;将所述待检测图像输入基于yolov4网络优化的目标检测器得到不同尺度目标对象的检测结果。9.一种电子设备,其特征在于,包括:处理器;以及存储器,其上存储有可执行代码,当所述可执行代码被所述处理器执行时,使所述处理器执行如权利要求8所述的方法。10.一种计算机可读存储介质,其特征在于,其上存储有可执行代码,当所述可执行代码被电子设备的处理器执行时,使所述处理器执行如权利要求8所述的方法。

技术总结
本申请涉及一种基于YOLOv4网络优化的目标检测装置、方法、设备和介质,装置包括:获取模块,其被配置为获取待检测图像;检测模块,其被配置为将待检测图像输入基于YOLOv4网络优化的目标检测器得到不同尺度目标对象的检测结果;目标检测器包括主干网络、颈部网络和预测网络;主干网络包括Focus模块和特征提取网络,Focus模块切片处理待检测图像,特征提取网络对切片后的待检测图像进行下采样特征提取;颈部网络包括特征金字塔网络和路径聚合网络,路径聚合网络对特征金字塔网络在上采样中进行特征融合的输出进行下采样和全局特征融合;预测网络根据路径聚合网络的输出进行对应的目标对象预测。本申请能够有效提高目标检测精度和召回率。度和召回率。度和召回率。


技术研发人员:李正旭 贾双成
受保护的技术使用者:智道网联科技(北京)有限公司
技术研发日:2023.05.15
技术公布日:2023/8/13
版权声明

本文仅代表作者观点,不代表航空之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)

飞行汽车 https://www.autovtol.com/

分享:

扫一扫在手机阅读、分享本文

相关推荐