一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

一种车辆检测方法、装置、边缘设备和存储介质与流程

2022-04-30 13:09:19 来源:中国专利 TAG:

技术特征:
1.一种车辆检测方法,其特征在于,所述方法由边缘设备执行,包括:基于包含车辆的原始图像提取第一图像特征图;基于所述第一图像特征图生成第二图像特征图,其中所述第二图像特征图的感受野大于所述第一图像特征图的感受野;对所述第一图像特征图和所述第二图像特征图执行特征融合处理,以生成特征融合处理后的第三图像特征图;基于所述第三图像特征图检测所述车辆。2.根据权利要求1所述的车辆检测方法,其特征在于,所述基于所述第一图像特征图生成第二图像特征图包括:将所述第一图像特征图输入空间金字塔池化网络以生成所述第二图像特征图,所述金字塔池化网络包含多个卷积核以及拼接部分,其中每个卷积核适配于将所述第一图像特征图转换为具有各自的感受野的各自的图像特征图,所述拼接部分适配于将所述多个卷积核各自提供的、所述各自的图像特征图和所述第一图像特征图拼接为所述第二图像特征图。3.根据权利要求2所述的车辆检测方法,其特征在于,所述对所述第一图像特征图和所述第二图像特征图执行特征融合处理包括:将所述第一图像特征图和所述第二图像特征图输入特征金字塔网络以执行特征融合操作,所述特征金字塔网络包含下采样部分和上采样部分,其中所述下采样部分和所述上采样部分之间具有横向连接,所述下采样部分适配于对所述第一图像特征图和所述第二图像特征图执行下采样处理以生成包含高层特征的特征层,所述上采样部分适配于对所述特征层执行上采样处理。4.根据权利要求3所述的车辆检测方法,其特征在于,所述基于所述第三图像特征图检测所述车辆包括:基于所述第三图像特征图,输出所述车辆的中心点的位置。5.根据权利要求4所述的车辆检测方法,其特征在于,所述方法还包括下列中的至少一个:对所述中心点的位置进行校准;预测以所述校准后的中心点为中心的检测框的宽度和高度;确定适配于重识别所述车辆的车辆特征。6.根据权利要求4所述的车辆检测方法,其特征在于,所述基于所述第三图像特征图检测所述车辆为:在网络输出层的第一部分中,基于所述第三图像特征图输出所述车辆的中心点的位置;所述方法还包括:在所述网络输出层的第二部分中,对所述中心点的位置进行校准;在所述网络输出层的第三部分中,预测以所述校准后的中心点为中心的检测框的宽度和高度;在所述网络输出层的第四部分中,确定适配于重识别所述车辆的车辆特征;其中基于损失函数l
total
对包含所述金字塔池化网络、所述特征金字塔网络和所述网络输出层的整体网络进行训练,其中
其中l
heat
为中心点损失函数;l
off
为中心点校准损失函数;l
size
为检测框的宽度和高度的损失函数;l
th
为确定车辆特征的损失函数;e是自然对数的底数;w1为第一预设权值,w2为第二预设权值。7.一种车辆检测装置,其特征在于,所述装置包含在边缘设备中,包括:提取模块,被配置为基于包含车辆的原始图像提取第一图像特征图;生成模块,被配置为基于所述第一图像特征图生成第二图像特征图,其中所述第二图像特征图的感受野大于所述第一图像特征图的感受野;融合模块,被配置为对所述第一图像特征图和所述第二图像特征图执行特征融合处理,以生成特征融合处理后的第三图像特征图;检测模块,被配置为基于所述第三图像特征图检测所述车辆。8.根据权利要求7所述的车辆检测装置,其特征在于,所述生成模块,被配置为将所述第一图像特征图输入空间金字塔池化网络以生成所述第二图像特征图,所述金字塔池化网络包含多个卷积核以及拼接部分,其中每个卷积核适配于将所述第一图像特征图转换为具有各自的感受野的各自的图像特征图,所述拼接部分适配于将所述多个卷积核各自提供的、所述各自的图像特征图和所述第一图像特征图拼接为所述第二图像特征图。9.根据权利要求8所述的车辆检测装置,其特征在于,所述融合模块,被配置为将所述第一图像特征图和所述第二图像特征图输入特征金字塔网络以执行特征融合操作,所述特征金字塔网络包含下采样部分和上采样部分,其中所述下采样部分和所述上采样部分之间具有横向连接,所述下采样部分适配于对所述第一图像特征图和所述第二图像特征图执行下采样处理以生成包含高层特征的特征层,所述上采样部分适配于对所述特征层执行上采样处理。10.根据权利要求9所述的车辆检测装置,其特征在于,所述检测模块,被配置为基于所述第三图像特征图,输出所述车辆的中心点的位置。11.根据权利要求10所述的车辆检测装置,其特征在于,所述检测模块,还被配置为执行下列中的至少一个:对所述中心点的位置进行校准;预测以所述校准后的中心点为中心的检测框的宽度和高度;确定适配于重识别所述车辆的车辆特征。12.根据权利要求10所述的车辆检测装置,其特征在于,所述检测模块,被配置为在网络输出层的第一部分中,基于所述第三图像特征图输出所述车辆的中心点的位置;在所述网络输出层的第二部分中,对所述中心点的位置进行校准;在所述网络输出层的第三部分中,预测以所述校准后的中心点为中心的检测框的宽度和高度;在所述网络输出层的第四部分中,确定适配于重识别所述车辆的车辆特征;所述装置还包括:训练模块,被配置为基于损失函数l
total
对包含所述金字塔池化网络、所述特征金字塔网络和所述网络输出层的整体网络进行训练,其中
其中l
heat
为中心点损失函数;l
off
为中心点校准损失函数;l
size
为检测框的宽度和高度的损失函数;l
th
为确定车辆特征的损失函数;e是自然对数的底数;w1为第一预设权值,w2为第二预设权值。13.一种边缘设备,其特征在于,包括:存储器;处理器;其中所述存储器中存储有可被所述处理器执行的应用程序,用于使得所述处理器执行如权利要求1至6中任一项所述的车辆检测方法。14.一种计算机可读存储介质,其特征在于,其中存储有计算机可读指令,所述计算机可读指令用于执行如权利要求1至6中任一项所述的车辆检测方法。

技术总结
本发明实施例提出一种车辆检测方法、装置、边缘设备和存储介质。所述方法由边缘设备执行,包括:基于包含车辆的原始图像提取第一图像特征图;基于所述第一图像特征图生成第二图像特征图,其中所述第二图像特征图的感受野大于所述第一图像特征图的感受野;对所述第一图像特征图和所述第二图像特征图执行特征融合处理,以生成特征融合处理后的第三图像特征图;基于所述第三图像特征图检测所述车辆。本发明实施方式融合不同层次的网络特征,优化网络结构以有利于边缘侧,显著减少了参数量和运行速度,适用于算力资源有限的边缘设备。适用于算力资源有限的边缘设备。适用于算力资源有限的边缘设备。


技术研发人员:王振亚 艾国 杨作兴 房汝明 向志宏
受保护的技术使用者:杭州研极微电子有限公司
技术研发日:2022.01.17
技术公布日:2022/4/29
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献