基于车牌图像识别的油库装车车辆身份校验方法及装置与流程
本发明属于图像识别,具体涉及一种基于车牌图像识别的油库装车车辆身份校验方法及装置。
背景技术:
1、油库装车是指在油库中,将汽油和柴油等油品,从储油罐中安全、高效地装入运输罐车的作业过程,是连接油品仓储和终端运输的关键环节。在油库装车作业中,油库装车车辆是指用于运输成品油的危险品运输油罐车,其不仅是运输工具,还是整个装车系统中可移动的关键安全组件。按照结构类型对油库装车车辆进行分类,包括单车和半挂油罐车,单车是指罐体直接固定在载货汽车底盘上,车头与罐体一体,通常运载量较小,适合短途和小批量配送;半挂油罐车是指罐体与车头可分离,运载量大,适合长距离且大批量运输。
2、现有的自动车牌识别技术广泛应用于交通控制、出入管理以及违章处罚等方面,其收集图像的主要设备为固定监控摄像头,安装在高速公路口以及停车场出入口等位置。在油库装车场景下,环境光照复杂多变并且能见度较低,所拍摄的车牌图像常存在噪声大以及车牌区域倾斜变形等问题,导致车牌识别准确率较低,同时,在实际应用中,拍摄距离远、车辆移动以及摄像头分辨率限制等因素,也会导致采集的车牌图像分辨率不足,传统的图像超分辨率重建方法主要基于插值、重构和浅层学习,存在明显的局限性,如重建图像易出现锯齿、边缘模糊以及细节恢复差等问题,进而影响车牌识别的准确性;并且单纯依赖车牌识别的身份核验方式,难以有效应对套牌、换牌等违规行为,一旦车牌识别有误或被恶意伪造,就会导致车辆身份识别出错,给油库装车作业带来安全隐患。
3、因此,如何提供一种有效的技术方案,以解决现有技术中存在的车牌图像噪声大,倾斜变形,分辨率低,以及单一车牌识别导致的身份校验精准度不足导致车辆身份识别易出错的问题,已成为目前亟待解决的技术难题。
技术实现思路
1、本发明的目的是提供一种基于车牌图像识别的油库装车车辆身份校验方法及装置,用以解决现有技术中存在的上述问题。
2、为了实现上述目的,本发明采用以下技术方案:
3、第一方面,本发明提供了一种基于车牌图像识别的油库装车车辆身份校验方法,包括:
4、获取摄像头采集的油库装车车辆的车牌图像,对车牌图像进行车牌顶点检测,得到车牌图像的顶点坐标,使用车牌图像的顶点坐标对车牌图像进行透视变换,以对车牌图像中的车牌进行矫正,得到矫正后的车牌图像;
5、对矫正后的车牌图像进行超分辨率重建,得到重建后的车牌图像,随后使用车牌识别网络对重建后的车牌图像进行车牌识别,得到车牌标识;
6、获取车辆标识对应车辆的至少一项辅助校验数据,所述辅助校验数据包括车辆车型数据、车辆颜色数据、车辆编号数据以及车辆驾驶人数据;
7、基于识别到的车牌标识以及辅助校验数据,在预设车辆管理库中进行匹配,若两者匹配成功,则身份校验通过,若匹配失败,则身份校验不通过。
8、在一种可能的设计中,对车牌图像进行车牌顶点检测,得到车牌图像的顶点坐标,使用车牌图像的顶点坐标对车牌图像进行透视变换,以对车牌图像中的车牌进行矫正,得到矫正后的车牌图像,包括:
9、使用低光照图像增强方法对车牌图像进行光照增强,得到增强后的车牌图像;
10、采用yolov7模型对增强后的车牌图像进行关键点检测,得到车牌图像的顶点坐标;
11、将车牌图像的顶点坐标输入坐标变换公式中,得到变换后的顶点坐标,基于变换后的顶点坐标对车牌图像中的车牌进行矫正,得到矫正后的车牌图像。
12、在一种可能的设计中,基于变换后的顶点坐标对车牌图像中的车牌进行矫正,得到矫正后的车牌图像,包括:
13、基于预设平面系数和变换后的顶点坐标,得到平面坐标点,所述平面坐标点包括多组顶点坐标;
14、将多组顶点坐标输入预设坐标变换公式中,以对透视变换矩阵进行求解,得到矫正后的顶点坐标;
15、根据矫正后的顶点坐标得到矫正后的车牌图像。
16、在一种可能的设计中,对矫正后的车牌图像进行超分辨率重建,得到重建后的车牌图像,包括:
17、使用卷积层对矫正后的车牌图像进行卷积处理,得到车牌特征图,使用prelu激活函数对车牌特征图进行激活,得到非线性车牌特征图;
18、将非线性车牌特征图作为第一个残差注意力模块的输入,将非线性车牌特征图输入依次级联的多个残差注意力模块中,每个残差注意力模块对当前输入的非线性车牌特征图进行特征提取,得到对应的第一车牌特征,其中,除第一个残差注意力模块,其余每个残差注意力模块的输入为其上一个残差注意力模块的输出;
19、分别对各个残差注意力模块输出的多个第一车牌特征进行卷积和上采样处理,得到对应的多个第二车牌特征,将每个第二车牌特征与第二车牌特征所属残差注意力模块的输入特征进行逐元素相加融合,得到所述残差注意力模块的融合结果,其中,若残差注意力模块为第一个残差注意力模块,则输入特征为非线性车牌特征图;
20、将最后一个残差注意力模块输出的融合结果作为最终融合结果,并将最终融合结果输入子像素卷积层,以对最终融合结果进行尺寸放大处理,使用卷积层对放大后的融合结果进行卷积处理,得到超分辨率重建后的车牌图像;
21、使用判别网络对超分辨率重建后的车牌图像进行判别,若判别通过,得到重建后的车牌图像。
22、在一种可能的设计中,将非线性车牌特征图输入多个残差注意力模块中进行特征提取,得到多个第一车牌特征,包括:
23、对多个非线性车牌特征图进行特征提取,得到多个特征图,使用全局池化函数对多个特征图进行压缩处理,得到多个全局信息;
24、使用第一全连接层对多个全局信息进行压缩,并使用relu激活函数对多个压缩后的全局信息进行激活,得到多个第一激活信息;
25、使用第二全连接层对多个全局信息进行上采样,并使用sigmoid函数对多个上采样后的全局信息进行激活,得到多个第二激活信息,将多个第二激活信息加权到第二全连接层的每个通道上,并对加权后的每个通道进行重新缩放,得到多个加权特征映射;
26、使用se注意力模块对各个通道的权重进行调整,得到多个第一车牌特征。
27、在一种可能的设计中,使用判别网络对超分辨率重建后的车牌图像进行判别,包括:
28、将超分辨率重建后的车牌图像输入卷积层中,得到卷积特征图,使用leaky relu激活函数对卷积特征图进行激活处理,得到激活图像;
29、使用多个相同的特征提取模块连续对激活图像进行特征提取,得到图像特征,所述特征提取模块包括卷积层、bn层和leaky relu函数;
30、使用全连接层对图像特征进行特征分类,以使用sigmoid激活函数对超分辨率重建后的车辆图像进行判别,输出判别结果。
31、在一种可能的设计中,基于识别到的车牌标识以及辅助校验数据,在预设车辆管理库中进行匹配,若两者匹配成功,则身份校验通过,若匹配失败,则身份校验不通过,包括:
32、根据识别到的车牌标识在预设车辆管理库中进行匹配,得到车牌标识对应的数据项;
33、将辅助校验数据与车牌标识对应的数据项进行一一比对,若辅助校验数据与车牌标识对应的数据项匹配成功,则身份校验通过;
34、若辅助校验数据与车牌标识对应的数据项匹配失败,则身份校验不通过。
35、第二方面,本发明提供了一种基于车牌图像识别的油库装车车辆身份校验装置,包括:
36、检测矫正单元,用于获取摄像头采集的油库装车车辆的车牌图像,对车牌图像进行车牌顶点检测,得到车牌图像的顶点坐标,使用车牌图像的顶点坐标对车牌图像进行透视变换,以对车牌图像中的车牌进行矫正,得到矫正后的车牌图像;
37、重建识别单元,用于对矫正后的车牌图像进行超分辨率重建,得到重建后的车牌图像,随后使用车牌识别网络对重建后的车牌图像进行车牌识别,得到车牌标识;
38、辅助校验单元,用于获取车辆标识对应车辆的至少一项辅助校验数据,所述辅助校验数据包括车辆车型数据、车辆颜色数据、车辆编号数据以及车辆驾驶人数据;
39、匹配校验模块,用于基于识别到的车牌标识以及辅助校验数据,在预设车辆管理库中进行匹配,若两者匹配成功,则身份校验通过,若匹配失败,则身份校验不通过。
40、第三方面,本发明提供了一种计算机设备,包括依次通信相连的存储器、处理器和收发器,其中,所述存储器用于存储计算机程序,所述收发器用于收发消息,所述处理器用于读取所述计算机程序,执行如上述第一方面所述的基于车牌图像识别的油库装车车辆身份校验方法。
41、第四方面,本发明提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,当所述指令在计算机上运行时,执行如上述第一方面所述的基于车牌图像识别的油库装车车辆身份校验方法。
42、第五方面,本发明提供了一种包含指令的计算机程序产品,当所述指令在计算机上运行时,使所述计算机执行如上述第一方面所述的基于车牌图像识别的油库装车车辆身份校验方法。
43、本发明的有益效果如下:本发明公开了一种基于车牌图像识别的油库装车车辆身份校验方法及装置,其通过获取摄像头采集的油库装车车辆的车牌图像,对车牌图像进行车牌顶点检测,得到车牌图像的顶点坐标,使用车牌图像的顶点坐标对车牌图像进行透视变换,以对车牌图像中的车牌进行矫正,得到矫正后的车牌图像,随后对矫正后的车牌图像进行超分辨率重建,得到重建后的车牌图像,随后使用车牌识别网络对重建后的车牌图像进行车牌识别,得到车牌标识,获取车辆标识对应车辆的至少一项辅助校验数据,所述辅助校验数据包括车辆车型数据、车辆颜色数据、车辆编号数据以及车辆驾驶人数据,基于识别到的车牌标识以及辅助校验数据,在预设车辆管理库中进行匹配,若两者匹配成功,则身份校验通过,若匹配失败,则身份校验不通过。本发明通过对车牌图像进行车牌顶点检测和透视变换矫正,能有效解决因拍摄角度偏差导致的车牌区域倾斜变形的问题,使得车牌区域变得规整化,通过提高输入图像的质量,显著提升车牌识别的准确率;并且使用超分辨率重建技术对矫正后的车牌图像进行超分辨率重建,得到重建后的车牌图像,能有效抑制图像锯齿和边缘模糊的问题,更好地恢复车牌字符的纹理细节,提高车牌图像识别的鲁棒性;通过辅助校验数据与车牌标识结合,在预设车辆管理库中进行一一匹配,提高车牌身份校验的准确性,有效识别和防范套牌以及换牌等恶意违规行为和安全隐患发生的概率,提升油库装车作业的安全管理水平,便于应用和推广。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com