一种基于连续车牌特征比对的车辆身份认证方法与流程

摘要: 本发明涉及智能交通与计算机视觉车辆身份认证,具体涉及一种基于连续车牌特征比对的车辆身份认证方法。背景技术:1、车辆身份认证是指利用车辆图像、车牌及车体结构等可观...
一种基于连续车牌特征比对的车辆身份认证方法与流程

本发明涉及智能交通与计算机视觉车辆身份认证,具体涉及一种基于连续车牌特征比对的车辆身份认证方法。

背景技术:

1、车辆身份认证是指利用车辆图像、车牌及车体结构等可观测信息,对实际通行车辆与预先登记车辆之间的身份对应关系进行核验,以支持道路卡口、停车场及园区门禁等场景中的自动通行与异常车辆识别。

2、现有专利cn103279739b公开了一种基于车辆特征匹配的套牌检测方法,通过车牌定位车头区域并提取颜色、纹理特征与数据库车辆特征进行比对。该方案侧重单次车辆外观静态匹配,未利用同一实体车牌在连续帧中的稳定局部特征及其演化关系,也未核验车牌与车体固定结构的连续安装关系,因此难以区分号码相同但车牌实体或牌车绑定关系异常的车辆。

3、针对上述问题,有必要提出一种基于连续车牌特征比对的车辆身份认证方法。

技术实现思路

1、本发明的目的在于提供一种基于连续车牌特征比对的车辆身份认证方法,以解决现有车辆身份核验主要依赖车牌号码、车型、颜色或者单帧车辆外观特征进行静态比对,难以进一步确认当前车牌是否属于登记实体车牌以及该实体车牌是否仍保持与登记车辆之间原有安装关系的问题。

2、为实现上述目的,本发明提供一种基于连续车牌特征比对的车辆身份认证方法,包括如下步骤:

3、s1、采集目标车辆连续经过图像采集区域时形成的连续车辆图像,为同一目标车辆建立车辆轨迹标识,根据车辆轨迹标识提取并按照采集时间排列车牌区域图像,形成连续车牌图像序列;对连续车牌图像序列执行车牌字符识别,并根据得到的候选车牌号码从身份管理服务器获取一个或多个候选注册车辆身份模板。

4、其中,注册车辆身份模板至少包括登记车牌号码、注册稳定车牌身份特征集合、时序校准数据以及牌车耦合校准数据;所述注册稳定车牌身份特征集合由登记车辆的连续注册图像经跨帧关联和稳定性筛选形成。

5、s2、根据车牌角点对连续车牌图像序列中的车牌区域进行几何归一化,在统一车牌坐标平面中提取具有归一化位置及局部描述信息的候选车牌身份特征,并在车辆图像中提取位于车牌周围的车辆结构参考点;保存候选车牌身份特征在归一化车牌坐标平面中的位置以及在原始车辆图像中的位置。

6、其中,候选车牌身份特征包括实体身份特征和号码结构特征,所述实体身份特征用于反映实体车牌自身的局部稳定差异,所述号码结构特征用于辅助跨帧关联及位置约束。

7、s3、在连续车牌图像序列中对候选车牌身份特征进行跨帧关联,根据各候选车牌身份特征的连续出现情况、局部描述信息一致性以及归一化位置稳定性排除瞬态特征和误匹配特征,得到当前目标车辆对应的稳定车牌身份特征集合。

8、s4、将稳定车牌身份特征集合与候选注册车辆身份模板中的注册稳定车牌身份特征集合进行比对,根据整体稳定特征和实体身份特征的匹配情况得到车牌实体匹配结果;同时,根据相邻车牌帧中车牌整体几何运动推定稳定车牌身份特征的预测位置,将预测位置与相应稳定车牌身份特征的实际位置进行比较,根据连续多个车牌帧中的位置变化一致程度得到车牌特征演化结果。

9、s5、利用车辆结构参考点建立车辆局部坐标基准,将车牌位置转换至车辆局部坐标基准下,根据连续车辆图像中车牌与车辆结构参考点之间的相对位置及其变化情况,与候选注册车辆身份模板中的牌车耦合校准数据进行比对,得到牌车刚性耦合结果。

10、s6、根据车牌实体匹配结果、车牌特征演化结果以及牌车刚性耦合结果生成车辆身份认证结果信号,并根据车辆身份认证结果信号控制相应执行设备执行允许通行、拒绝通行、告警、补充采集或者人工核验中的对应操作。

11、进一步地,在注册车辆身份模板建立阶段,通过连续注册图像形成跨帧候选特征对应关系,并基于同车正常数据与时间错位、特征错配或者跨车辆组合形成的对照数据,生成稳定特征筛选、实体特征匹配、车牌特征演化及牌车耦合判断所需的校准参数,使认证阶段所使用的判断参数均来源于对应登记车辆的注册数据。

12、进一步地,在候选注册车辆身份模板为多个时,分别针对不同候选注册车辆身份模板执行稳定车牌身份特征筛选、车牌实体比对、车牌特征演化判断以及牌车刚性耦合判断,并根据各候选注册车辆身份模板对应的认证结果确定最终车辆身份或者输出身份歧义状态。

13、与现有技术相比,本发明的有益效果是:

14、本发明通过连续帧筛选稳定车牌身份特征,降低反光、遮挡及瞬态噪声对实体车牌比对的干扰;进一步利用车牌局部特征与车牌整体运动之间的演化一致性校验连续真实性,并结合车牌与车辆结构参考点的刚性耦合关系验证牌车绑定状态,从而提高对复制号牌、车牌移装及局部图像异常情况下车辆身份认证的可靠性和可解释性。

1.一种基于连续车牌特征比对的车辆身份认证方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种基于连续车牌特征比对的车辆身份认证方法,其特征在于:

3.根据权利要求1所述的一种基于连续车牌特征比对的车辆身份认证方法,其特征在于,所述几何归一化包括:根据各车牌帧中的车牌角点建立当前车牌区域与统一车牌坐标平面之间的投影变换,并将车牌区域映射至所述统一车牌坐标平面;所述候选车牌身份特征包括实体身份特征和号码结构特征,所述实体身份特征至少包括固封区域纹理、车牌边缘局部结构、划痕局部纹理、污损区域局部纹理和反光膜局部纹理中的一种,所述号码结构特征包括字符局部结构特征。

4.根据权利要求1所述的一种基于连续车牌特征比对的车辆身份认证方法,其特征在于,所述筛选稳定车牌身份特征集合包括:按照图像采集顺序对相邻车牌帧中的同类型候选车牌身份特征进行跨帧关联,针对各候选特征关联链确定连续出现率、描述子距离及归一化位置偏差,并将连续出现率不低于注册稳定出现率阈值、描述子距离不高于注册描述子距离阈值且归一化位置偏差不高于注册归一化位置偏差阈值的候选特征关联链确定为稳定车牌身份特征。

5.根据权利要求4所述的一种基于连续车牌特征比对的车辆身份认证方法,其特征在于,针对每一稳定车牌身份特征,将对应候选特征关联链中各帧归一化位置的中位位置确定为当前代表位置,并从关联链中的实际局部描述子中选取与其他局部描述子的累计距离最小的局部描述子作为当前代表描述子;当形成的稳定车牌身份特征数量未达到候选注册车辆身份模板对应的数据充分性要求时,输出车牌特征数据不足标记。

6.根据权利要求1所述的一种基于连续车牌特征比对的车辆身份认证方法,其特征在于,所述车牌实体匹配结果的获得包括:根据特征类型、局部描述信息及归一化位置建立当前稳定车牌身份特征与注册稳定车牌身份特征之间的匹配关系,分别确定全部注册稳定特征的整体匹配覆盖率以及注册实体身份特征的实体身份特征匹配覆盖率,并根据二者中的较小值确定稳定特征匹配覆盖率;当所述稳定特征匹配覆盖率不低于候选注册车辆身份模板中的注册稳定特征匹配覆盖阈值时,输出车牌实体匹配通过标记。

7.根据权利要求6所述的一种基于连续车牌特征比对的车辆身份认证方法,其特征在于,所述车牌特征演化结果的获得包括:根据相邻车牌帧中的车牌角点确定帧间投影变换,将前一车牌帧中稳定车牌身份特征的实际位置投影至后一车牌帧得到预测位置,并根据所述预测位置与后一车牌帧中对应稳定车牌身份特征的实际位置确定归一化帧间重投影误差;当已匹配稳定特征在对应有效相邻帧对中的归一化帧间重投影误差不高于注册时序重投影误差阈值时,将其确定为时序一致特征,根据时序一致特征在已匹配稳定特征中的覆盖率与注册时序一致特征覆盖阈值的比较结果确定车牌特征演化结果。

8.根据权利要求1所述的一种基于连续车牌特征比对的车辆身份认证方法,其特征在于,所述车辆结构参考点包括车灯、车标、进气格栅、保险杠轮廓及车头轮廓中的至少一种固定结构对应的参考点;从同一车辆图像中选取至少2个语义类型不同的车辆结构参考点,以其中第1车辆结构参考点为局部坐标原点,以第1车辆结构参考点指向第2车辆结构参考点的方向为局部横轴方向,并以二者之间的距离为局部坐标尺度,建立车辆局部坐标基准。

9.根据权利要求8所述的一种基于连续车牌特征比对的车辆身份认证方法,其特征在于,将车牌中心和车牌角点转换至所述车辆局部坐标基准下,并与候选注册车辆身份模板中对应车辆结构参考点组合下的注册车牌位置进行比较,得到局部耦合偏差;根据同一车辆图像中所述局部耦合偏差确定牌车单帧耦合偏差,将牌车单帧耦合偏差不高于注册牌车单帧耦合偏差阈值的可比较牌车结构记录确定为牌车正常记录,以牌车正常记录数量占全部可比较牌车结构记录数量的比例得到牌车耦合一致率,并根据牌车耦合一致率与注册牌车耦合一致率阈值的比较结果确定牌车刚性耦合结果。

10.根据权利要求1所述的一种基于连续车牌特征比对的车辆身份认证方法,其特征在于,当候选注册车辆身份模板为多个时,分别针对各候选注册车辆身份模板执行稳定车牌身份特征筛选、车牌实体匹配、车牌特征演化判断及牌车刚性耦合判断;当仅有1个候选注册车辆身份模板的车牌实体匹配结果、车牌特征演化结果及牌车刚性耦合结果均满足认证要求时,将该候选注册车辆身份模板确定为目标车辆身份对应模板;当2个以上候选注册车辆身份模板均满足认证要求时,输出多候选身份歧义信号。