道路破损检测方法及装置与流程

1.本发明涉及一种图像检测方法，特别是一种基于图像识别的道路破损检测方法。本发明还涉及应用该方法的道路破损检测装置。


背景技术：

2.路面破损总体上可以分两类：结构性破损和功能性破损。结构性破损导致路面结构承载力下降，以各种结构裂缝的形式表现出来。功能性破损则会影响行车质量和行车安全，表现为路面服务能力下降、平整度和抗滑性能降低。目前常见的道路破损检测方法，是通过在巡查车辆安装gps定位装置和摄像机。巡查车辆在待检路段行驶过程中，摄像机持续采集路面图像。路面图像信息后续可通过图像识别算法进行破损识别。常见的图像识别算法，可包括基于神经网络算法模型的破损识别，以及基于正常路面图像和待检测路面图像帧的rgb通道的图像比较。对于目前这两种实现方式来说，基于rgb通道的图像比较，与路面破损程度及光照条件正相关，实际应用反映出来准确率欠佳，尤其是针对破损程度较低的路面损坏，常出现误报。而基于神经网络算法模型的准确率虽然相对于前者有一定的提升，但是在不良光照条件，仍然有不少的误报。并且，目前采用gps定位的方式，误差较大，并不能准确地反映出路面破损地点的准确坐标，难于指导后续道路维修。


技术实现要素：

3.鉴于现有技术存在的上述问题，本发明的一方面目的在于提供一种可以准确识别道路破损并能准确定位破损位置的道路破损检测方法。本发明的另一方面的目的在于提供一种实施该道路破损检测方法的道路破损检测装置。
4.为了实现上述目的，本发明一方面提供的道路破损检测方法，该方法包括：
5.控制一移动载具沿待检测道路行驶；
6.控制所述移动载具上的喷水机构向待检测道路的路面喷水；
7.在频闪灯光照射下对喷水后的所述路面进行图像采集；
8.针对采集的路面的图像信息进行分析，判断路面是否存在破损；
9.如是，根据移动载具搭载的rtk测量仪获取路面破损点的瞬时坐标，记录破损点瞬时坐标和破损点图像信息。
10.作为优选，在对喷水后的所述路面进行图像采集时，包括：
11.控制红色光源和紫色光源依序按照预设频率闪烁以向路面提供照射光线；
12.在所述移动载具行驶过程中，以垂直于路面方向录制视频流，所述视频流至少包括红色光源下的第一图像帧和紫色光源下的第二图像帧；
13.分别提取包含有破损点图像信息的第一图像帧和第二图像帧。
14.作为优选，在针对采集的路面的图像信息进行分析时，包括：
15.针对所述第一图像帧进行二值化处理，获得第一预处理帧；
16.针对所述第二图像帧进行二值化处理，获得第二预处理帧；
17.将所述第一预处理帧和第二预处理帧进行基于opencv的帧叠加，获得待分析图像中间帧；
18.针对所述待分析图像中间帧进行边缘检测，标记可能的破损区域；
19.依据标记的破损区域，基于预设镜头参数，估算破损区域大小。
20.作为优选，估算破损区域大小时，包括：
21.获取镜头距离地面的预设距离；
22.获取镜头的预设焦距；
23.将标记的破损区域至于标准坐标系，估算破损区域在所述待分析图像中间帧中的尺寸；
24.基于相机镜头、预设焦距和破损区域在所述待分析图像中间帧中的尺寸，估算破损区域的实际大小。
25.作为优选，记录破损点瞬时坐标时，基于车载gps的gps信息，选择距离最近的rtk基准定位站，所述rtk基准定位站配置为对一gnss卫星进行持续观测，并将其观测数据实时发送至移动载具搭载的rtk测量仪，所述rtk基准定位站根据实时的gps信息及所述rtk基准定位站的观测数据，实时解算出破损点瞬时坐标；其中，该破损点瞬时坐标基于wgs84坐标系。
26.作为优选，判断路面是否存在破损时，包括：
27.基于常见路面破损图像的预设图像数据集，构建训练集；
28.构建卷积神经网络算法模型；
29.基于所述训练集，对所述卷积神经网络算法模型进行训练；
30.生成分类器，所述分类器配置为筛选出包含有破损区域的路面的多个图像帧；
31.其中，提取包含有破损点图像信息的第一图像帧和第二图像帧，包括提取时序上相邻的第一图像帧和第二图像帧。
32.作为优选，记录破损点瞬时坐标和破损点图像信息，包括：
33.将破损点瞬时坐标和破损点图像信息存储于一存储单元；和/或，
34.将破损点瞬时坐标和破损点图像信息上传至远程监测中心。
35.为了实现本发明的另一方面目的，本发明提供的道路破损检测装置，其配置为执行上述方法，包括：
36.移动载具，其构造为一行走车辆，配置为沿待测道路行驶；
37.喷水机构，其至少包括设置于车辆头部的多个喷头，所述喷头构造为使液态水剂以扇形形态喷洒；
38.图像采集单元，其设置于车辆底部大致居中位置，且具有垂直于地面向下设置的镜头；
39.补光灯，并列设置于所述图像采集单元的所述镜头的一侧，至少包括交替发光的第一发光单元和第二发光单元，所述第一发光单元发出的光线的波长与所述第二发光单元发出的光线的波长不同；
40.控制部，其配置控制所述第一发光单元和所述第二发光单元以预设频率交替闪烁，判断路面是否存在破损，如是，根据移动载具搭载的rtk测量仪获取路面破损点的瞬时坐标；
41.存储单元，其配置为记录破损点瞬时坐标和破损点图像信息。
42.作为优选，所述第一发光单元为红色光源，所述第二发光单元为紫色光源，所述图像采集单元配置为以垂直于路面方向录制视频流，所述视频流至少包括红色光源下的第一图像帧和紫色光源下的第二图像帧；所述控制部还配置为提取包含有破损点图像信息的第一图像帧和第二图像帧，针对所述第一图像帧进行二值化处理，获得第一预处理帧；针对所述第二图像帧进行二值化处理，获得第二预处理帧；将所述第一预处理帧和第二预处理帧进行基于opencv的帧叠加，获得待分析图像中间帧；针对所述待分析图像中间帧进行边缘检测，标记可能的破损区域；依据标记的破损区域，基于预设镜头参数，估算破损区域大小。
43.作为优选，所述存储单元在记录破损点瞬时坐标时，所述控制部基于车载gps的gps信息，选择距离最近的rtk基准定位站，所述rtk基准定位站配置为对一gnss卫星进行持续观测，并将其观测数据实时发送至移动载具搭载的rtk测量仪，所述rtk基准定位站根据实时的gps信息及所述rtk基准定位站的观测数据，实时解算出破损点瞬时坐标；其中，该破损点瞬时坐标基于wgs84坐标系。
44.本发明提供的道路破损检测方法及装置，可在喷水条件下，通过交替闪烁的不同波长短的补光灯，对路面进行照射。由于路面的破损点，较正常路面，必然存在异常的积水，而不同波长的照射光线，由于其在积水中的折射率不同，因此会在图像采集装置中体现出不同的镜面反光效果。而在后续识别过程中，可通过相对需要较小算力的二值化处理，即可分别获得不同光照条件下的破损点的二值化图像，再将两帧图像进行叠加，即可准确确定破损点的经二值化的图像中间帧。该中间帧为合成帧，相对于单一波长光线照射，可更大程度表现出破损点轮廓。当然，为了标注该破损点，可进一步通过现有算法中的边缘检测算法，实现破损点的标注。另外，本发明中，在针对破损点的定位时，可采用准确度更高的gnss-rtk定位方式，对破损点进行定位，方便后续维修定位。
附图说明
45.图1为本发明的道路破损检测方法的检测原理示意图。
46.图2为本发明的道路破损检测方法中经处理后的待分析图像中间帧的示例性图样。
47.图3为本发明的道路破损检测方法的检测原理的另一示意图。
48.图4为本发明的道路破损检测方法的流程示意图。
49.图5为本发明的道路破损检测装置的结构框图。
具体实施方式
50.为使本领域技术人员更好的理解本发明的技术方案，下面结合附图和具体实施方式对本发明作详细说明。
51.此处参考附图描述本发明的各种方案以及特征。
52.通过下面参照附图对给定为非限制性实例的实施例的优选形式的描述，本发明的这些和其它特性将会变得显而易见。
53.还应当理解，尽管已经参照一些具体实例对本发明进行了描述，但本领域技术人员能够确定地实现本发明的很多其它等效形式，它们具有如权利要求所述的特征并因此都
位于借此所限定的保护范围内。
54.当结合附图时，鉴于以下详细说明，本发明的上述和其他方面、特征和优势将变得更为显而易见。
55.如图1至图4所示，本发明的道路破损检测方法，该方法包括：
56.控制一移动载具沿待检测道路行驶；控制所述移动载具上的喷水机构向待检测道路的路面喷水；在频闪灯光照射下对喷水后的所述路面进行图像采集；针对采集的路面的图像信息进行分析，判断路面是否存在破损；如是，根据移动载具搭载的rtk测量仪获取路面破损点的瞬时坐标，记录破损点瞬时坐标和破损点图像信息。在本发明中，喷水机构可采用常见的道路喷水机构实现，例如类似洒水车的喷洒机构，其设置目的在于向移动载具，例如行走车辆的车头位置向路面喷洒水源，由于道路破损处会产生明显的异常积水，该异常积水在光照条件下会相对于喷水条件下的正常路面，会产生更为明显的反光，该反光会被图像采集单元采集，并实现更准确的识别效果。同时，在两者波长不同的补光灯的交替照射下，图像采集单元采集的图像帧将出现可检测的偏移。该偏移在经后续的图像处理中，将更容易被准确呈现。
57.在进一步的改进方案中，作为优选，在对喷水后的所述路面进行图像采集时，包括：控制红色光源和紫色光源依序按照预设频率闪烁以向路面提供照射光线；据一般常识来说，紫光光源的波长介于400～435nm，而红光光源的波长介于605nm～650nm。而在所述移动载具行驶过程中，以垂直于路面方向录制视频流，所述视频流至少包括红色光源下的第一图像帧和紫色光源下的第二图像帧；在进一步处理中，可分别提取包含有破损点图像信息的第一图像帧和第二图像帧。另外，为了强化反光效果，本发明的方案中，可通过在水源中添加反光反光材料，例如300目至350目的石英粉，石英粉与水的添加比例以重量份计1-10:1000。同时，为了防止石英粉沉淀，最好加入分散剂，配置为悬浮液，分散剂可例如为氢氧化铝或磷酸钙，考虑到分散剂对环境的影响，优选选择磷酸钙作为分散剂，添加比例以重量份计，介于0.5-0.8:1000。
58.在本发明的方法中，作为优选，在针对采集的路面的图像信息进行分析时，具体可包括：针对所述第一图像帧进行二值化处理，获得第一预处理帧；针对所述第二图像帧进行二值化处理，获得第二预处理帧；将所述第一预处理帧和第二预处理帧进行基于opencv的帧叠加，获得待分析图像中间帧；针对所述待分析图像中间帧进行边缘检测，标记可能的破损区域；依据标记的破损区域，基于预设镜头参数，估算破损区域大小。其中，本发明中所涉及的二值化处理及边缘检测算法，均为现有技术中图像处理的常见算法，本发明不做赘述。
59.而在估算破损区域大小时，本发明方法优选包括：获取镜头距离地面的预设距离；获取镜头的预设焦距；将标记的破损区域至于标准坐标系，估算破损区域在所述待分析图像中间帧中的尺寸；基于相机镜头、预设焦距和破损区域在所述待分析图像中间帧中的尺寸，估算破损区域的实际大小。
60.另外，在记录破损点瞬时坐标时，基于车载gps的gps信息，选择距离最近的rtk基准定位站，所述rtk基准定位站配置为对一gnss卫星进行持续观测，并将其观测数据实时发送至移动载具搭载的rtk测量仪，所述rtk基准定位站根据实时的gps信息及所述rtk基准定位站的观测数据，实时解算出破损点瞬时坐标；其中，该破损点瞬时坐标基于wgs84坐标系。
61.作为优选，判断路面是否存在破损时，包括：基于常见路面破损图像的预设图像数
据集，构建训练集；构建卷积神经网络算法模型；基于所述训练集，对所述卷积神经网络算法模型进行训练；生成分类器，所述分类器配置为筛选出包含有破损区域的路面的多个图像帧；其中，提取包含有破损点图像信息的第一图像帧和第二图像帧，包括提取时序上相邻的第一图像帧和第二图像帧。再者，如图3和图4所示，记录破损点瞬时坐标和破损点图像信息，包括：将破损点瞬时坐标和破损点图像信息存储于一存储单元；和/或，将破损点瞬时坐标和破损点图像信息上传至远程监测中心。
62.图5示出了本发明提供的道路破损检测装置的结构框图，其配置为执行上述方法，包括：移动载具，其构造为一行走车辆，配置为沿待测道路行驶；喷水机构，其至少包括设置于车辆头部的多个喷头，所述喷头构造为使液态水剂以扇形形态喷洒；图像采集单元，其设置于车辆底部大致居中位置，且具有垂直于地面向下设置的镜头；补光灯，并列设置于所述图像采集单元的所述镜头的一侧，至少包括交替发光的第一发光单元和第二发光单元，所述第一发光单元发出的光线的波长与所述第二发光单元发出的光线的波长不同；控制部，其配置控制所述第一发光单元和所述第二发光单元以预设频率交替闪烁，判断路面是否存在破损，如是，根据移动载具搭载的rtk测量仪获取路面破损点的瞬时坐标；存储单元，其配置为记录破损点瞬时坐标和破损点图像信息。优选地，所述第一发光单元为红色光源，所述第二发光单元为紫色光源，所述图像采集单元配置为以垂直于路面方向录制视频流，所述视频流至少包括红色光源下的第一图像帧和紫色光源下的第二图像帧；所述控制部还配置为提取包含有破损点图像信息的第一图像帧和第二图像帧，针对所述第一图像帧进行二值化处理，获得第一预处理帧；针对所述第二图像帧进行二值化处理，获得第二预处理帧；将所述第一预处理帧和第二预处理帧进行基于opencv的帧叠加，获得待分析图像中间帧；针对所述待分析图像中间帧进行边缘检测，标记可能的破损区域；依据标记的破损区域，基于预设镜头参数，估算破损区域大小。进一步优选地，所述存储单元在记录破损点瞬时坐标时，所述控制部基于车载gps的gps信息，选择距离最近的rtk基准定位站，所述rtk基准定位站配置为对一gnss卫星进行持续观测，并将其观测数据实时发送至移动载具搭载的rtk测量仪，所述rtk基准定位站根据实时的gps信息及所述rtk基准定位站的观测数据，实时解算出破损点瞬时坐标；其中，该破损点瞬时坐标基于wgs84坐标系。
63.以上实施例仅为本发明的示例性实施例，不用于限制本发明，本发明的保护范围由权利要求书限定。本领域技术人员可以在本发明的实质和保护范围内，对本发明做出各种修改或等同替换，这种修改或等同替换也应视为落在本发明的保护范围内。