一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

基于多尺度机制和注意力机制的路面标线识别方法及系统与流程

2023-01-15 03:39:57 来源:中国专利 TAG:

技术特征:
1.基于多尺度机制和注意力机制的路面标线识别方法,其特征在于,包括:扫描待识别路段实时采集路面图像数据;对路面图像数据进行预处理后输入已构建好的图像分割识别模型中进行分割识别得到路面图像数据的识别结果;所述图像分割识别模型以卷积网络convnext为基线,在提取图像特征信息的最后阶段融入多尺度机制,并在恢复图像特征信息的最后阶段添加注意力机制。2.根据权利要求1所述的基于多尺度机制和注意力机制的路面标线识别方法,其特征在于,所述预处理包括过程:根据下式对路面图像进行归一化处理:其中i,j分别代表路面图像的行号和列号,c(i, j)代表原始路面面图像数据对应的像素值,i(i, j)代表归一化处理后的路面图像的像素值,i(i, j)属于(0,1)。3.根据权利要求1所述的基于多尺度机制和注意力机制的路面标线识别方法,其特征在于,图像分割识别模型的构建方法包括:t1,获取路面图像数据训练样本集并构建路面真值数据;所述路面真值数据为根据路面图像数据绘制的路面标线轮廓图像数据;t2,将路面真值数据进行二值化处理:在路面标线轮廓图像数据中,设置路面背景的像素值为0,路面标线的像素值为1,以数值形式表示出路面标线轮廓图像数据;t3,用路面图像数据和二值化处理后的路面真值数据训练出图像分割识别模型。4.根据权利要求3所述的基于多尺度机制和注意力机制的路面标线识别方法,其特征在于,步骤t1包括以下子步骤:t11,获取历史路面图像数据构建全训练样本;所述全训练样本包括多个模式类,各模式类具有相同个数的样本;所述模式类包括:路面标线完整模式类、路面标线动态缺失模式类和路面标线静态缺失模式类;t12,将全训练样本输入隐马尔科夫模型进行训练得到各模式类的模型;t13,用各模式类的模型对全训练样本进行识别,保存每个样本在每个模型下的概率{p
i
}={p0,p1,...p
i
},其中p0>p1>...>p
i
;i为模型的序号;并基于概率{p
i
}计算相对概率值p
x
:当n等于0时,p
x
=p
0-p1;当n不等于0时,p
x
=n(p
n-p0);n表示任意一个路面标线完整模式类样本的概率;t14,基于相对概率值p
x
划分出正样本集和负样本集后确定边界样本集;t15,以边界样本集作为路面图像数据训练样本集用于构建路面真值数据。5.根据权利要求4所述的基于多尺度机制和注意力机制的路面标线识别方法,其特征在于,全训练样本构建方法包括:从历史路面图像数据中筛选出所有路面标线动态缺失的路面图像:动态过程j包含的路面图像j1,j2,...j
n
;j=1,2,...m;基于各动态过程的路面图像获取3m个特征图像,所有的特征图像构成路面标线动态缺失模式类的n个样本;从历史路面图像数据中随机筛选出n个路面标线完整模式类的样本,和n个路面标线静
态缺失模式类的样本得到全训练样本。6.根据权利要求5所述的基于多尺度机制和注意力机制的路面标线识别方法,其特征在于,特征图像的获取方法包括:根据动态过程的路面图像计算出总遮盖面积和路面标线总面积,将总遮盖面积等效为一个长宽比为3:2的矩形遮盖物;令矩形遮盖物遮盖路面标线获取第一特征图像、第二特征图像和第三特征图像;所述第一特征图像为矩形遮盖物遮盖最大面积路面标线时的图像,所述第二特征图像和第三特征图像为矩形遮盖物遮盖路面标线面积为矩形遮盖物面积的1/3时的图像。7.根据权利要求4所述的基于多尺度机制和注意力机制的路面标线识别方法,其特征在于,t14包括以下过程:判断各样本的相对概率值p
x
是否小于零,若是则当前样本划分至负样本集,否则划分为正样本集;由全部正样本集和部分负样本集构成边界样本集。8.根据权利要求3所述的基于多尺度机制和注意力机制的路面标线识别方法,其特征在于,t3包括以下子步骤:t31,对路面图像数据进行初步特征提取得到特征层;t32,再将特征层进行高语义特征提取后下采样得到尺寸分别为n/4、n/8、n/16和n/32的特征信息图,n表示路面图像数据的尺寸;t33,对尺寸为n/4、n/8和n/16的特征信息图进行上采样得到三个尺寸为n/4的特征图像,对尺寸为n/32的特征信息图进行空洞卷积多尺度融合得到一个尺寸为n/4的特征图像;t34,基于特征图像和注意力机制构建全局信息并恢复边缘细节信息得到图像分割识别模型。9.根据权利要求8所述的基于多尺度机制和注意力机制的路面标线识别方法,其特征在于,t34包括以下子步骤:t341,将特征图像进行全局平均池化和一维卷积层操作得到一个一维的目标向量;t342,对目标向量使用sigmoid激活函数,使目标向量中的每个元素都是一个(0,1)之间的一个权重值;t343,把目标向量中的权重值与特征图像相乘使特征图中每一像素都对应一个权重值;t344,基于二值化处理后的路面真值数据不断的反向传播训练网络直到获得最优权重矩阵,基于最优权重矩阵得到图像分割识别模型。10.基于多尺度机制和注意力机制的路面标线识别系统,用于实现权利要求1-9任意一项所述的方法,其特征在于,包括采集模块、识别模块和模型构建模块;所述采集模块用于扫描待识别路段实时采集路面图像数据;所述识别模块用于对路面图像数据进行预处理后输入已构建好的图像分割识别模型中进行分割识别得到路面图像数据的识别结果;模型构建模块用于以卷积网络convnext为基线,在提取图像特征信息的最后阶段融入多尺度机制,并在恢复图像特征信息的最后阶段添加注意力机制构建出图像分割识别模型。

技术总结
本发明公开了基于多尺度机制和注意力机制的路面标线识别方法及系统,涉及图像识别技术领域,在通过卷积神经网络构建模型时,以图像分类卷积网络ConvNeXt为基线,在提取图像特征信息的最后阶段融入多尺度机制,用于路面标线的高精度分割识别,并在网络恢复图像特征信息的最后阶段添加了注意力机制,使得该网络在保持多尺度提取特征的同时,还可以兼顾全局信息的构建,并且在一定程度上提高了网络构建边缘信息的能力,实现道路路面标线的高精度像素级分割。级分割。级分割。


技术研发人员:张傲南 李文虎
受保护的技术使用者:四川蜀道新能源科技发展有限公司
技术研发日:2022.12.01
技术公布日:2022/12/30
再多了解一些

本文用于创业者技术爱好者查询,仅供学习研究,如用于商业用途,请联系技术所有人。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献