复杂纹理花边布的缺陷检测方法及装置

技术特征：
1.一种复杂纹理花边布的缺陷检测方法，其特征在于，包括：获取待检测子图像；其中，所述待检测子图像中包含花边布图案；确定所述待检测子图像在目标纹理图像中的第一对应位置，将所述第一对应位置处的图像和所述待检测子图像组成待检测图像对；其中，所述目标纹理图像为花边布图案无缺陷的图像；将所述待检测图像对输入至编解码模型中，得到所述编解码模型输出的恢复后的待检测子图像；将所述恢复后的待检测子图像和所述目标纹理图像进行比对；在确定所述恢复后的待检测子图像的花边布图案有缺陷时，确定所述恢复后的待检测子图像中的缺陷位置；其中，所述编解码模型是基于多个图像对样本训练得到的；所述编解码模型用于基于所述第一对应位置处的图像对所述待检测子图像进行矫正。2.根据权利要求1所述的复杂纹理花边布的缺陷检测方法，其特征在于，所述将所述恢复后的待检测子图像和所述目标纹理图像进行比对，包括：将所述恢复后的待检测子图像和所述目标纹理图像，从亮度、对比度和结构进行结构相似性评估。3.根据权利要求1或2所述的复杂纹理花边布的缺陷检测方法，其特征在于，在所述将所述待检测图像对输入至编解码模型中，得到所述编解码模型输出的恢复后的待检测子图像之前，所述方法还包括：获取多个时间周期的图像样本序列；其中，所述图像样本序列中至少包括一个时间周期的所述目标纹理图像；所述时间周期为生产流水线中花边布图案循环一次所需的时间；在所述图像样本序列中提取预设尺寸的多个子图像样本；确定每个所述子图像样本在所述目标纹理图像中的第二对应位置，将每个所述第二对应位置处的图像和对应的所述子图像样本组成多个图像对样本；基于所述多个图像对样本对深度学习模型进行训练，得到所述编解码模型。4.根据权利要求3所述的复杂纹理花边布的缺陷检测方法，其特征在于，所述基于所述多个图像对样本对深度学习模型进行训练，得到所述编解码模型，包括：将所述多个图像对样本输入至深度学习模型中，得到每个所述图像对样本对应的光流向量场；将所述光流向量场与对应的所述子图像样本进行叠加，并对叠加结果进行插值，得到恢复后的子图像样本；基于所述恢复后的子图像样本和所述目标纹理图像构建损失函数；基于所述损失函数对所述深度学习模型进行优化，直至所述损失函数收敛，得到所述编解码模型。5.根据权利要求4所述的复杂纹理花边布的缺陷检测方法，其特征在于，所述基于所述恢复后的子图像样本和所述目标纹理图像构建损失函数，包括：采用以下公式(1)构建所述损失函数；l＝l
mse
λl
flow
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
(1)其中，l表示损失函数，λ表示光流向量场梯度损失的权重，l
mse
表示所述恢复结果形态
损失，l
mse
＝∑
i,j
[m
′
(i,j)-f(i,j)]2；l
flow
表示所述光流向量场梯度损失，l
flow
＝∑
i,j
[g(i,j,0)2 g(i,j,1)]2；m
′
(i,j)为所述恢复后的子图像样本，f(i,j)为所述目标纹理图像；g(i,j,0)为第一层的光流向量场，g(i,j,1)为第二层的光流向量场。6.根据权利要求3所述的复杂纹理花边布的缺陷检测方法，其特征在于，所述确定每个所述子图像样本在所述目标纹理图像中的第二对应位置，包括：针对每个所述子图像样本，对所述子图像样本构建尺度空间；在所述尺度空间中，确定预设邻域中的极值点；将主曲率比值大于预设阈值的极值点进行过滤；确定过滤后剩余的每个极值点的特征信息；基于过滤后剩余的每个极值点的特征信息确定所述子图像样本在所述目标纹理图像中的所述第二对应位置。7.根据权利要求3所述的复杂纹理花边布的缺陷检测方法，其特征在于，所述深度学习模型包括4层u-net网络，所述u-net网络包括一个输入i、一个输出out、中间量c1、中间量c2、中间量c3、中间量c4、中间量c5和中间量c6；所述c1＝conv(ω0i,stride＝2)；所述c2＝conv(ω1c1,stride＝2)；所述c3＝conv(ω2c2,stride＝2)；所述c4＝conv(ω3c3,stride＝1)；所述c5＝up(concat(c2,c4))；所述c6＝up(concat(c1,c5))；所述out＝up(concat(c1,c5))；其中，conv(i,stride)表示输入为i和步长stride的二维卷积操作，ω表示卷积层的参数，concat表示两个图像的拼接操作，up表示输入图像的上采样操作。8.一种复杂纹理花边布的缺陷检测装置，其特征在于，包括：第一获取单元，用于获取待检测子图像；其中，所述待检测子图像中包含花边布图案；第一确定单元，用于确定所述待检测子图像在目标纹理图像中的第一对应位置，将所述第一对应位置处的图像和所述待检测子图像组成待检测图像对；其中，所述目标纹理图像为花边布图案无缺陷的图像；处理单元，用于将所述待检测图像对输入至编解码模型中，得到所述编解码模型输出的恢复后的待检测子图像；比对单元，用于将所述恢复后的待检测子图像和所述目标纹理图像进行比对；第二确定单元，用于在确定所述恢复后的待检测子图像的花边布图案有缺陷时，确定所述恢复后的待检测子图像中的缺陷位置；其中，所述编解码模型是基于多个图像对样本训练得到的；所述编解码模型用于基于所述第一对应位置处的图像对所述待检测子图像进行矫正。9.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述复杂纹理花边布的缺陷检测方法的步骤。10.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序被处理器执
行时实现如权利要求1至6任一项所述复杂纹理花边布的缺陷检测方法的步骤。

技术总结
本发明提供一种复杂纹理花边布的缺陷检测方法及装置，获取待检测子图像；待检测子图像中包含花边布图案；确定待检测子图像在目标纹理图像中的第一对应位置，将第一对应位置处的图像和待检测子图像组成待检测图像对；目标纹理图像为花边布图案无缺陷的图像；将待检测图像对输入至编解码模型中，得到编解码模型输出的恢复后的待检测子图像；将恢复后的待检测子图像和目标纹理图像进行比对；在确定恢复后的待检测子图像的花边布图案有缺陷时，确定恢复后的待检测子图像中的缺陷位置。本发明提供的复杂纹理花边布的缺陷检测方法及装置，实现了图像缺陷位置的自动检测，从而提高了图像缺陷检测的效率。陷检测的效率。陷检测的效率。


技术研发人员：黄必清 许丁
受保护的技术使用者：清华大学
技术研发日：2022.02.15
技术公布日：2022/6/1