螺丝漏锁检测方法及系统、装置和存储介质与流程

技术特征：
1.一种螺丝漏锁检测方法，其特征在于，包括步骤：获取需要检测的关键帧图像，所述关键帧图像上包括螺丝图像；将所述关键帧图像与参考图像进行精确配准，并在所述关键帧图像上进行螺丝图像的获取，所述参考图像上制作有螺丝正样本图像和负样本图像，所述正样本图像为螺丝锁紧的状态，所述负样本图像为未设有螺丝的状态，参考所述正样本图像和所述负样本图像确定螺丝图像；对所述螺丝图像进行高斯蒙版预处理；对预处理后的螺丝图像进行特征提取和分类，确定未锁紧的螺丝图像。2.根据权利要求1所述的螺丝漏锁检测方法，其特征在于，所述“将所述关键帧图像与参考图像进行精确配准，并在所述关键帧图像上进行螺丝图像的获取”具体包括：获取所述参考图像上的至少两张螺丝样本图像，所述螺丝样本图像中心为点p，至少包括螺丝正样本图像和螺丝负样本图像，在所述关键帧图像上以p点为中心，获取螺丝搜索图像，所述螺丝搜索图像大小不小于所述螺丝样本图像大小；采用所述螺丝正样本图像和所述螺丝负样图像本分别与所述螺丝搜索图像进行匹配，获取与所述螺丝正样本或者所述螺丝负样本最相似的感兴趣(roi)区域；以所述感兴趣区域的中心为螺丝中心，裁剪设定大小的图像作为螺丝图像。3.根据权利要求2所述的螺丝漏锁检测方法，其特征在于，所述“对所述螺丝图像进行高斯蒙版预处理”具体包括：对所述螺丝图像进行高斯蒙版处理，将所述螺丝图像与高斯蒙版相乘，获取螺丝的高斯蒙版图像。4.根据权利要求1所述的螺丝漏锁检测方法，其特征在于，所述“获取需要检测的关键帧图像”前还包括步骤：获取需要检测的图像，将需要检测的图像与所述参考图像进行粗配准，形成关键帧图像；所述粗配准采用sift算法。5.一种螺丝漏锁检测系统，其特征在于，包括：图像获取模块，用于获取需要检测的关键帧图像，所述关键帧图像上包括螺丝图像；精确配准模块，用于将所述关键帧图像与参考图像进行精确配准，并在所述关键帧图像上进行螺丝图像的获取，所述参考图像上制作有螺丝正样本图像和负样本图像，所述正样本图像为螺丝锁紧的状态，所述负样本图像为未设有螺丝的状态，参考所述正样本图像和所述负样本图像确定螺丝图像；预处理模块，用于对所述螺丝图像进行高斯蒙版预处理；处理模块，用于对预处理后的螺丝图像进行特征提取和分类，确定未锁紧的螺丝图像。6.根据权利要求5所述的螺丝漏锁检测系统，其特征在于，所述精确配准模块包括：样本图像获取单元，用于获取所述参考图像上的至少两张螺丝样本图像，所述螺丝样本图像中心为点p，至少包括螺丝正样本图像和螺丝负样本图像；搜索图像获取单元，用于在所述关键帧图像上以p点为中心，获取螺丝搜索图像，所述螺丝搜索图像大小不小于所述螺丝样本图像大小；感兴趣区域获取单元，用于采用所述螺丝正样本图像和所述螺丝负样图像本分别与所述螺丝搜索图像进行匹配，获取与所述螺丝正样本或者所述螺丝负样本最相似的感兴趣
(roi)区域；螺丝图像获取单元，用于以所述感兴趣区域的中心为螺丝中心，裁剪设定大小的图像作为螺丝图像。7.根据权利要求6所述的螺丝漏锁检测系统，其特征在于，所述预处理模块具体包括：高斯蒙版单元，用于设定需要的高斯蒙版；计算单元，用于将所述螺丝图像与所述高斯蒙版相乘，获取螺丝的高斯蒙版图像。8.根据权利要求5所述的螺丝漏锁检测系统，其特征在于，图像获取模块还用于获取需要检测的图像，还包括粗配准模块，用于将需要检测的图像与所述参考图像进行粗配准，形成关键帧图像。9.一种装置，其特征在于，所述装置包括：一个或多个处理器；存储器，用于存储一个或多个程序，当所述一个活多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器执行如权利要求1-4中任一项所述的螺丝漏锁检测方法。10.一种存储有计算机程序的计算机可读存储介质，其特征在于，该程序被处理器执行时实现如权利要求1-4中任一项所述的螺丝漏锁检测方法。

技术总结
本申请公开了一种螺丝漏锁检测方法及系统、装置和存储介质，包括：获取需要检测的关键帧图像；将关键帧图像与参考图像进行精确配准，并在关键帧图像上进行螺丝图像的获取；对螺丝图像进行高斯蒙版预处理；对预处理后的螺丝图像进行特征提取和分类，确定未锁紧的螺丝图像。根据本申请实施例提供的技术方案，一方面，通过采用智能识别的方式进行螺丝状态的检测，释放人力资源，节约资源，另一方面，通过精确配准获取螺丝的准确图像，根据该图像进行螺丝是否漏锁的判断，判断更加准确和高效。判断更加准确和高效。判断更加准确和高效。


技术研发人员：王婷婷
受保护的技术使用者：京东方科技集团股份有限公司
技术研发日：2020.04.28
技术公布日：2021/10/28