基于双目视觉的工件尺寸测量系统及方法与流程

摘要: 本发明涉及机器视觉测量,具体为基于双目视觉的工件尺寸测量系统及方法。背景技术:1、在基于双目视觉的工件尺寸测量中,工件表面高光会改变局部灰度分布,造成轮廓边缘在...
基于双目视觉的工件尺寸测量系统及方法与流程

本发明涉及机器视觉测量,具体为基于双目视觉的工件尺寸测量系统及方法。

背景技术:

1、在基于双目视觉的工件尺寸测量中,工件表面高光会改变局部灰度分布,造成轮廓边缘在图像中的位置发生偏移或断裂。现有技术通常采用漫反射照明、单一偏振滤光片或图像高光去除算法进行处理。漫反射照明对表面反射特性复杂的工件抑制能力有限,单一偏振滤光片只能滤除特定方向的高光分量,工件表面取向变化会使高光偏振方向改变,残留高光仍会覆盖轮廓边缘。图像高光去除算法需要先检测高光区域,再利用邻域灰度进行估计,在轮廓边缘附近容易造成细节丢失或边缘位置偏差。部分方法通过投射结构光增强弱纹理表面特征,但结构光条纹在高光区域容易饱和,条纹解码受高光影响明显。

2、双目图像中左右轮廓点对应关系的建立通常依赖极线约束和灰度相似性。极线约束将候选点限制在极线附近,当轮廓方向与极线接近平行或存在重复纹理时,极线邻域内会保留多个候选点,灰度相似性对弱纹理和高光残留区域的区分能力不足,容易产生误匹配。部分方法引入局部曲率作为匹配依据,但仅比较局部曲率值,未考虑轮廓弧长位置的顺序性和曲率符号的一致性,在轮廓曲率突变或局部遮挡时,左右轮廓点的对应关系仍存在不确定性。单向匹配缺少反向验证,左右轮廓链的整体顺序关系未被充分利用,匹配结果中容易出现交叉对应或重复对应。

3、高光干扰和左右轮廓点误匹配会使后续空间交会得到的三维轮廓点偏离实际工件表面,设定方向上的尺寸测量值波动增大,难以满足精密工件尺寸检测要求。

技术实现思路

1、针对现有技术中工件表面高光干扰轮廓提取以及左右轮廓点对应关系不可靠的问题,提供一种基于双目视觉的工件尺寸测量系统及方法,抑制高光引起的边缘偏移,减小左右轮廓点误匹配,获得稳定的工件轮廓三维坐标和尺寸测量值。

2、为了实现上述目的,本发明提供如下技术方案:基于双目视觉的工件尺寸测量方法,包括:

3、向目标工件表面投射第一线偏振光栅和第二线偏振光栅,所述第一线偏振光栅与所述第二线偏振光栅的偏振方向正交且空间频率不同,控制双目相机的左相机和右相机分别经对应偏振片同步采集左偏振图像和右偏振图像;

4、根据所述左偏振图像和所述右偏振图像中同一偏振方向的图像进行差分处理,得到左无高光图像和右无高光图像;

5、在所述左无高光图像和所述右无高光图像中提取工件轮廓的亚像素边缘点,依据双目极线约束和轮廓曲率连续条件建立左轮廓点与右轮廓点的对应关系;

6、根据所述对应关系、双目相机的标定参数和所述工件轮廓的亚像素边缘点进行空间交会,得到工件轮廓三维坐标;

7、根据所述工件轮廓三维坐标计算目标工件在设定方向上的尺寸测量值。

8、优选的,所述向目标工件表面投射第一线偏振光栅和第二线偏振光栅,所述第一线偏振光栅与所述第二线偏振光栅的偏振方向正交且空间频率不同,控制双目相机的左相机和右相机分别经对应偏振片同步采集左偏振图像和右偏振图像,具体为:

9、将第一线偏振光栅和第二线偏振光栅经同一投影镜头依次投射至目标工件表面;

10、左相机前设第一偏振片,右相机前设第二偏振片,第一偏振片与第一线偏振光栅偏振方向一致,第二偏振片与第二线偏振光栅偏振方向一致;

11、第一投射时刻仅投射第一线偏振光栅,左相机经第一偏振片采集左相机第一偏振图像,右相机经第二偏振片采集右相机第一偏振图像;

12、第二投射时刻仅投射第二线偏振光栅,左相机经第一偏振片采集左相机第二偏振图像,右相机经第二偏振片采集右相机第二偏振图像;

13、优选的,所述根据所述左偏振图像和所述右偏振图像中同一偏振方向的图像进行差分处理,得到左无高光图像和右无高光图像,具体为:

14、将所述左相机第一偏振图像与所述左相机第二偏振图像按相同像素位置相减并取绝对值,得到左差分图像;

15、将所述右相机第一偏振图像与所述右相机第二偏振图像按相同像素位置相减并取绝对值,得到右差分图像;

16、对所述左差分图像和所述右差分图像分别沿工件轮廓切线方向进行局部方向滤波,得到左滤波差分图像和右滤波差分图像;

17、将所述左滤波差分图像和所述右滤波差分图像在相同像素位置取较小灰度值,得到左无高光图像和右无高光图像。

18、优选的,所述在所述左无高光图像和所述右无高光图像中提取工件轮廓的亚像素边缘点,具体为:

19、在所述左无高光图像和所述右无高光图像中分别计算每个像素沿水平方向和竖直方向的灰度变化量,将灰度变化量最大方向作为该像素的法线方向;

20、沿所述法线方向在相邻像素之间进行二次插值,得到灰度曲线,将所述灰度曲线的极值位置作为候选边缘点;

21、根据相邻候选边缘点的法线方向夹角和轮廓位置连续性筛选候选边缘点,得到轮廓链;

22、在所述轮廓链上对每个候选边缘点在法线方向邻域内计算灰度重心,将所述灰度重心的位置作为工件轮廓的亚像素边缘点。

23、优选的,所述依据双目极线约束和轮廓曲率连续条件建立左轮廓点与右轮廓点的对应关系,具体为:

24、根据所述双目相机的标定参数计算所述左轮廓点在所述右无高光图像中的极线,将所述右轮廓点中位于极线邻域内的点作为候选右轮廓点;

25、计算所述左轮廓点在左轮廓链中的弧长位置和曲率,计算每个所述候选右轮廓点在右轮廓链中的弧长位置和曲率;

26、将弧长位置差最小且曲率符号一致的候选右轮廓点作为初选对应点;

27、对所述初选对应点进行从左到右和从右到左双向投影,将双向投影落入同一左轮廓点和同一右轮廓点的初选对应点作为左轮廓点与右轮廓点的对应关系。

28、优选的,所述根据所述对应关系、双目相机的标定参数和所述工件轮廓的亚像素边缘点进行空间交会,得到工件轮廓三维坐标,具体为:

29、根据所述左轮廓点的亚像素边缘点和所述双目相机的标定参数建立左相机空间射线,根据所述右轮廓点的亚像素边缘点和所述双目相机的标定参数建立右相机空间射线;

30、确定所述左相机空间射线与所述右相机空间射线的公垂线段,将所述公垂线段的中点作为工件轮廓三维坐标;

31、按照所述左轮廓点在左轮廓链中的顺序排列所述工件轮廓三维坐标,得到轮廓三维坐标序列;

32、对所述轮廓三维坐标序列进行移动平均平滑,得到工件轮廓三维坐标。

33、优选的,所述根据所述工件轮廓三维坐标计算目标工件在设定方向上的尺寸测量值,具体为:

34、根据所述工件轮廓三维坐标确定目标工件的延展方向,以所述延展方向为法线建立测量投影平面;

35、将所述工件轮廓三维坐标投影至所述测量投影平面,得到平面轮廓点;

36、在所述平面轮廓点中提取沿设定方向坐标最小的第一极值点和坐标最大的第二极值点;

37、将所述第一极值点与所述第二极值点之间的距离作为目标工件在设定方向上的尺寸测量值;

38、对所述目标工件的多个轮廓链分别执行上述极值点提取,将多个尺寸测量值的中位值作为最终尺寸测量值。

39、优选的,所述根据所述左轮廓点的亚像素边缘点和所述双目相机的标定参数建立左相机空间射线,根据所述右轮廓点的亚像素边缘点和所述双目相机的标定参数建立右相机空间射线,具体为:

40、在测量前将标定板置于双目相机的共同视场,控制左相机和右相机采集标定板图像;

41、在标定板图像中提取标定板角点,根据标定板角点解算双目相机的焦距、像主点、畸变系数以及左相机与右相机之间的旋转和平移关系;

42、根据畸变系数对左无高光图像和右无高光图像进行畸变校正,得到左校正图像和右校正图像;

43、根据旋转和平移关系对左校正图像和右校正图像进行极线校正,得到左极线校正图像和右极线校正图像;

44、在左极线校正图像和右极线校正图像中重新提取工件轮廓的亚像素边缘点,并根据重新提取的亚像素边缘点建立左相机空间射线和右相机空间射线。

45、优选的,所述对所述目标工件的多个轮廓链分别执行上述极值点提取,将多个尺寸测量值的中位值作为最终尺寸测量值,具体为:

46、对所述多个尺寸测量值建立尺寸分布区间,统计每个所述尺寸分布区间内的轮廓链数量;

47、将所述轮廓链数量最多的尺寸分布区间作为主尺寸区间;

48、在所述主尺寸区间内选取与所述主尺寸区间中心距离最小的尺寸测量值作为初选尺寸测量值;

49、若所述初选尺寸测量值为一个,将所述初选尺寸测量值作为最终尺寸测量值;

50、若所述初选尺寸测量值为多个,将对应轮廓链长度最长的初选尺寸测量值作为最终尺寸测量值。

51、优选的,本发明还包括基于双目视觉的工件尺寸测量系统,包括存储器、处理器以及存储在所述存储器中并在所述处理器上运行的计算机程序,所述处理器在执行所述计算机程序时,实现如上述基于双目视觉的工件尺寸测量方法的步骤。

52、在上述技术方案中,本发明提供的技术效果和优点:

53、向目标工件表面投射偏振方向正交且空间频率不同的第一线偏振光栅和第二线偏振光栅,分时投射并由左相机和右相机分别经对应偏振片采集两组偏振图像,对同一偏振方向的图像进行差分处理。高光在两次投射采集中具有相近的强度分布,而光栅图案因偏振方向选择在对应通道中形成差异,差分后高光分量被抵消,光栅调制下的轮廓灰度变化得以保留,得到左无高光图像和右无高光图像。第一线偏振光栅和第二线偏振光栅的空间频率不同,使两次采集的偏振图像在非高光区域具有不同的光栅条纹分布,差分后不会因光栅图案相同而抵消有效轮廓信息。与单一偏振滤光片相比,该方式不依赖高光偏振方向的单一假设,对表面取向变化引起的不同偏振方向高光具有更广的抑制范围,减少了轮廓边缘缺失和边缘位置偏移。对差分图像沿工件轮廓切线方向进行局部方向滤波,进一步抑制非轮廓方向的灰度扰动,使无高光图像中的轮廓边缘更完整。

54、在左右轮廓点对应过程中,依据双目极线约束确定候选右轮廓点后,计算左轮廓点在左轮廓链中的弧长位置和曲率以及候选右轮廓点在右轮廓链中的弧长位置和曲率,将弧长位置差最小且曲率符号一致的候选点作为初选对应点,并对初选对应点进行从左到右和从右到左双向投影验证。弧长位置差最小使左右轮廓点沿轮廓链的顺序保持一致,避免仅依赖局部灰度造成候选点歧义;曲率符号一致避免将凸起轮廓与凹陷轮廓错误对应;双向投影验证剔除单向匹配中易出现的多对一和交叉对应,从而降低误匹配概率,使后续空间交会得到的三维轮廓点更稳定,设定方向上的尺寸测量值波动减小。