一种服装裁片送料位置的视觉反馈控制方法及系统与流程

摘要: 本发明涉及图像处理,尤其涉及一种服装裁片送料位置的视觉反馈控制方法及系统。背景技术:1、目前,在服装裁片自动化送料系统中,广泛采用工业相机从送料台正上方采集灰度...
一种服装裁片送料位置的视觉反馈控制方法及系统与流程

本发明涉及图像处理,尤其涉及一种服装裁片送料位置的视觉反馈控制方法及系统。

背景技术:

1、目前,在服装裁片自动化送料系统中,广泛采用工业相机从送料台正上方采集灰度图像,通过机器视觉算法识别裁片位置与姿态,并驱动送料机构完成纠偏。为了从图像中提取裁片轮廓,现有技术通常采用canny、sobel等梯度边缘检测算子,并结合直方图均衡化或基于retinex理论的图像增强方法缓解光照不均匀问题。同时,针对传送带表面固有的编织纹理干扰,部分方案引入了固定参数的陷波滤波器,在频域中对纹理对应的主频及谐波分量进行抑制,以期获得较为干净的裁片目标区域。然而,上述处理路径在面对多裁片堆叠送料的复杂场景时,仍存在明显的局限性。

2、例如,在多块裁片部分堆叠的情况下,由于裁片厚度通常较薄,堆叠交界处仅在一定的侧向光照条件下形成微弱的暗带阴影。常规的梯度算子对这类强度渐变且宽度有限的阴影特征不敏感,难以可靠地区分堆叠边界与裁片自身的织物图案或印花。当裁片具有高对比度的纹理或下层裁片的边缘恰好与上层堆叠边缘相交错时,现有边缘检测算法极易将下层裁片的边缘误判为当前待送裁片的边界,导致提取的轮廓发生错误附着。同时,传送带的编织纹理在成像后表现为一系列规则条纹,在频谱上呈现多个谐波峰值;固定参数的陷波滤波器若带宽设置过窄,无法有效覆盖因传送带速度波动或织物拉伸造成的频率漂移,导致纹理残留形成伪边缘;若带宽设置过宽,则又容易同时滤除裁片边缘处的高频细节,造成轮廓断裂或缺失。这些问题在光源方向与纹理方向平行或垂直时表现得尤为突出,最终使得后续送料纠偏所依赖的位置基准出现严重偏差,导致送料机构动作失准。

3、因此,亟需一种在多裁片堆叠、光照不均且传送带纹理干扰的复杂条件下,能够稳定地从单帧灰度图像中精准分离并提取最上层裁片完整闭合外轮廓的视觉反馈控制方法,以克服传统边缘检测在堆叠交界处易产生断裂或误检的缺陷,为送料纠偏提供可靠的位置参考,从而显著提高轮廓提取的鲁棒性和送料系统的整体可靠性。

技术实现思路

1、针对上述存在的技术不足,本发明的目的是提出一种服装裁片送料位置的视觉反馈控制方法,旨在解决现有技术中依赖边缘检测从灰度图像提取裁片轮廓时,尤其在多裁片堆叠、光照不均且纹理复杂条件下,无法可靠区分堆叠边界与裁片自身图案导致送料偏差的技术问题。

2、为解决上述技术问题,本发明采用如下技术方案:本发明提供一种服装裁片送料位置的视觉反馈控制方法。

3、所述一种服装裁片送料位置的视觉反馈控制方法包括:

4、步骤s10:获取送料区域的当前帧灰度图像,基于所述当前帧灰度图像采用引导滤波多尺度retinex处理机制执行光照校正任务,输出校正图像;

5、步骤s20:基于所述校正图像采用自适应超高斯频谱陷波处理机制执行传送带纹理抑制任务,输出滤波后图像;

6、步骤s30:基于所述滤波后图像采用定向暗带阴影扫描机制执行堆叠边缘概率生成任务,输出堆叠边缘概率图;

7、步骤s40:基于所述堆叠边缘概率图采用相场主动轮廓演化机制执行最上层裁片轮廓提取任务,输出闭合外轮廓;

8、步骤s50:根据所述闭合外轮廓解算裁片位姿偏差,基于所述裁片位姿偏差采用多模态模糊pid控制机制执行送料纠偏控制任务,输出位姿纠偏控制指令。

9、优选地,步骤s10中,获取送料区域的当前帧灰度图像,基于所述当前帧灰度图像采用引导滤波多尺度retinex处理机制执行光照校正任务,输出校正图像的步骤,具体包括:

10、步骤s101:将所述当前帧灰度图像表示为反射分量与光照分量的乘积,将所述当前帧灰度图像作为引导图,并设置引导滤波的边缘保持正则化系数;

11、步骤s102:分别采用细尺度引导滤波核、中尺度引导滤波核和粗尺度引导滤波核对所述当前帧灰度图像进行滤波,得到细尺度光照估计、中尺度光照估计和粗尺度光照估计,其中,所述细尺度引导滤波核、中尺度引导滤波核和粗尺度引导滤波核的滤波半径依次增大,各尺度对应的尺度融合权重相等;

12、步骤s103:分别对所述当前帧灰度图像、所述细尺度光照估计、所述中尺度光照估计和所述粗尺度光照估计进行正数下限约束和对数变换,分别计算所述当前帧灰度图像的对数值与各尺度光照估计的对数值之间的差值,对各尺度对应的差值进行等权融合和灰度归一化,得到保留裁片堆叠阴影细节的所述校正图像。

13、优选地,步骤s20中,基于所述校正图像采用自适应超高斯频谱陷波处理机制执行传送带纹理抑制任务,输出滤波后图像的步骤,具体包括:

14、步骤s201:对所述校正图像执行二维离散傅里叶变换,得到包括幅度谱和相位谱的频谱数据,其中,为横向频率坐标,为纵向频率坐标;

15、步骤s202:在所述幅度谱中,以前一帧确定的传送带纹理基频位置为搜索中心建立搜索窗口,在所述搜索窗口内确定当前帧传送带纹理基频位置,并根据所述当前帧传送带纹理基频位置确定二次谐频位置,其中,对于首帧,以预设初始基频位置作为所述搜索中心,所述搜索窗口的半径根据预先标定的传送带纹理基频最大漂移速率确定;

16、步骤s203:根据所述当前帧传送带纹理基频位置和所述二次谐频位置构建超高斯剖面陷波滤波器组,采用所述超高斯剖面陷波滤波器组对所述幅度谱进行陷波处理,将陷波后的幅度谱与所述相位谱进行组合,并执行二维离散傅里叶逆变换,得到所述滤波后图像;

17、其中,所述陷波后的幅度谱按照下式确定:

18、

19、式中,为陷波后的幅度谱;为陷波前的幅度谱;为所述当前帧传送带纹理基频位置;为谐频序号,取值为1或2;为根据传送带纹理频谱展宽预先标定的频率带宽参数;为大于1的超高斯阶次。

20、优选地,步骤s202中,在所述幅度谱中建立搜索窗口并确定所述当前帧传送带纹理基频位置的步骤,具体包括:

21、获取预先标定的传送带纹理基频最大漂移速率和相邻两帧灰度图像的采集时间间隔,将所述传送带纹理基频最大漂移速率与所述采集时间间隔的乘积进行向上取整,得到搜索半径;

22、以所述搜索中心为圆心并以所述搜索半径为半径,在所述幅度谱中建立圆形的所述搜索窗口;

23、分别计算所述搜索窗口内各候选频率单元在预设径向邻域内的局部频谱能量,将局部频谱能量最大的候选频率单元确定为所述当前帧传送带纹理基频位置;

24、将所述幅度谱的频谱中心与所述当前帧传送带纹理基频位置之间的距离确定为基频径向距离,确定从所述频谱中心指向所述当前帧传送带纹理基频位置的径向方向,并将所述径向方向上与所述频谱中心之间的距离为所述基频径向距离二倍的频率单元确定为所述二次谐频位置。

25、优选地,步骤s30中,基于所述滤波后图像采用定向暗带阴影扫描机制执行堆叠边缘概率生成任务,输出堆叠边缘概率图的步骤,具体包括:

26、步骤s301:获取预先标定的裁片物理厚度、相机空间分辨率、光线相对于送料平面法线的偏转角和光线在送料平面上的投影方位角,根据当前像素位置的局部边缘法向角建立理想阴影宽度模型,所述理想阴影宽度模型为:

27、

28、式中,为以像素数量表示的理想阴影宽度;为裁片物理厚度;为单位像素对应的实际长度;为光线相对于送料平面法线的偏转角;为光线在送料平面上的投影方位角;为当前像素位置的局部边缘法向与图像横向坐标轴之间的夹角;为用于限定余弦项分母下限的预设正数;

29、步骤s302:沿与所述光线在送料平面上的投影方向平行的扫描方向,对所述滤波后图像执行定向暗带扫描,确定各像素位置对应的实测阴影宽度和归一化阴影对比度,其中,为像素行坐标,为像素列坐标;

30、步骤s303:计算所述实测阴影宽度与所述理想阴影宽度之间的差值,得到阴影宽度偏差;当所述阴影宽度偏差的绝对值不大于预设阴影宽度允许偏差,且所述归一化阴影对比度不小于预设阴影对比度最低阈值时,按照下式计算各像素位置对应的堆叠边缘概率:

31、

32、式中,为像素位置对应的阴影宽度偏差;为像素位置对应的堆叠边缘概率;为预先标定的阴影宽度匹配标准差;

33、当所述阴影宽度偏差的绝对值大于预设阴影宽度允许偏差,或者所述归一化阴影对比度小于预设阴影对比度最低阈值时,将所述堆叠边缘概率设置为零,并根据各像素位置对应的所述堆叠边缘概率生成所述堆叠边缘概率图。

34、优选地,步骤s40中,基于所述堆叠边缘概率图采用相场主动轮廓演化机制执行最上层裁片轮廓提取任务,输出闭合外轮廓的步骤,具体包括:

35、步骤s401:将所述堆叠边缘概率图转换为连续概率场,将所述连续概率场作为边缘约束项,并从所述滤波后图像中提取灰度梯度幅值,将所述灰度梯度幅值作为辅助约束项,结合用于保持轮廓连续性的相场平滑正则项,构建以相场函数为待优化变量的相场主动轮廓能量泛函;

36、步骤s402:以所述滤波后图像的几何中心为圆心并以预设初始半径建立圆形初始零水平集,对所述相场主动轮廓能量泛函进行变分求导,沿使所述相场主动轮廓能量减小的方向迭代更新所述相场函数;

37、步骤s403:计算相邻两次迭代得到的相场函数之间的差值范数,当所述差值范数小于预设相场收敛阈值时停止更新所述相场函数,从收敛后的相场函数中提取最外侧闭合零水平集,并将所述最外侧闭合零水平集确定为所述最上层裁片的闭合外轮廓。

38、优选地,步骤s50中,根据所述闭合外轮廓解算裁片位姿偏差,基于所述裁片位姿偏差采用多模态模糊pid控制机制执行送料纠偏控制任务,输出位姿纠偏控制指令的步骤,具体包括:

39、步骤s501:计算当前帧对应的所述闭合外轮廓的质心坐标和主轴方向角,将所述质心坐标和所述主轴方向角与预设基准位姿进行比较,得到横向平移偏差、纵向平移偏差和旋转角度偏差;

40、步骤s502:获取前一帧对应的闭合外轮廓,计算所述堆叠边缘概率图中位于当前帧对应的所述闭合外轮廓上的堆叠边缘概率平均值,将所述堆叠边缘概率平均值确定为全局阴影质量评分;计算当前帧对应的所述闭合外轮廓与前一帧对应的所述闭合外轮廓之间的对称hausdorff距离,根据预先标定的轮廓帧间位移容差对所述全局阴影质量评分进行指数衰减处理,得到轮廓锁定置信度,其中,对于首帧,将所述全局阴影质量评分确定为所述轮廓锁定置信度;

41、步骤s503:根据相邻帧对应的所述横向平移偏差、所述纵向平移偏差和所述旋转角度偏差,分别确定横向偏差变化率、纵向偏差变化率和角度偏差变化率,将各位姿偏差及其对应的偏差变化率作为模糊控制输入,并根据所述轮廓锁定置信度和所述全局阴影质量评分,在快速接近模式、精密锁定模式和抗干扰保持模式之间切换,通过预设模糊规则库在线调整比例增益、积分增益和微分增益,生成所述位姿纠偏控制指令。

42、本发明还提供一种服装裁片送料位置的视觉反馈控制系统,所述视觉反馈控制系统包括:

43、光照校正模块,用于获取送料区域的当前帧灰度图像,基于所述当前帧灰度图像采用引导滤波多尺度retinex处理机制执行光照校正任务,输出校正图像;

44、纹理抑制模块,用于基于所述校正图像采用自适应超高斯频谱陷波处理机制执行传送带纹理抑制任务,输出滤波后图像;

45、边缘概率生成模块,用于基于所述滤波后图像采用定向暗带阴影扫描机制执行堆叠边缘概率生成任务,输出堆叠边缘概率图;

46、轮廓提取模块,用于基于所述堆叠边缘概率图采用相场主动轮廓演化机制执行最上层裁片轮廓提取任务,输出闭合外轮廓;

47、送料纠偏控制模块,用于根据所述闭合外轮廓解算裁片位姿偏差,基于所述裁片位姿偏差采用多模态模糊pid控制机制执行送料纠偏控制任务,输出位姿纠偏控制指令。

48、本发明还提供一种服装裁片送料位置的视觉反馈控制设备,所述服装裁片送料位置的视觉反馈控制设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的服装裁片送料位置的视觉反馈控制程序,所述服装裁片送料位置的视觉反馈控制程序被所述处理器执行时实现上述方法。

49、本发明还提供一种计算机程序产品,所述计算机程序产品包括服装裁片送料位置的视觉反馈控制程序,所述服装裁片送料位置的视觉反馈控制程序被处理器执行时实现上述方法。

50、本发明的有益效果在于:

51、本发明通过引导滤波多尺度retinex处理校正送料图像中的非均匀光照,并利用自适应超高斯频谱陷波抑制服装裁片表面的周期性纹理干扰,能够在保留裁片真实边缘信息的同时减少光照明暗变化、织物纹理及印花图案对后续轮廓识别的影响,为裁片位置检测提供稳定的图像基础。

52、本发明通过定向暗带阴影扫描生成堆叠边缘概率图,并结合相场主动轮廓处理获得裁片的闭合外轮廓,使边缘提取过程能够综合不同方向上的边缘响应,降低褶皱阴影、局部遮挡及纹理边缘造成的断裂和误连接,从而提高复杂送料工况下裁片轮廓定位的完整性与可靠性。

53、本发明根据闭合外轮廓求解裁片的位姿偏差,并通过多模态模糊pid控制生成位姿纠偏指令,将图像检测结果直接转化为送料机构的闭环调节依据,使控制参数能够随偏差状态进行适应性调整,减少固定控制参数引起的响应迟滞、过度纠偏及往复振荡,提高裁片到达后续加工位置时的位置一致性和送料稳定性。