一种基于视觉先验引导的拼接衣物布料分区识别系统的制作方法
本发明涉及衣物布料检测,具体涉及一种基于视觉先验引导的拼接衣物布料分区识别系统。
背景技术:
1、服装智能制造、废旧纺织品自动化回收、衣物分区护理场景、机器人衣物分拣场景中,机器人需要自主识别衣物不同部位面料材质。
2、纯视觉检测方案,仅能够采集面料表层二维光学特征,包括纹理形貌、花色图案、色彩参数、表面疵点等。检测效果极易受环境光照、面料印花工艺、后整理涂层、磨毛、压皱等工艺干扰,存在极强的场景局限性。针对外观高度相似,但基材成分、物理手感、力学性能完全不同的纺织面料(如涤纶仿真丝与天然真丝、纯棉面料与涤棉混纺面料、普通针织面料与高弹针织面料),无法实现有效区分,存在识别准确率低、算法鲁棒性差、误识别率高的技术问题。
3、纯触觉检测方案,在布料识别中,触觉传感器按压点由固定栅格或随机生成,同一区块重复按压、跨缝按压,单件衣服采样20~40次才能覆盖,准确性差,耗时长。
4、因此,如何实现拼接衣物面料的高效精确检测,是目前需要解决的问题。
技术实现思路
1、本发明的目的是提出一种基于视觉先验引导的拼接衣物布料分区识别系统,可以解决拼接衣物面料检测时,准确性不高,效率低的问题。
2、为了实现上述目的,本发明提供了一种基于视觉先验引导的拼接衣物布料分区识别系统,包括:
3、视觉采集单元,用于获取拼接衣物的全局视觉图像;
4、处理模块,用于对所述全局视觉图像执行视觉区域分割,所述视觉区域分割以拼接衣物中不同布料之间的拼接缝作为分隔边界,生成多个独立分割区域;依据所述独立分割区域的边界轮廓,对每一个分割区域确定触觉采样点,并将采样点像素坐标转换为机械臂空间采样坐标;
5、运动执行单元,用于根据所述机械臂空间采样坐标,带动触觉感知单元移动至各分区的采样点位置;
6、触觉感知单元,安装于所述运动执行单元末端,用于在各分区内定点采集织物触觉图像;
7、分析模块,用于对每个分区采集的触觉图像独立进行布料材质识别;建立材质识别结果与对应视觉分割区域的映射关系,输出携带空间位置信息的衣物布料分区识别结果。
8、可选方案中,每一个独立分割区域至少设置一个采样点,且所述采样点规划在远离拼接缝的区域内。
9、可选方案中,所述处理模块配置为对所述全局视觉图像执行两级级联分割:先执行第一级语义区域分割,输出各语义部位的实例级掩码及对应边界框;再将所述边界框及实例级掩码作为提示输入第二级提示驱动型分割模型,输出精细化掩码;并基于所述精细化掩码解析得到各独立区域的区域重心及边界轮廓。
10、可选方案中,所述边界轮廓的获得方法为:对每个精细化掩码,统计前景像素总数得到区域像素面积,剔除像素面积小于预设阈值的噪声区域;针对保留的有效区域,基于全部前景像素坐标计算区域像素重心作为候选触觉采样像素坐标;检测掩码前景与背景交界处的外轮廓曲线,得到表征边界位置的轮廓点集。
11、可选方案中,所述触觉感知单元为视触觉触觉传感器,所述织物触觉图像为凝胶受压形变后经光度立体重建得到的织物表面微观高度场图像。
12、可选方案中,所述识别结果表现形式为:
13、可视化分区图谱:在原始衣物图像上使用不同颜色标注每个拼接区域及其对应的面料名称;和/或,
14、结构化数据:包含各分区的区域标识、像素坐标或运动执行单元空间坐标、包围框尺寸、边界轮廓点集、材质类别标签中的至少一项;
15、所述结构化数据用于对接下游分拣机器人或智能缝制生产线控制系统。
16、可选方案中,所述识别系统还包括复核模块;当相邻区域的触觉识别结果高度相似时,所述复核模块在相邻区域交界处补充新的采样点,以使所述触觉感知单元进行补充采样复核。
17、可选方案中,同一分区的采用点为多个,所述分析模块对采集的多条触觉样本进行投票判定面料材质。
18、可选方案中,所述运动执行单元为多自由度机械臂,或为带动衣物移动至触觉感知单元下方的传送平台。
19、本发明的有益效果在于:本发明采用视觉先验分区、触觉随动定点采样的串行引导架构;输出成衣各拼接区域独立面料类别,实现拼接衣物面料高精度、自动化的在线识别检测,满足服装分拣、智能裁剪、面料溯源、废旧纺织品自动化回收、衣物精细护理等工程需求。
1.一种基于视觉先验引导的拼接衣物布料分区识别系统,其特征在于,包括:
2.如权利要求1所述的基于视觉先验引导的拼接衣物布料分区识别系统,其特征在于,每一个独立分割区域至少设置一个采样点,且所述采样点规划在远离拼接缝的区域内。
3.如权利要求1所述的基于视觉先验引导的拼接衣物布料分区识别系统,其特征在于,所述处理模块配置为对所述全局视觉图像执行两级级联分割:先执行第一级语义区域分割,输出各语义部位的实例级掩码及对应边界框;再将所述边界框及实例级掩码作为提示输入第二级提示驱动型分割模型,输出精细化掩码;并基于所述精细化掩码解析得到各独立区域的区域重心及边界轮廓。
4.如权利要求3所述的基于视觉先验引导的拼接衣物布料分区识别系统,其特征在于,所述边界轮廓的获得方法为:
5.如权利要求1所述的基于视觉先验引导的拼接衣物布料分区识别系统,其特征在于,所述触觉感知单元为视触觉触觉传感器,所述织物触觉图像为凝胶受压形变后经光度立体重建得到的织物表面微观高度场图像。
6.如权利要求1所述的基于视觉先验引导的拼接衣物布料分区识别系统,其特征在于,所述识别结果表现形式为:
7.如权利要求1所述的基于视觉先验引导的拼接衣物布料分区识别系统,其特征在于,所述识别系统还包括复核模块;当相邻区域的触觉识别结果高度相似时,所述复核模块在相邻区域交界处补充新的采样点,以使所述触觉感知单元进行补充采样复核。
8.如权利要求1所述的基于视觉先验引导的拼接衣物布料分区识别系统,其特征在于,同一分区的采用点为多个,所述分析模块对采集的多条触觉样本进行投票判定面料材质。
9.如权利要求1所述的基于视觉先验引导的拼接衣物布料分区识别系统,其特征在于,所述运动执行单元为多自由度机械臂,或为带动衣物移动至触觉感知单元下方的传送平台。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com