面向异构机器人的人像素描系统及其控制方法与流程

摘要: 本发明涉及机器人视觉与运动控制,更具体地说,本发明涉及面向异构机器人的人像素描系统及其控制方法。背景技术:1、机器人绘图通常将相机采集的人像经过前景分离、灰度化...
面向异构机器人的人像素描系统及其控制方法与流程

本发明涉及机器人视觉与运动控制,更具体地说,本发明涉及面向异构机器人的人像素描系统及其控制方法。

背景技术:

1、机器人绘图通常将相机采集的人像经过前景分离、灰度化、二值化或轮廓提取,转换为平面轨迹,再由机械臂或绘图机构夹持画笔在画板上执行。该路线已经能够实现人像采集、线稿生成、轨迹规划和自动绘制,也可通过近红外成像、面部区域处理或绘制过程视觉反馈改善光照适应性和成像稳定性。

2、然而,现有技术中面向异构机器人的人像素描系统在实际应用过程中还存在以下技术缺陷:

3、不同机器人在运动自由度、连续轨迹能力、最小稳定位移、速度和加速度约束、抬落笔执行方式、命令缓冲及状态返回语义方面并不相同,仅以统一接口转发同一坐标序列,只能屏蔽调用形式,不能保证同一笔画在异构机器人上的可执行性和几何一致性;

4、现有的人像线稿通常直接转换为特定机器人的坐标点或线段,图像侧的眼眉鼻口等语义关系在轨迹转换后丢失,当路径为适应设备能力而被简化、重采样或反向执行时,控制侧无法区分应优先保持的五官结构与可压缩的普通阴影线,容易在时间或运动约束下破坏人脸辨识度;

5、现有反馈修正多将已绘制图像与目标图像进行整体匹配,再统一调整后续轨迹,未建立实际笔画、设备命令和原始语义笔画之间的可追溯关系,不同原语、方向、工作空间分区以及抬落笔动作造成的误差被混合,修正结果不能反向更新机器人能力边界,且可能改动已经执行部分对应的整体轨迹,引发接缝、重复绘制或误差累积。

6、为此,推出面向异构机器人的人像素描系统及其控制方法。

技术实现思路

1、为了克服现有技术的上述缺陷,本发明的实施例提供面向异构机器人的人像素描系统及其控制方法。

2、为实现上述目的,本发明提供如下技术方案:

3、一种面向异构机器人的人像素描系统,包括图像采集模块、异构机器人接入模块、可执行编译模块、绘制执行模块、执行观测模块和增量重编译模块。

4、图像采集模块用于采集待绘制人像,对待绘制人像进行前景分离、人脸关键点定位和线条提取,形成包含多个语义笔画节点的语义笔画图;每一语义笔画节点关联几何轨迹、面部区域标签、笔画连通关系和保真优先级。由此,图像侧的面部结构信息不会在轨迹转换阶段退化为无差别坐标点。

5、异构机器人接入模块通过目标机器人适配器获取运动能力参数、绘制工具响应参数、通信执行参数和工作空间变换参数,形成能力画像。能力画像描述当前设备与绘制配置的实际可执行边界。缺失参数区分为必须先配置的安全及协议参数和可通过试画测量的性能参数;前者未确认时禁止运动,后者在安全前提成立后通过探测试画取得。

6、可执行编译模块在面部区域标签和笔画连通关系限定的保真约束下,依据能力画像对语义笔画图进行笔画分割、合并、重采样、方向选择和执行排序,生成设备命令图以及语义笔画节点与设备命令之间的双向来源映射。

7、绘制执行模块经适配器下发设备命令并接收归一化命令状态。

8、执行观测模块采集探测试画和人像素描形成的实际笔画,依据双向来源映射将实际笔画与对应来源区间匹配,得到按运动原语、方向、分区及测试速度档归属的几何、笔态和通信执行残差。

9、增量重编译模块依据有效残差和置信度形成更新,在暂停下发并核对设备队列后,锁定已确认执行区间,仅重编译已证实未执行子图;状态不确定的旧命令不重新下发,旧队列排空或相关旧命令取消确认后才切换新版本。

10、具体的,能力画像的参数组织逻辑;运动能力参数包括可达工作空间、支持的运动原语、最小稳定位移、允许曲率、速度范围和加速度范围;绘制工具响应参数包括抬笔响应时延、落笔响应时延、落笔超调量和工具接触状态的可反馈性;通信执行参数包括命令缓冲容量、命令确认语义、状态返回周期和超时条件;工作空间变换参数用于将语义笔画坐标变换至机器人绘制坐标系。

11、具体的,语义笔画图的构建逻辑;按固定人脸关键点索引和人物及头发掩膜确定区域,在各区域内按灰度直方图类间方差最大规则计算二值化阈值,经细化及骨架跟踪形成节点。优先级由关键点距离项、连通及闭环贡献项和灰度对比度项形成,必须保持的五官连接优先级置1并作为硬约束;同一图像调整阈值时保持已确认索引,更换图像或姿态改变时重新定位。

12、具体的,可执行代价的确定逻辑;生成有限的方向、分段、合并、重采样及已验证速度候选,对完整路径的可达性、曲率、动态限制、稳定步长、几何容差、关键点连接及逐批缓冲容量进行筛选。以固定任务基准归一化预期几何偏差、抬笔空行程时间、运动学风险和语义保真损失,再按非负且和为1的权重加权;关键连接或不可中断关系改变时直接淘汰,不通过加权损失放行。

13、具体的,探测试画的生成逻辑;在已确认的安全工作空间及协议条件内,按分区、原语、方向和速度档进行不同长度短线、不同转折或曲率及抬落笔组合测试。相机与画板、画板与机器人分别标定;按重复测试的误差和稳定性取得稳定步长及允许曲率,在执行相位已知或同步接触观测成立时取得笔态时延,不能识别时使用经验证的停止等待模式或暂停。

14、具体的,执行残差的归因逻辑;可靠确认批次完成后,对批前、批后画板图像配准并提取新增墨迹,依据双向来源映射进行唯一匹配,剔除遮挡及歧义样本。按原语、方向、分区和速度档统计有符号几何残差、笔态残差及同语义通信耗时相对基准的残差;以有效比例、配准误差、遮挡比例和离散程度的最小质量项形成置信度。连续参数仅在门控和复验通过后发布,安全放行边界按重新测试结果保守调整,置信度不足、笔态失效或通信异常时暂停。

15、具体的,未执行子图的重编译逻辑;暂停下发并核对设备队列后,锁定已确认执行的命令及来源区间,部分执行节点仅在进度和实际端点唯一对应时切分。新版本保持边界接缝、允许方向、笔态及不可中断约束,旧队列排空或相关旧命令取消确认后才切换下发。无安全可执行解则保留子图并暂停;仅在控制器允许运动且安全路径通过时抬笔移动,急停期间保持安全停止。

16、本发明的技术效果和优点:

17、本发明通过设备无关语义笔画图、机器人能力画像和受约束编译的组合,将人像的面部拓扑要求与目标机器人的运动学、笔态及通信边界共同纳入命令生成;统一接口不再只做协议转发,而是参与可执行性判断和轨迹变换,使同一人像任务能够针对不同结构和控制语义的机器人形成相应设备命令,降低静态坐标序列跨设备迁移时的越界、断笔和局部失真;

18、本发明通过双向来源映射把实际笔画追溯到设备命令和语义笔画节点,并按原语类型、方向及工作空间分区归因执行残差;由此可区分坐标变换误差、局部运动能力不足、笔态响应延迟和通信确认差异,使反馈不仅修正图像位置,还能够更新后续编译所依据的能力画像。若省略该映射,残差只能整体作用于后续轨迹,难以避免对无关笔画的过度补偿;

19、本发明锁定已执行命令并保持边界节点连续,仅重编译未执行子图;这使新取得的执行残差能够作用于后续绘制而不改变纸面上已经形成的笔画,同时借助面部区域保真优先级在设备能力或时间受限时优先保持眼眉鼻口结构,减少重复绘制、接缝偏移和误差累积。