一种基于视觉校准的数字孪生模型更新方法与流程
本发明涉及数字孪生及孪生建模,具体为一种基于视觉校准的数字孪生模型更新方法。
背景技术:
1、随着工业装备数字化管理、虚拟仿真及状态运维技术的发展,数字孪生模型逐渐应用于自动化装配装备、工业搬运装备、加工装备、检测装备、包装装备及输送装备的结构表达、工况仿真和模型参数管理。对于具有固定支承构件、承载构件、活动连接构件和导向构件的工业装备,现有孪生建模通常根据设备设计模型、装配关系、控制记录和工业相机采集图像建立实体装备与虚拟模型之间的对应关系,并依据构件位置变化、载荷变化、关节运动或导向运动对数字孪生模型进行校准或更新,从而使数字孪生模型能够反映工业装备的当前结构状态和运行状态。
2、工业装备在运行过程中产生的虚实差异可能分别来源于可恢复工况形变、永久结构偏移、构件安装位姿变化、关节参数变化、导向参数变化或相机标定参数漂移。现有数字孪生更新方案已能够利用多源数据对模型进行配准、校准或参数更新,但在同一视觉差异可能由多种结构参数或运动参数共同引起时,仍较难综合利用空载基准、加载、保持、卸载和卸载完成阶段及多个工作周期之间的响应关系区分变化成因;当相近变化成因在现有校准方位下表现接近时,部分现有方案仍可能缺少根据候选模型预测差异主动确定补充校准方位,并在参数分层写入后通过完整工况周期验证减少误更新和重复修正的处理机制。
技术实现思路
1、本发明的目的在于提供一种基于视觉校准的数字孪生模型更新方法,以解决上述背景技术中提出的问题。
2、为实现上述目的,本发明提供如下技术方案:
3、一种基于视觉校准的数字孪生模型更新方法,具体步骤包括:
4、s1、获取目标工业装备的初始数字孪生模型、装配拓扑数据、工况数据、实体工况视觉序列和相机拍摄参数,形成设备孪生建模基础数据集;
5、s2、根据载荷传递、活动连接和导向运动特征,将应用场景确定为承载变形场景、关节传动场景、导向往复场景或复合装配场景,划分稳定基准区域、载荷响应区域、关节约束区域和导向接触区域,针对承载变形场景建立基础结构孪生模型和工况形变孪生子模型,针对关节传动场景建立关节参数孪生模型,针对导向往复场景建立导向参数孪生模型,并通过装配拓扑图关联所述基础结构孪生模型、工况形变孪生子模型、关节参数孪生模型和导向参数孪生模型;
6、s3、根据各工况阶段对应的工作载荷、回转角位置和移动工作台行程位置,驱动初始数字孪生模型转换至对应工况状态,利用初始相机内参数矩阵、初始相机旋转矩阵和初始相机平移向量生成孪生工况参考视觉序列,从实体工况视觉序列中筛选稳定校准锚点和有效实体工况视觉序列,建立临时空间配准关系并完成工况阶段对齐,将实体视觉图像与对应孪生工况参考图像之间存在边界差异、位置差异或运动轨迹差异,且变化原因未能根据模型区域类别直接确定的区域映射至初始数字孪生模型,形成待判定更新区域;
7、s4、获取待判定更新区域在空载基准阶段、加载阶段、保持阶段、卸载阶段和卸载完成阶段以及不同工作周期下的虚实阶段残差,根据保持阶段相对于空载基准阶段的加载响应、保持阶段至卸载完成阶段的残差消减、卸载完成阶段相对于空载基准阶段的卸载残留和跨周期重复结果,并结合换向空程、往返位置差和相机姿态修正记录确定变化类别;
8、s5、根据变化类别建立至少两个候选孪生模型分支,使每个候选孪生模型分支仅允许修改与对应变化成因相对应的模型参数,并保持其他模型参数不变;
9、s6、控制各候选孪生模型分支执行跨工况虚拟重演,根据虚实投影一致指数、工况阶段响应系数、跨周期复现系数、装配约束保持系数和残差解释指数计算分支验证指数,并按照分支验证指数比较同一待判定更新区域对应的候选孪生模型分支;
10、s7、按照分支验证指数由高至低将排序第一和排序第二的候选孪生模型分支分别确定为第一候选孪生模型分支和第二候选孪生模型分支;当第一候选孪生模型分支的分支验证指数低于分支确认阈值时,重新建立候选孪生模型分支,无法建立其他候选孪生模型分支时转入人工复核;当第一候选孪生模型分支的分支验证指数不低于分支确认阈值,且与第二候选孪生模型分支的分支验证指数差值不低于分支区分阈值时,将第一候选孪生模型分支确定为目标孪生模型分支;当第一候选孪生模型分支的分支验证指数不低于分支确认阈值,且所述差值低于分支区分阈值时,根据不同候选补充校准方位下的分支预测差异系数、更新区域可见系数、基准共同可见系数和遮挡反向系数计算补充方位判别指数;当最大补充方位判别指数不低于补充校准允许阈值时,确定判别性补充校准方位,获取补充实体图像,重新计算待区分的各候选孪生模型分支的分支验证指数并重新排序;当最大补充方位判别指数低于补充校准允许阈值,或者重新排序后的第一候选孪生模型分支的分支验证指数低于分支确认阈值,或者重新排序后的第一候选孪生模型分支与第二候选孪生模型分支的分支验证指数差值低于分支区分阈值时,不执行自动模型参数写入并转入人工复核;
11、s8、将步骤s7中直接确定的第一候选孪生模型分支,或者判别性补充校准后重新排序且分支验证指数不低于分支确认阈值、与第二候选孪生模型分支的分支验证指数差值不低于分支区分阈值的第一候选孪生模型分支,确定为目标孪生模型分支;按照目标孪生模型分支允许修改的模型参数和模型参数写入比例更新初始数字孪生模型,当存在多个目标孪生模型分支时,依次更新相机标定参数、关节参数和导向参数、构件安装位姿及基础结构参数,最后更新工况形变孪生子模型,并在每完成一类模型参数更新后重新生成孪生工况参考视觉序列和计算剩余虚实阶段残差;控制更新后的数字孪生模型执行完整工况周期虚拟重演并计算模型更新验证指数,将通过验证的更新后数字孪生模型确定为目标数字孪生模型,形成孪生模型更新记录并保存模型版本。
12、与现有技术相比,本发明的有益效果是:
13、本发明根据工业装备的载荷传递、活动连接和导向运动特征,将应用场景划分为承载变形场景、关节传动场景、导向往复场景或复合装配场景,并建立基础结构孪生模型、工况形变孪生子模型、关节参数孪生模型和导向参数孪生模型,使不同类型的实体变化能够分别对应至具有明确物理含义的孪生模型层级,避免将工作载荷作用下的可恢复结构响应写入基础结构孪生模型,也避免将关节参数变化、导向参数变化和相机标定参数漂移统一处理为设备构件的几何变化,提高了工业装备孪生建模的层级清晰性和模型参数可解释性。
14、本发明根据候选校准特征点的历史位置重复系数、理论基准匹配系数、跨方位重复系数和投影残差反向系数筛选稳定校准锚点,并根据工况阶段覆盖系数、区域可见系数、锚点布局系数和干扰反向系数筛选有效实体工况视觉序列,仅采用稳定基准区域中的稳定校准锚点建立临时空间配准关系,能够在消除工业相机正常拍摄位置差异的同时,保留载荷响应、卸载残留、关节换向和导向往返产生的真实虚实阶段残差,为后续确定变化类别提供可靠的视觉校准基础。
15、本发明通过加载响应系数、卸载恢复系数、卸载残留指数和跨周期重复系数区分可恢复工况形变与永久结构偏移,并结合换向空程、往返位置差、非共线特征点之间的相对位置及相机姿态修正记录,确定构件安装位姿变化、关节参数变化、导向参数变化及相机标定参数漂移,使不同变化成因能够对应至参数修改范围相互分离的候选孪生模型分支。
16、本发明控制候选孪生模型分支执行跨工况虚拟重演,通过虚实投影一致指数、工况阶段响应系数、跨周期复现系数、装配约束保持系数和残差解释指数计算分支验证指数,不以单幅图像中的局部残差最小作为模型分支选择依据,当第一候选孪生模型分支和第二候选孪生模型分支不能区分时,根据分支预测差异系数、更新区域可见系数、基准共同可见系数和遮挡反向系数确定判别性补充校准方位,从而获取能够区分相近变化成因的补充实体图像,降低目标孪生模型分支的误判风险。
17、本发明在候选分支不能充分解释实体变化时重新建立分支或者转入人工复核,仅对达到分支确认条件的目标孪生模型分支执行分级参数写入,并在多类参数更新时按照相机标定参数、运动参数、安装位姿及基础结构参数、工况形变参数的顺序逐类写入和重新计算剩余虚实阶段残差;更新后通过完整工况周期进行验证,未通过验证时按照装配约束、补充校准确认、周期响应复现和残差消减的顺序择一执行反馈调整或者撤销更新,从而减少未经确认的参数写入及同一虚实差异的重复修正。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com