基于AR眼镜的设备维修指导方法、系统及相关设备与流程

技术特征：
1.一种基于ar眼镜的设备维修指导方法，其特征在于，所述方法包括：通过第一目标对象对应的ar眼镜扫描获取待维修设备；获取所述待维修设备对应的静态信息和三维虚拟模型，并通过所述ar眼镜向所述第一目标对象输出所述静态信息和所述三维虚拟模型，其中，所述静态信息包括设备型号、设备种类和设备安全运行限定信息；在接收到所述第一目标对象输入的远程联络指令时，为所述第一目标对象与第二目标对象建立通信通道；获取所述待维修设备对应的动态信息和描述信息，通过所述通信通道向所述第二目标对象传输所述待维修设备对应的静态信息、三维虚拟模型、动态信息和描述信息以触发所述第二目标对象返回目标维修指导方案，其中，所述动态信息包括设备图像和/或设备视频，所述描述信息包括所述第一目标对象输入的用于描述所述待维修设备的故障状态的文本信息和/或语音信息；获取所述第二目标对象通过所述通信通道返回的目标维修指导方案，通过所述ar眼镜向所述第一目标对象输出所述目标维修指导方案以触发所述第一目标对象根据所述目标维修指导方案对所述待维修设备进行维修。2.根据权利要求1所述的基于ar眼镜的设备维修指导方法，其特征在于，在所述获取所述待维修设备对应的静态信息和三维虚拟模型之前，所述方法还包括：将待扫描区域内各个待扫描设备的静态信息录入所述ar眼镜中；通过预设的三维模型处理软件构建各所述待扫描设备的三维可视化模型，分别对各所述三维可视化模型的零部件进行信息标注，并对标注后的所述三维可视化模型进行渲染以获得各所述待扫描设备对应的三维虚拟模型，将各所述三维虚拟模型存入所述ar眼镜中；其中，所述待维修设备是所述待扫描区域内的一个待扫描设备。3.根据权利要求2所述的基于ar眼镜的设备维修指导方法，其特征在于，所述获取所述待维修设备对应的静态信息和三维虚拟模型包括：当所述ar眼镜扫描到所述待维修设备时，采集获取所述待维修设备对应的多张识别图像，将所述多张识别图像输入已训练的设备识别模型并获取所述待维修设备对应的设备型号，其中，所述多张识别图像中各所述识别图像对应的采集角度不同；根据所述设备型号从所述ar眼镜中搜索获所述待维修设备对应的三维可视化模型、设备种类和设备安全运行限定信息。4.根据权利要求1所述的基于ar眼镜的设备维修指导方法，其特征在于，所述在接收到所述第一目标对象输入的远程联络指令时，为所述第一目标对象与第二目标对象建立通信通道，包括：在接收到所述第一目标对象输入的远程联络指令时，根据预设的远程对象库获取各个远程指导对象的在线状态；根据所述设备型号、所述设备种类和所述远程对象的在线状态从所述远程对象库中确定至少一个第二目标对象；为所述第一目标对象与所述第二目标对象建立通信通道。5.根据权利要求1所述的基于ar眼镜的设备维修指导方法，其特征在于，所述方法还包括：
实时获取模型更新指令，根据所述模型更新指令对所述三维虚拟模型进行实时更新并向所述第一目标对象和所述第二目标对象同步显示更新后的三维虚拟模型；其中，所述模型更新指令包括所述第一目标对象和所述第二目标对象输入的模型操作指令，所述模型操作指令包括拆解指令、拖动指令、组合指令和标注指令，所述第一目标对象通过所述ar眼镜以手势控制和/或语音控制的方式输入所述模型操作指令。6.根据权利要求5所述的基于ar眼镜的设备维修指导方法，其特征在于，所述通信通道包括互相独立的设备信息通信通道、指导方案通信通道和模型操作通信通道；所述设备信息通信通道用于传输所述待维修设备对应的静态信息、动态信息和描述信息；所述指导方案通信通道用于传输所述目标维修指导方案；所述模型操作通信通道用于传输所述模型更新指令。7.根据权利要求1所述的基于ar眼镜的设备维修指导方法，其特征在于，所述方法还包括：在所述第一目标对象根据所述目标维修指导方案中的一个目标步骤对所述待维修设备进行维修时，获取所述第一目标对象的维修操作图像，将所述维修操作图像发送给所述第二目标对象和/或已训练的操作判断模型，以触发所述第二目标对象和/或所述已训练的操作判断模型进行误操作判断，其中，所述已训练的操作判断模型用于对所述维修操作图像进行特征识别以获取操作特征，将所述操作特征与所述目标步骤对应的步骤特征进行对比以进行误操作判断；在接收到误操作指示信息时，对所述第一目标对象进行误操作告警提示，并限制所述ar眼镜不再输出所述目标维修指导方案中所述目标步骤之后的步骤，直到所述第一目标对象修正与所述目标步骤对应的误操作；其中，所述误操作指示信息是通过所述已训练的操作判断模型获取的模型判断信息和所述第二目标对象输入的指导对象判断信息中的任意一种。8.根据权利要求7所述的基于ar眼镜的设备维修指导方法，其特征在于，所述方法还包括：在接收到误操作指示信息时，根据所述误操作指示信息获取所述误操作指示信息对应的错误等级，并记录所述目标步骤对应的误操作持续时间；当所述错误等级超过预设的等级阈值或所述误操作持续时间超过预设的时间阈值时，锁定所述第一目标对象的维修操作权限，并向预设的移动设备发送权限锁定告警信息。9.一种基于ar眼镜的设备维修指导系统，其特征在于，所述系统包括：设备扫描模块，用于通过第一目标对象对应的ar眼镜扫描获取待维修设备；信息获取模块，用于获取所述待维修设备对应的静态信息和三维虚拟模型，并通过所述ar眼镜向所述第一目标对象输出所述静态信息和所述三维虚拟模型，其中，所述静态信息包括设备型号、设备种类和设备安全运行限定信息；通信模块，用于在接收到所述第一目标对象输入的远程联络指令时，为所述第一目标对象与第二目标对象建立通信通道；信息处理模块，用于获取所述待维修设备对应的动态信息和描述信息，通过所述通信通道向所述第二目标对象传输所述待维修设备对应的静态信息、三维虚拟模型、动态信息
和描述信息以触发所述第二目标对象返回目标维修指导方案，其中，所述动态信息包括设备图像和/或设备视频，所述描述信息包括所述第一目标对象输入的用于描述所述待维修设备的故障状态的文本信息和/或语音信息；维修指导模块，用于获取所述第二目标对象通过所述通信通道返回的目标维修指导方案，通过所述ar眼镜向所述第一目标对象输出所述目标维修指导方案以触发所述第一目标对象根据所述目标维修指导方案对所述待维修设备进行维修。10.一种智能终端，其特征在于，所述智能终端包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的基于ar眼镜的设备维修指导程序，所述基于ar眼镜的设备维修指导程序被所述处理器执行时实现如权利要求1-8任意一项所述基于ar眼镜的设备维修指导方法的步骤。

技术总结
本发明公开了一种基于AR眼镜的设备维修指导方法、系统及相关设备，方法包括：通过第一目标对象对应的AR眼镜扫描获取待维修设备；获取待维修设备对应的静态信息和三维虚拟模型；在接收到第一目标对象输入的远程联络指令时为第一目标对象与第二目标对象建立通信通道；获取待维修设备对应的动态信息和描述信息，通过通信通道向第二目标对象传输待维修设备对应的静态信息、三维虚拟模型、动态信息和描述信息以触发第二目标对象返回目标维修指导方案；获取目标维修指导方案，通过AR眼镜向第一目标对象输出目标维修指导方案以触发第一目标对象根据目标维修指导方案对待维修设备进行维修。本发明方案有利于提高设备维修的效率和效果。和效果。和效果。


技术研发人员：杨之乐 刘祥飞 饶建波 郭媛君 谭勇 朱俊丞 余发国
受保护的技术使用者：中科航迈数控软件（深圳）有限公司
技术研发日：2022.11.07
技术公布日：2022/12/6