一种基于增强现实的产品交互与故障诊断方法与流程

技术特征：
1.一种基于增强现实的产品交互与故障诊断方法，其特征在于：它包括如下步骤：第一步，建立以让用户即能观看到现实场景又能观看到虚拟信息的智能穿戴设备为载体的交互平台；所述的交互平台连接有摄像头、麦克风、传声装置、温度传感器、探伤传感器、测距传感器和其他探测产品状态的功能传感器；所述的交互平台上配备有安全预警系统，用于检测用户在与产品进行交互和故障诊断时是否会受到安全威胁，以保障人身安全；第二步，将需要进行交互的产品对应的需要向用户传递的信息进行电子化转换为信息源；所述的信息源包括产品的使用说明信息、故障诊断信息，形式包括文字、语音、图片和视频；第三步，将第二步中的信息源以实现快速检索为目的进行关键词与影像单元化的标签处理；同时将信息源及经标签处理后的信息预存到交互平台内；或者预存在网络或本地存储设备中，并与交互平台之建立可以实时加载数据信息的链接通道；第四步，控制交互平台通过其搭载的各个视角摄像头和传感器实时获取用户眼前需要进行交互的产品当前状态下的数据信息、用户的指令信息及用户所处环境周围的安全信息；第五步，当检测到用户的指令信息后，交互平台对用户指令、采集的输入源数据以及存储的信息源数据进行匹配处理后，调出最接近当时场景的信息在交互平台上展示给用户，展示内容包括且不限于文字，语音，图像，视频，动画；如果有多条类似信息结果，则根据权重，将结果简介列表展示，并通知用户进行信息选择，然后根据用户的选择指令进行信息筛选与展示；用户在观看上述虚拟信息的同时可以观看到眼前产品的真实场景；当交互平台的安全预警系统检测到安全威胁时，会立即向用户发出预警信号，并提示避险方案。2.根据权利要求1所述的基于增强现实的产品交互与故障诊断方法，其特征在于：所述的交互平台具有多机联机通信功能模块，可以实现多机共享视角和共享数据，通信方式包括物理有线连接和无线网络连接方式；所述的交互平台的功能传感器包括有可以采集产品图像，灰度，红外和热能的特征数据的多种传感器。3.根据权利要求1所述的基于增强现实的产品交互与故障诊断方法，其特征在于：所述的交互平台的传声系统包括扬声器、耳机和骨传导传声器。4.根据权利要求1所述的基于增强现实的产品交互与故障诊断方法，其特征在于：所述的交互平台配备有360度场景摄像头，用于获取用户周边的实时画面。5.根据权利要求1所述的基于增强现实的产品交互与故障诊断方法，其特征在于：所述的智能穿戴设备包括ar眼镜。6.根据权利要求1所述的基于增强现实的产品交互与故障诊断方法，其特征在于：所述的交互平台可以直接与需要进行交互的产品进行通信并传达控制信号。7.根据权利要求1所述的基于增强现实的产品交互与故障诊断方法，其特征在于：所述的交互平台可同时连接其他智能可穿戴设备。8.根据权利要求1所述的基于增强现实的产品交互与故障诊断方法，其特征在于：第二步中的信息源可在线实时更新。9.根据权利要求1所述的基于增强现实的产品交互与故障诊断方法，其特征在于：第五步中在交互平台上将信息显示给用户时，通过信息预处理或是后期图像智能处理后，信息显示的位置会与现实产品中对应需要进行说明或维修的部分相结合。
10.根据权利要求2至7中任一项所述的基于增强现实的产品交互与故障诊断方法，其特征在于：所述的交互平台在进行信息交互时，除了会实时检测平台自身周边的工作环境安全状况，还会同步结合采集到的其它外围传感器的信息，判断用户是否处于安全的工作的环境，并提供报警信号或发出紧急停止周边危险设备的控制命令。

技术总结
本发明公开了一种基于增强现实的产品交互与故障诊断方法，它通过建立以即能观看到现实场景又能观看到虚拟信息显示的交互平台；将需要进行交互的产品对应的需要向用户传递的信息进行电子化转换为信息源；并以实现快速检索为目的进行关键词与影像单元化的标签处理；将信息源及经标签处理后的信息预存到交互平台中或者预存在网络或本地存储设备中，然后通过通信媒介与交互平台之建立可以实时加载数据信息的链接通道；当检测到用户的需求指令后，自动答复，同时调出最符合当时场景的信息数据在交互平台上显示给用户以提高交互效率。本方案具有可以解放双手，更加高效，虚实结合，精确反映设备信息，可对产品进行故障诊断与识别指导维修的有益效果。别指导维修的有益效果。别指导维修的有益效果。


技术研发人员：吴文洪 彭凯 张祥 黄湘龙 李劲松
受保护的技术使用者：北京鸿文汇智科技有限公司
技术研发日：2022.03.10
技术公布日：2022/6/1