AR第一视角远程诊断方法以及装置、存储介质、电子装置与流程

ar第一视角远程诊断方法以及装置、存储介质、电子装置
技术领域
1.本技术涉及巡检诊断技术领域，具体而言，涉及一种ar第一视角远程诊断方法以及装置、存储介质、电子装置。


背景技术：

2.风电场通过风力发电提供电能。
3.然而，在风电行业的大规模增长造成专业人才短缺，同时有风电地处偏远，集控中心与风场距离较远，客观上削弱了企业对现场的管控力度。同时还存在如下的问题：
4.1)作业现场分散，无法保证所有现场都配置最优资源；
5.2)作业过程中通常双手被占用，尤其是带电作业、机舱内密闭空间作业和登风机高空作业时；
6.3)集控中心需要连线到现场作业人员并获取解决问题的有价值信息；
7.4)纸质作业记录由不同人员完成，难以保证一致性和实时性，事故发生后无法追溯。
8.5)在特殊时期如何保障风电设备巡检与运维停人不停工、如何避免风电大规模复工后交叉感染。
9.针对相关技术中风电场巡检时出现的问题，目前尚未提出有效的解决方案。


技术实现要素：

10.本技术的主要目的在于提供一种ar第一视角远程诊断方法以及装置、存储介质、电子装置，以解决风电场巡检时出现的问题。
11.为了实现上述目的，根据本技术的一个方面，提供了一种ar第一视角远程诊断方法。
12.根据本技术的ar第一视角远程诊断方法包括：确定初步巡检路线，其中所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图，所述巡检线路图中的业务数据与通过头戴式智能ar单兵控制终端采集的流媒体数据具有对应的关联关系，所述头戴式智能ar单兵控制终端基于当前环境中的第一视角进行显示，并回传所述流媒体数据；
13.基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，其中所述远程集控中心通过ar显示将远程指导操作叠加在所述头戴式智能ar单兵控制终端的第一视角的视野上，所述远程指导操作包括文件推送、语音指令，所述文件推送用于对所述流媒体数据中的单帧图像进行批注讲解；接收基于ar显示的远程指导操作，消除所述异常情况。
14.进一步地，还包括：基于所述头戴式智能ar单兵控制终端，输入语音操控指令和/或录入语音并转化为文字形式的所述业务数据；根据所述语音操控指令，检索设备信息和/
或业务信息，并基于所述第一视角在所述头戴式智能 ar单兵控制终端显示。
15.进一步地，所述基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，包括：所述头戴式ar智能单兵控制终端进行边缘处理，基于多路所述流媒体数据实现所述业务数据与基于所述第一视角将所述当前环境的音视频信息的关联，其中所述当前环境中的现场视频信息根据业务类别分段后关联所述业务数据中的作业记录，其中所述作业记录至少包括如下之一：巡检记录、缺陷记录、检修记录、风险预控记录，所述述流媒体数据存储至云端并与所述业务数据建立预设关联关系。
16.进一步地，所述接收基于ar显示的远程指导操作，消除所述异常情况，包括：接收基于ar显示的远程指导操作，其中所述远程指导操作通过所述头戴式智能ar单兵控制终端上加载的文字、图像信息进行ar显示，其中所述远程指导操作一对多个所述头戴式智能ar单兵控制终端；定位出当前环境中实际场景的异常位置，根据所述远程指导操作消除所述异常情况。
17.进一步地，所述确定初步巡检路线之前，还包括：在预设目标环境中安装多个抗电磁干扰蓝牙信标；根据多个所述抗电磁干扰蓝牙信标所覆盖的区域 id以及所述抗电磁干扰蓝牙信标的安装位置，联动多个所述头戴式智能ar 单兵控制终端。
18.进一步地，所述基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，之后还包括：根据所述当前环境的图像，实施监控预设节点的作业环节是否按照预设要求完成；如果未按照预设要求完成，则接收预防报警信号或者通过所述头戴式 ar智能单兵控制终端中的预先训练的识别模型的提前预计会发生的危险情况。
19.进一步地，所述基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，之后还包括：基于所述所述头戴式智能ar单兵控制终端显示采集的流媒体数据通过 wi-fi、4g或5g信号传输至所述远程集控中心；接收所述远程集控中心响应于预设紧急任务下发的巡检指令。
20.为了实现上述目的，根据本技术的另一方面，提供了一种ar第一视角远程诊断装置。
21.根据本技术的ar第一视角远程诊断装置包括：确定模块，用于确定初步巡检路线，其中所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图，所述巡检线路图中的业务数据与通过头戴式智能ar单兵控制终端采集的流媒体数据具有对应的关联关系，所述头戴式智能ar单兵控制终端基于当前环境中的第一视角进行显示，并回传所述流媒体数据；异常上报模块，用于基于所述初步巡检路线进行巡检的过程中升压站和 /或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，其中所述远程集控中心通过ar显示将远程指导操作叠加在所述头戴式智能ar 单兵控制终端的第一视角的视野上，所述远程指导操作包括文件推送、语音指令，所述文件推送用于对所述流媒体数据
中的单帧图像进行批注讲解；处理模块，用于接收基于ar显示的远程指导操作，消除所述异常情况。
22.为了实现上述目的，根据本技术的另一个方面，还提供了一种存储介质，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
23.为了实现上述目的，根据本技术的再一个方面，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
24.在本技术实施例中ar第一视角远程诊断方法以及装置、存储介质、电子装置，采用确定初步巡检路线，其中所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图的方式，通过基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，达到了接收基于ar显示的远程指导操作，消除所述异常情况的目的，从而实现了第一视角快速远程诊断的技术效果，进而解决了风电场巡检时出现的技术问题。
附图说明
25.构成本技术的一部分的附图用来提供对本技术的进一步理解，使得本技术的其它特征、目的和优点变得更明显。本技术的示意性实施例附图及其说明用于解释本技术，并不构成对本技术的不当限定。在附图中：
26.图1是根据本技术实施例的ar第一视角远程诊断方法的硬件结构示意图；
27.图2是根据本技术实施例的ar第一视角远程诊断方法的流程示意图；
28.图3是根据本技术实施例的ar第一视角远程诊断装置的结构示意图；
29.图4是根据本技术另一实施例的ar第一视角远程诊断方法的流程示意图。
具体实施方式
30.为了使本技术领域的人员更好地理解本技术方案，下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本技术一部分的实施例，而不是全部的实施例。基于本技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本技术保护的范围。
31.需要说明的是，本技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本技术的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
32.在本技术中，术语“上”、“下”、“左”、“右”、“前”、“后”、“顶”、“底”、“内”、“外”、“中”、“竖直”、“水平”、“横向”、“纵向”等指示的方位或位置关系为基于附图所示的方位或
位置关系。这些术语主要是为了更好地描述本技术及其实施例，并非用于限定所指示的装置、元件或组成部分必须具有特定方位，或以特定方位进行构造和操作。
33.并且，上述部分术语除了可以用于表示方位或位置关系以外，还可能用于表示其他含义，例如术语“上”在某些情况下也可能用于表示某种依附关系或连接关系。对于本领域普通技术人员而言，可以根据具体情况理解这些术语在本技术中的具体含义。
34.此外，术语“安装”、“设置”、“设有”、“连接”、“相连”、“套接”应做广义理解。例如，可以是固定连接，可拆卸连接，或整体式构造；可以是机械连接，或电连接；可以是直接相连，或者是通过中间媒介间接相连，又或者是两个装置、元件或组成部分之间内部的连通。对于本领域普通技术人员而言，可以根据具体情况理解上述术语在本技术中的具体含义。
35.需要说明的是，在不冲突的情况下，本技术中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本技术。
36.如图1所示，是根据本技术实施例的ar第一视角远程诊断方法的硬件结构示意图，其中包括：头戴式智能ar单兵控制终端100、远程服务端200，通过所述头戴式智能ar单兵控制终端100将采集到的第一视角的异常情况，与所述远程服务端200进行交互，所述远程服务端200将远程指导操作下发到对应的所述头戴式智能ar单兵控制终端100。
37.风电巡检/运维人员可通过头戴智能单兵ar控制终端与远程服务端200 的专家联系，解决现场问题。现场人员语音下达指令，解放双手，获得设备厂商远程技术支持，减少专家外出，避免人员聚集。
38.另外，对于风电设备运维和建设关键环节的验收和核查，往往需要人员出差来完成。所以需要将现场工作画面以第一视角展现在集控中心监管人员眼前，从而降低人员外出感染的风险，确保生产、工程的顺利进行。
39.所述头戴式智能ar单兵控制终端100，实现全语音操控，解放双手，避免戴手套触屏的不便。所述头戴式智能ar单兵控制终端100支持语音录入，无纸化，高效。语音录入文字，无纸化，高效上传，杜绝二次填表。
40.所述头戴式智能ar单兵控制终端100满足远程第一视角视频沟通的需求，随时随地视频接入，应急指挥调度，ar远程协助，减少误操作和漏操作
41.所述头戴式智能ar单兵控制终端100提供远程ar指导，避免差旅感染风险，减少差旅，节省人员资源或者成本。同时，缩短作业时间，减少宕机以及解放双手，实现数据联通、远程协调，提高工作效率，缩短设备停机时间，减少损失。
42.如图2所示，该方法包括如下的步骤s201至步骤s203：
43.步骤s201，确定初步巡检路线，其中所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图，所述巡检线路图中的业务数据与通过头戴式智能ar单兵控制终端采集的流媒体数据具有对应的关联关系，所述头戴式智能ar单兵控制终端基于当前环境中的第一视角进行显示，并回传所述流媒体数据；
44.步骤s202，基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，其中所述远程集控中心通过ar显示将远程指导操作叠加在所述头戴式智能ar单兵控制终端的第一视角的视野上，所述远程指导操作包括文件推送、语音指令，所述文件推送用于对所述流媒体数据中的单帧图像进行批注讲解；
45.步骤s203，接收基于ar显示的远程指导操作，消除所述异常情况。
46.从以上的描述中，可以看出，本技术实现了如下技术效果：
47.采用确定初步巡检路线，其中所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图的方式，通过基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，达到了接收基于ar显示的远程指导操作，消除所述异常情况的目的，从而实现了第一视角快速远程诊断的技术效果，进而解决了风电场巡检时出现的技术问题。
48.上述步骤s201中首先需要确定初步巡检路线，所述初步巡检路线通过下发至所述头戴式智能ar单兵控制终端进行查看。所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图。结合应用巡检作业解决方案实际情况，因时因地制宜，进行升压站及风机各个巡检点设备、路线及标准的记录，减少反复登记录入的工作。
49.按照所述升压站的巡检线路图以及所述风机的巡检线路图，通过头戴式智能ar单兵控制终端实时采集当前视频数据，并与远程服务端建立通信连接。
50.作为一种可选的实施方式，所述巡检线路图中的业务数据与通过头戴式智能ar单兵控制终端采集的流媒体数据具有对应的关联关系。也就是说，在所述巡检线路图中的业务数据与所述采集的流媒体数据之间是具有对应的关联关系的。
51.作为一种可选的实施方式，所述头戴式智能ar单兵控制终端基于当前环境中的第一视角进行显示，并回传所述流媒体数据至远程服务端。
52.上述步骤s202中基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，通过所述头戴式智能ar单兵控制终端不仅需要记录第一视角的所述当前环境的图像，而且需要通过所述头戴式智能ar单兵控制终端进行语音控制。可以理解，所述语音控制是基于所述预设语音控制指令得到的。
53.作为一种可选的实施方式，所述远程集控中心通过ar显示将远程指导操作叠加在所述头戴式智能ar单兵控制终端的第一视角的视野上。叠加的方式即符合ar显示的特征要求。在第一视角的视野上叠加的所述ar显示将远程指导操作，可以指导佩戴所述头戴式智能ar单兵控制终端的人员执行对应的操作，修复故障或排除异常。
54.作为一种可选的实施方式，所述远程指导操作包括文件推送、语音指令，所述文件推送用于对所述流媒体数据中的单帧图像进行批注讲解。可以理解，远程指导的操作不仅可以实现文件推送，还可以进行语音指令的下发。
55.上述步骤s203中通过所述头戴式智能ar单兵控制终端接收基于ar显示的远程指导操作，消除所述异常情况。
56.作为一种可选的实施方式，所述头戴式智能ar单兵控制终端通过利用光学反射投影原理(hud)。应用软件部分基于头戴式ar智能单兵控制终端的 android操作系统研发变电站作业人员的全过程作业安全管控及远程全面实时综合应急高效协作相关业务，实现软件与硬件的结合。
57.所述头戴式智能ar单兵控制终端是微型投影仪 摄像头 传感器 存储传输 操控设备的结合体。右眼的小镜片上包括一个微型投影仪和一个摄像头，投影仪用以显示数据，
摄像头用来拍摄视频与图像，存储传输模块用于存储与输出数据，而操控设备可通过语音、触控和自动三种模式控。
58.作为一种可选的实施方式，所述头戴式智能ar单兵控制终端现场采集的视频信息根据业务类别自动分段，动态关联巡检作业记录，把结构化的巡检数据(观察项、测量项)和非结构化的视频数据融合联动，设计用户在查看视频 (巡检)信息时，远程服务端亦能智能关联并推送巡检(视频)记录。
59.作为本实施例中的优选，还包括：基于所述头戴式智能ar单兵控制终端，输入语音操控指令和/或录入语音并转化为文字形式的所述业务数据；根据所述语音操控指令，检索设备信息和/或业务信息，并基于所述第一视角在所述头戴式智能ar单兵控制终端显示。
60.具体实施时，基于所述头戴式智能ar单兵控制终端，可以输入语音操控指令和/或录入语音并转化为文字形式的所述业务数据，通过所述语音操控指令，检索设备信息和/或业务信息，并基于所述第一视角在所述头戴式智能ar 单兵控制终端显示。需要注意的是，检索设备信息和/或业务信息可以在本地或者通过远程服务端下发。
61.作为本实施例中的优选，所述基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，包括：所述头戴式ar智能单兵控制终端进行边缘处理，基于多路所述流媒体数据实现所述业务数据与基于所述第一视角将所述当前环境的音视频信息的关联，其中所述当前环境中的现场视频信息根据业务类别分段后关联所述业务数据中的作业记录，其中所述作业记录至少包括如下之一：巡检记录、缺陷记录、检修记录、风险预控记录，所述述流媒体数据存储至云端并与所述业务数据建立预设关联关系。
62.具体实施时，所述头戴式ar智能单兵控制终端进行边缘处理，基于多路所述流媒体数据实现所述业务数据与基于所述第一视角将所述当前环境的音视频信息的关联。由边缘头戴式ar智能单兵控制终端进行处理，可降低中心服务器的存储和计算负载，减少对网络的依赖，实现节约资源，确保数据融合高效运行的技术效果。
63.进一步地，所述头戴式ar智能单兵控制终端进行边缘处理时在逻辑上划分多路视频，实现业务信息与第一视角音视频信息的动态关联，即结构化数据与非结构化数据的有机融合。例如在用户进行巡检作业时：用户在pc机端查看巡检记录，头戴式ar智能单兵控制终端基于边缘计算的视频数据融合算法将采集的视频自动拆分，并与巡检记录关联，实现巡检记录与视频流融合；用户在查看视频信息时，系统亦能智能关联并推送巡检记录。
64.第一视角音视频信息中记录的现场视频信息根据业务类别自动分段，关联作业记录，支持边缘计算并将信息永久存储于后台，便于全面、全过程、无死角掌控现场作业以及业务追溯。
65.作为本实施例中的优选，所述接收基于ar显示的远程指导操作，消除所述异常情况，包括：接收基于ar显示的远程指导操作，其中所述远程指导操作通过所述头戴式智能ar单兵控制终端上加载的文字、图像信息进行ar显示，其中所述远程指导操作一对多个所述头戴式智能ar单兵控制终端；定位出当前环境中实际场景的异常位置，根据所述远程指导操作消除所述异常情况。
66.具体实施时，接收基于ar显示的远程指导操作，从而定位出当前环境中实际场景
的异常位置，根据所述远程指导操作消除所述异常情况。需要注意的是，所述远程指导操作通过所述头戴式智能ar单兵控制终端上加载的文字、图像信息进行ar显示，即通过所述头戴式智能ar单兵控制终端不仅能够看到第一视角的情况，还能够同步看到文字、图像等远程协助的信息。
67.作为本实施例中的优选，所述确定初步巡检路线之前，还包括：在预设目标环境中安装多个抗电磁干扰蓝牙信标；根据多个所述抗电磁干扰蓝牙信标所覆盖的区域id以及所述抗电磁干扰蓝牙信标的安装位置，联动多个所述头戴式智能ar单兵控制终端。
68.具体实施时，在预设目标环境中安装多个抗电磁干扰蓝牙信标；根据多个所述抗电磁干扰蓝牙信标所覆盖的区域id以及所述抗电磁干扰蓝牙信标的安装位置。现场实施首先对蓝牙信标进行区域半径计算，写入id，其次现场巡检点粘贴蓝牙信标，然后对所述头戴式智能ar单兵控制终端。现场测试及系统调试。进一步地，当所述头戴式智能ar单兵控制终端。进入到巡检点的蓝牙信标范围时，眼镜终端会播报到位信息，同时路线图上也会进行对应颜色的变化。
69.作为本实施例中的优选，所述基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，之后还包括：根据所述当前环境的图像，实施监控预设节点的作业环节是否按照预设要求完成；如果未按照预设要求完成，则接收预防报警信号或者通过所述头戴式ar智能单兵控制终端中的预先训练的识别模型的提前预计会发生的危险情况。
70.具体实施时，根据所述当前环境的图像，实施监控预设节点的作业环节是否按照预设要求完成，提高勒工作效率，实现对风电场作业人员的全面、全过程作业安全管控，同时也简化了风电场的巡检作业流程。
71.在所述头戴式ar智能单兵控制终端在未按照预设要求完成的情况下，则接收预防报警信号或者通过所述头戴式ar智能单兵控制终端中的预先训练的识别模型的提前预计会发生的危险情况。也就是说，预防报警信号可以是远程服务端下发或者由预先训练的识别模型预计是否会发生危险。
72.通过关键作业后台实时监视，并结合软件逻辑定义对作业误操作进行报警。未来随着海量数据积累，通过头戴式ar智能单兵控制终端语音识别、图像识别以及大数据推演得到的结果将智能的提前显示可能会发生的危险。
73.作为本实施例中的优选，所述基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，之后还包括：基于所述所述头戴式智能ar单兵控制终端显示采集的流媒体数据通过wi-fi、4g或5g信号传输至所述远程集控中心；接收所述远程集控中心响应于预设紧急任务下发的巡检指令。
74.具体实施时，为了适用于不同的现场环境，并保证所述头戴式智能ar单兵控制终端与远程服务端的交互，基于所述所述头戴式智能ar单兵控制终端显示采集的流媒体数据通过wi-fi、4g或5g信号传输至所述远程集控中心。并且接收所述远程集控中心响应于预设紧急任务下发的巡检指令。
75.需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的
计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
76.根据本技术实施例，还提供了一种用于实施上述方法的ar第一视角远程诊断装置，如图3所示，该装置包括：
77.确定模块301，用于确定初步巡检路线，其中所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图，所述巡检线路图中的业务数据与通过头戴式智能ar单兵控制终端采集的流媒体数据具有对应的关联关系，所述头戴式智能ar单兵控制终端基于当前环境中的第一视角进行显示，并回传所述流媒体数据；
78.异常上报模块302，用于基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，其中所述远程集控中心通过ar显示将远程指导操作叠加在所述头戴式智能 ar单兵控制终端的第一视角的视野上，所述远程指导操作包括文件推送、语音指令，所述文件推送用于对所述流媒体数据中的单帧图像进行批注讲解；
79.处理模块303，用于接收基于ar显示的远程指导操作，消除所述异常情况。
80.本技术实施例的所述确定模块301中首先需要确定初步巡检路线，所述初步巡检路线通过下发至所述头戴式智能ar单兵控制终端进行查看。所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图。结合应用巡检作业解决方案实际情况，因时因地制宜，进行升压站及风机各个巡检点设备、路线及标准的记录，减少反复登记录入的工作。
81.按照所述升压站的巡检线路图以及所述风机的巡检线路图，通过头戴式智能ar单兵控制终端实时采集当前视频数据，并与远程服务端建立通信连接。
82.作为一种可选的实施方式，所述巡检线路图中的业务数据与通过头戴式智能ar单兵控制终端采集的流媒体数据具有对应的关联关系。也就是说，在所述巡检线路图中的业务数据与所述采集的流媒体数据之间是具有对应的关联关系的。
83.作为一种可选的实施方式，所述头戴式智能ar单兵控制终端基于当前环境中的第一视角进行显示，并回传所述流媒体数据至远程服务端。
84.本技术实施例的所述异常上报模块302中基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，通过所述头戴式智能ar单兵控制终端不仅需要记录第一视角的所述当前环境的图像，而且需要通过所述头戴式智能ar单兵控制终端进行语音控制。可以理解，所述语音控制是基于所述预设语音控制指令得到的。
85.作为一种可选的实施方式，所述远程集控中心通过ar显示将远程指导操作叠加在所述头戴式智能ar单兵控制终端的第一视角的视野上。叠加的方式即符合ar显示的特征要求。在第一视角的视野上叠加的所述ar显示将远程指导操作，可以指导佩戴所述头戴式智能ar单兵控制终端的人员执行对应的操作，修复故障或排除异常。
86.作为一种可选的实施方式，所述远程指导操作包括文件推送、语音指令，所述文件推送用于对所述流媒体数据中的单帧图像进行批注讲解。可以理解，远程指导的操作不仅
可以实现文件推送，还可以进行语音指令的下发。
87.本技术实施例的所述处理模块303中通过所述头戴式智能ar单兵控制终端接收基于ar显示的远程指导操作，消除所述异常情况。
88.作为一种可选的实施方式，所述头戴式智能ar单兵控制终端通过利用光学反射投影原理(hud)。应用软件部分基于头戴式ar智能单兵控制终端的android操作系统研发变电站作业人员的全过程作业安全管控及远程全面实时综合应急高效协作相关业务，实现软件与硬件的结合。
89.所述头戴式智能ar单兵控制终端是微型投影仪 摄像头 传感器 存储传输 操控设备的结合体。右眼的小镜片上包括一个微型投影仪和一个摄像头，投影仪用以显示数据，摄像头用来拍摄视频与图像，存储传输模块用于存储与输出数据，而操控设备可通过语音、触控和自动三种模式控。
90.作为一种可选的实施方式，所述头戴式智能ar单兵控制终端现场采集的视频信息根据业务类别自动分段，动态关联巡检作业记录，把结构化的巡检数据(观察项、测量项)和非结构化的视频数据融合联动，设计用户在查看视频 (巡检)信息时，远程服务端亦能智能关联并推送巡检(视频)记录。
91.显然，本领域的技术人员应该明白，上述的本技术的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本技术不限制于任何特定的硬件和软件结合。
92.为了更好的理解上述ar第一视角远程诊断方法流程，以下结合优选实施例对上述技术方案进行解释说明，但不用于限定本发明实施例的技术方案。
93.本技术实施例中ar第一视角远程诊断方法，现场作业人员通过语音控制，检索设备和业务信息并在头戴智能单兵ar控制终端的近眼显示器中投射展示，解放双手、嘈杂工业环境可用。为管理者实时展示第一视角作业视频，且视频信息自动关联作业记录并永久存储于后台，便于全面、全过程、无死角掌控现场作业和业务追溯。实现设备ar巡检、远程专家现场维护、缺陷ar 标注、第一视角监理等，使管理人员做到身临其境的指挥调度，使现场作业人员第一时间得到后台技术支撑，缩短缺陷处理时间。提高风电现场作业的技术和安全水平，特别是提高风电企业远程处理紧急突发问题的能力。
94.如图4所示，是根据本技术实施例的ar第一视角远程诊断方法的流程示意图，其包括如下步骤：
95.步骤s401，确定初步巡检路线，其中所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图，所述巡检线路图中的业务数据与通过头戴式智能ar单兵控制终端采集的流媒体数据具有对应的关联关系，所述头戴式智能ar单兵控制终端基于当前环境中的第一视角进行显示，并回传所述流媒体数据。
96.步骤s402，基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，其中所述远程集控中心通过ar显示将远程指导
操作叠加在所述头戴式智能ar单兵控制终端的第一视角的视野上，所述远程指导操作包括文件推送、语音指令，所述文件推送用于对所述流媒体数据中的单帧图像进行批注讲解。
97.步骤s403，基于所述头戴式智能ar单兵控制终端，输入语音操控指令和/或录入语音并转化为文字形式的所述业务数据。
98.步骤s404，根据所述语音操控指令，检索设备信息和/或业务信息，并基于所述第一视角在所述头戴式智能ar单兵控制终端显示。进入步骤s402。
99.作业人员可以通过头戴式ar智能单兵控制终端以其第一视角将现场复杂的情景直接传送到远程集控中心，集控中心的专家可随时随地进行援助，由于获得作业人员第一视角就如亲临现场进行观察，远程专家通过语音及增强现实电子白板，直观的将数字信息叠加在作业人员的视野中的操作对象上，现场作业人员犹如获得现场专家的指导一样处理棘手问题，极大的减少了沟通和交流成本。
100.步骤s405，所述头戴式ar智能单兵控制终端进行边缘处理，基于多路所述流媒体数据实现所述业务数据与基于所述第一视角将所述当前环境的音视频信息的关联，其中所述当前环境中的现场视频信息根据业务类别分段后关联所述业务数据中的作业记录，其中所述作业记录至少包括如下之一：巡检记录、缺陷记录、检修记录、风险预控记录，所述述流媒体数据存储至云端并与所述业务数据建立预设关联关系。
101.步骤s406，接收基于ar显示的远程指导操作，其中所述远程指导操作通过所述头戴式智能ar单兵控制终端上加载的文字、图像信息进行ar显示，其中所述远程指导操作一对多个所述头戴式智能ar单兵控制终端。
102.步骤s407，定位出当前环境中实际场景的异常位置，根据所述远程指导操作消除所述异常情况。
103.本技术的实施例还提供了一种存储介质，该存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
104.可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的计算机程序：
105.s1，确定初步巡检路线，其中所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图，所述巡检线路图中的业务数据与通过头戴式智能ar单兵控制终端采集的流媒体数据具有对应的关联关系，所述头戴式智能ar单兵控制终端基于当前环境中的第一视角进行显示，并回传所述流媒体数据；
106.s2，基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，其中所述远程集控中心通过ar显示将远程指导操作叠加在所述头戴式智能ar单兵控制终端的第一视角的视野上，所述远程指导操作包括文件推送、语音指令，所述文件推送用于对所述流媒体数据中的单帧图像进行批注讲解；
107.s3，接收基于ar显示的远程指导操作，消除所述异常情况。
108.可选地，存储介质还被设置为存储用于执行以下步骤的计算机程序：
109.s31，基于所述头戴式智能ar单兵控制终端，输入语音操控指令和/或录入语音并转化为文字形式的所述业务数据。
110.s32，根据所述语音操控指令，检索设备信息和/或业务信息，并基于所述第一视角
在所述头戴式智能ar单兵控制终端显示。
111.可选地，在本实施例中，上述存储介质可以包括但不限于：u盘、只读存储器(read-only memory，简称为rom)、随机存取存储器(random accessmemory，简称为ram)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
112.本技术的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
113.可选地，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。
114.可选地，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：
115.s1，确定初步巡检路线，其中所述初步巡检路线至少包括如下之一的巡检线路：升压站的巡检线路图、风机的巡检线路图，所述巡检线路图中的业务数据与通过头戴式智能ar单兵控制终端采集的流媒体数据具有对应的关联关系，所述头戴式智能ar单兵控制终端基于当前环境中的第一视角进行显示，并回传所述流媒体数据；
116.s2，基于所述初步巡检路线进行巡检的过程中升压站和/或风机出现的异常情况，通过所述头戴式智能ar单兵控制终端以及预设语音控制指令基于所述第一视角将所述当前环境的图像回传至远程集控中心，其中所述远程集控中心通过ar显示将远程指导操作叠加在所述头戴式智能ar单兵控制终端的第一视角的视野上，所述远程指导操作包括文件推送、语音指令，所述文件推送用于对所述流媒体数据中的单帧图像进行批注讲解；
117.s3，接收基于ar显示的远程指导操作，消除所述异常情况。
118.可选地，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
119.以上所述仅为本技术的优选实施例而已，并不用于限制本技术，对于本领域的技术人员来说，本技术可以有各种更改和变化。凡在本技术的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本技术的保护范围之内。