基于视频的人员特定动作的智能判断方法及装置与流程

1.本发明属于电力安全技术领域，具体涉及一种基于视频的人员特定动作的智能判断方法及装置。


背景技术：

2.变电站是指电力系统中对电压和电流进行变换，接受电能及分配电能的场所。在发电厂内的变电站是升压变电站，其作用是将发电机发出的电能升压后馈送到高压电网中。变电站的巡视检查就是值班人员通过定期巡视观察设备的外观有无异状，如颜色有无变化，有无杂物，表针指示是否正常，设备的声音是否正常，有无异常的气味，触及允许接触的设备温度是否正常，测量电气设备的运行参数在运行中的变化等，以判断设备的运行状况是否正常。变电站的巡视检查制度是确保设备正常安全运行的有效措施。通过值班人员的定期的巡视检查了解设备运行状况，掌握运行异常，并及时地采取相应措施，对于降低事故的发生及其影响范围具有重要意义。目前通常采用巡检人员现场巡检与后方的监控平台远程监控的方式来对变电站进行日常安全监控，巡检人员配备语音设备与监控平台通信，从而与监控平台值班人员进行交流。然而，现有的监控方式仍然存在一些盲区，例如在变电站内发生异常，巡检人员语音设备故障的情况下，无法快速与后方监控平台进行联系、汇报变电站内状况因此如何克服现有技术的不足是目前电力安全技术领域亟需解决的问题。


技术实现要素：

3.本发明的目的是提供一种基于视频的人员特定动作的智能判断方法及装置，以解决在变电站内发生异常，巡检人员语音设备故障的情况下，无法快速与后方监控平台进行联系、汇报变电站内状况的问题。
4.为实现上述目的，本发明采用的技术方案如下：基于视频的人员特定动作的智能判断方法，包括：获取变电站内各个电力设备的实时的视频信息；捕捉所述视频信息中的人体目标；判断所述视频信息中的人体目标是否做出预警起始姿态；如果所述视频信息中的人体目标做出预警起始姿态，记录所述人体目标在预警起始姿态之后的预警视频信息，并提取所述预警视频信息中的静止帧；识别所述静止帧中人体目标的预警姿态；破解所述预警姿态对应的预警设备故障信息；输出所述预警设备故障信息。
5.进一步，优选的是，捕捉所述视频信息中的人体目标之后，所述方法还包括：提取所述人体目标的人脸信息；基于预设的巡检人员人脸数据库对所述人体目标的人脸信息信息识别，判断所述人体目标是否是变电站内部巡检人员；
如果所述人体目标是变电站内部巡检人员，判断所述视频信息中的人体目标是否做出预警起始姿态。
6.进一步，优选的是，识别所述静止帧中人体目标的预警姿态包括：提取所述静止帧中人体目标中的关键骨骼点；将所述关键骨骼点按照人体结构进行连线，得到人体目标姿态简化图。
7.进一步，优选的是，破解所述预警姿态对应的预警设备故障信息包括：将所述人体目标姿态简化图与预设的预警姿态图片数据库进行比对；确定出与所述人体目标姿态简化图相匹配的预警姿态图片；提取所述预警姿态图片所对应的预警设备故障信息。
8.进一步，优选的是，所述人体目标姿态简化图为多种，每种所述人体目标姿态简化图对应的预警姿态图片用于表征一种预警设备故障信息，所述预警设备故障信息包括设备型号和设备故障类型。
9.本发明同时提供基于视频的人员特定动作的智能判断装置，包括：获取单元，用于获取变电站内各个电力设备的实时的视频信息；捕捉单元，用于捕捉所述视频信息中的人体目标；第一判断单元，用于判断所述视频信息中的人体目标是否做出预警起始姿态；第一提取单元，用于在所述视频信息中的人体目标做出预警起始姿态的情况，记录所述人体目标在预警起始姿态之后的预警视频信息并提取所述预警视频信息中的静止帧；识别单元，用于识别所述静止帧中人体目标的预警姿态；破解单元，用于破解所述预警姿态对应的预警设备故障信息；输出单元，用于输出所述预警设备故障信息。
10.进一步，优选的是，所述装置还包括：第二提取单元，用于在捕捉所述视频信息中的人体目标之后，提取所述人体目标的人脸信息；第二判断单元，用于基于预设的巡检人员人脸数据库对所述人体目标的人脸信息信息识别，判断所述人体目标是否是变电站内部巡检人员，在所述人体目标是变电站内部巡检人员的情况下，通过第一判断单元判断所述视频信息中的人体目标是否做出预警起始姿态。
11.进一步，优选的是，所述识别单元包括：第三提取单元，用于提取所述静止帧中人体目标中的关键骨骼点；连线单元，用于将所述关键骨骼点按照人体结构进行连线，得到人体目标姿态简化图。
12.进一步，优选的是，所述破解单元包括：比对单元，用于将所述人体目标姿态简化图与预设的预警姿态图片数据库进行比对；确定单元，用于确定出与所述人体目标姿态简化图相匹配的预警姿态图片；第四提取单元，用于提取所述预警姿态图片所对应的预警设备故障信息。
13.本发明与现有技术相比，其有益效果为：
本发明通过获取变电站内各个电力设备的实时的视频信息，捕捉视频信息中的人体目标，判断视频信息中的人体目标是否做出预警起始姿态，如果视频信息中的人体目标做出预警起始姿态，记录人体目标在预警起始姿态之后的预警视频信息，并提取预警视频信息中的静止帧，识别静止帧中人体目标的预警姿态，破解预警姿态对应的预警设备故障信息，输出预警设备故障信息，在变电站内发生异常，巡检人员语音设备故障的情况下，巡检人员可以通过人体姿态向监控平台传递信息，后方的监控平台可以自动根据巡检人员的人体姿态得出预警设备故障信息，从而实现巡检人员快速与后方的监控平台进行联系、汇报变电站内状况，保证变电站设备和人员的安全。
附图说明
14.为了更清楚地说明本发明的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
15.图1为本发明的基于视频的人员特定动作的智能判断方法的流程图；图2为本发明的基于视频的人员特定动作的智能判断方法的一可选实施方式流程图；图3为本发明的基于视频的人员特定动作的智能判断方法的又一可选实施方式流程图；图4为本发明的基于视频的人员特定动作的智能判断方法的再一可选实施方式流程图；图5为本发明的基于视频的人员特定动作的智能判断装置示意图。
具体实施方式
16.下面结合实施例对本发明作进一步的详细描述。
17.本领域技术人员将会理解，下列实施例仅用于说明本发明，而不应视为限定本发明的范围。实施例中未注明具体技术或条件者，按照本领域内的文献所描述的技术或条件或者按照产品说明书进行。所用材料或设备未注明生产厂商者，均为可以通过购买获得的常规产品。
18.请参阅图1，本发明提供一种基于视频的人员特定动作的智能判断方法，该方法的执行主体为监控平台服务器，该方法可以包括：步骤s101，获取变电站内各个电力设备的实时的视频信息。
19.具体地，可以对应变电站内各个电力设备设置对应的视频图像采集装置，来实时采集电力设备的实时的视频信息。视频图像采集装置提供网络与监控平台服务器通信连接，可将视频信息传输至监控平台服务器。
20.步骤s102，捕捉视频信息中的人体目标。
21.具体地，监控平台服务器接收到视频图像采集装置发送的变电站内各个电力设备的实时的视频信息后，捕捉视频信息中的人体目标，以便后续对人体目标进行分析。视频图像采集装置采集到的可以是红外监控视频，具体可采用背景减除和数学形态学相结合的检测算法，利用背景减除来得到感兴趣局部区域，经过形态学进一步去除噪声干扰，通过特征
分析消除虚假目标，提取人体完整的轮廓，得到人体目标信息，利用自适应背景估计模型对背景进行更新，从而捕捉视频信息中的人体目标。具体检测算法可采用现有技术实现。其中，背景减除和数学形态学、特征分析、自适应背景估计模型均为现有技术。
22.具体地，如图2所示，捕捉视频信息中的人体目标之后，方法还包括：步骤s201，提取人体目标的人脸信息。步骤s202，基于预设的巡检人员人脸数据库对人体目标的人脸信息信息识别，判断人体目标是否是变电站内部巡检人员。如果人体目标是变电站内部巡检人员，执行后续的判断视频信息中的人体目标是否做出预警起始姿态的步骤。如果人体目标不是变电站内部巡检人员，则不需要执行后续的判断视频信息中的人体目标是否做出预警起始姿态的步骤。
23.步骤s103，判断视频信息中的人体目标是否做出预警起始姿态。
24.具体地，预警起始姿态具体指的是巡检人员在做出预警姿态前的起始姿态，该姿态用于表示预警姿态即将开始，预警起始姿态和各种预警姿态具体可进行灵活设定，并由巡检人员牢记，在需要时及时利用身体摆出相应的姿态以传递信息。
25.步骤s104，如果视频信息中的人体目标做出预警起始姿态，记录人体目标在预警起始姿态之后的预警视频信息，并提取预警视频信息中的静止帧。
26.具体地，视频信息中的人体目标做出预警起始姿态，说明后续即将开始做出各种预警姿态，因此记录人体目标在预警起始姿态之后的预警视频信息，并提取预警视频信息中的静止帧，巡检人员在做出某个预警姿态时，需要保持数秒静止，以便于监控平台服务器的识别。
27.步骤s105，识别静止帧中人体目标的预警姿态。
28.具体地，如图3所示，识别静止帧中人体目标的预警姿态包括：步骤s301，提取静止帧中人体目标中的关键骨骼点。人体目标中的关键骨骼点可以包括肩、肘、头、躯干以及膝，其中，肩包括两个骨骼关键点，肘包括两个骨骼关键点，头包括一个骨骼关键点，躯干包括四个骨骼关键点，膝包括两个骨骼关键点。
29.步骤s302，将关键骨骼点按照人体结构进行连线，得到人体目标姿态简化图。
30.步骤s106，破解预警姿态对应的预警设备故障信息。
31.具体地，如图4所示，破解预警姿态对应的预警设备故障信息包括：步骤s401，将人体目标姿态简化图与预设的预警姿态图片数据库进行比对。其中，预设的预警姿态图片数据库存储有各种不同的预警姿态图片。
32.步骤s402，确定出与人体目标姿态简化图相匹配的预警姿态图片。
33.步骤s403，提取预警姿态图片所对应的预警设备故障信息。其中，每种预警姿态图片对应有相应的预警设备故障信息的文本。
34.人体目标姿态简化图具体可以为多种，每种人体目标姿态简化图对应的预警姿态图片用于表征一种预警设备故障信息，预警设备故障信息包括设备型号和设备故障类型。例如，巡检人员在做出预警起始姿态后，先做出第一个预警姿态，该预警姿态用于传递设备型号，之后再做出第二个预警姿态，该预警姿态用于传递设备故障类型。
35.步骤s107，输出预警设备故障信息。
36.如图5所示，本发明提供一种基于视频的人员特定动作的智能判断装置，包括：获取单元51，用于获取变电站内各个电力设备的实时的视频信息。
37.捕捉单元52，用于捕捉视频信息中的人体目标。
38.第一判断单元53，用于判断视频信息中的人体目标是否做出预警起始姿态。
39.第一提取单元54，用于在视频信息中的人体目标做出预警起始姿态的情况，记录人体目标在预警起始姿态之后的预警视频信息并提取预警视频信息中的静止帧。
40.识别单元55，用于识别静止帧中人体目标的预警姿态。
41.破解单元56，用于破解预警姿态对应的预警设备故障信息。
42.输出单元57，用于输出预警设备故障信息。
43.具体地，该装置还包括：第二提取单元，用于在捕捉视频信息中的人体目标之后，提取人体目标的人脸信息。
44.第二判断单元，用于基于预设的巡检人员人脸数据库对人体目标的人脸信息信息识别，判断人体目标是否是变电站内部巡检人员，在人体目标是变电站内部巡检人员的情况下，通过第一判断单元判断视频信息中的人体目标是否做出预警起始姿态。
45.具体地，识别单元包括：第三提取单元，用于提取静止帧中人体目标中的关键骨骼点。
46.连线单元，用于将关键骨骼点按照人体结构进行连线，得到人体目标姿态简化图。
47.具体地，破解单元包括：比对单元，用于将人体目标姿态简化图与预设的预警姿态图片数据库进行比对。
48.确定单元，用于确定出与人体目标姿态简化图相匹配的预警姿态图片。
49.第四提取单元，用于提取预警姿态图片所对应的预警设备故障信息。
50.本发明实施例还提供一种存储介质，本发明实施例还提供一种存储介质，所述存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现本发明提供的基于视频的人员特定动作的智能判断方法的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体（英文：read
‑
onlymemory，简称：rom）或随机存储记忆体（英文：randomaccessmemory，简称：ram）等。
51.本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例或者实施例的某些部分所述的方法。
52.本说明书中各个实施例之间相同相似的部分互相参见即可。尤其，对于基于视频的人员特定动作的智能判断装置实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例中的说明即可。
53.以上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术人员应该了解，本发明不受上述实施例的限制，上述实施例和说明书中描述的只是说明本发明的原理，在不脱离本发明精神和范围的前提下，本发明还会有各种变化和改进，这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。