人员安全防护方法、装置、电子设备及存储介质与流程

1.本发明涉及安全监控技术领域，尤其涉及一种人员安全防护方法、装置、电子设备及存储介质。


背景技术：

2.现代工业生产过程中，各种机械和设备都有效地提高了生产效率和加工质量。但现有的很多加工设备，从设计、制造到使用，都缺乏安全管理，导致安全事故时有发生。这些安全事故造成了严重的社会影响，给企业和社会带来了沉重的经济负担。
3.现有技术中，通常在设备附近设置急停按钮，当安全事故发生时，由人工操作急停按钮对设备进行控制。现有的急停按钮方案，一方面受制于需有旁人在现场，以及人的反应速度的局限性，另一方面也缺乏更智能的反应策略。


技术实现要素：

4.本发明提供一种人员安全防护方法、装置、电子设备及存储介质，用以解决现有技术中人员安全防护需要人工操作急停按钮对设备进行控制，反应速度慢，安全防护效果差的问题。
5.本发明提供一种人员安全防护方法，包括：
6.获取设备处的实时声音信号和/或实时动作信号；
7.若在所述实时声音信号中检测到语音指令和/或在所述实时动作信号中检测到动作指令，则基于所述语音指令和/或所述动作指令，以及安全控制指令库，确定用于所述设备执行的安全控制指令。
8.根据本发明提供的一种人员安全防护方法，所述安全控制指令库包括多个候选语音指令和/或候选动作指令，以及分别与各个候选语音指令和/或候选动作指令对应的安全控制指令。
9.根据本发明提供的一种人员安全防护方法，所述获取设备处的实时声音信号和/或实时动作信号，包括：
10.基于安装在所述设备处的多个声音传感装置和/或动作传感装置分别获取所述实时声音信号和/或实时动作信号。
11.根据本发明提供的一种人员安全防护方法，所述声音传感装置和/或动作传感装置的安装位置和安装数量是基于所述设备的伤害模式和伤害范围确定的。
12.根据本发明提供的一种人员安全防护方法，所述确定用于所述设备执行的安全控制指令，之后包括：
13.确定检测到所述语音指令的声音传感装置和/或确定检测到所述动作指令的动作传感装置；
14.发送包含所述声音传感装置和/或所述动作传感装置的安装位置的报警信号。
15.根据本发明提供的一种人员安全防护方法，所述在所述实时声音信号中检测到语
音指令和/或在所述实时动作信号中检测到动作指令，包括：
16.确定所述实时声音信号对应的语音识别基准和/或确定所述实时动作信号对应的动作识别基准；
17.确定所述安全控制指令库中每一候选语音指令和/或候选动作指令与所述实时声音信号和/或实时动作信号对应的语音识别基准和/或动作识别基准之间的相似度；
18.若存在任一候选语音指令和/或候选动作指令与所述实时声音信号和/或所述实时动作信号对应的语音识别基准和/或动作识别基准之间的相似度大于预设相似度阈值，则将所述任一候选语音指令和/或候选动作指令作为在所述实时声音信号中检测到的语音指令和/或在所述实时动作信号中检测到的动作指令。
19.根据本发明提供的一种人员安全防护方法，所述确定所述实时声音信号对应的语音识别基准，包括：
20.确定所述实时声音信号的响度；
21.若所述响度大于预设响度阈值，则确定所述实时声音信号对应的语音识别基准。
22.根据本发明提供的一种人员安全防护方法，所述在所述实时声音信号中检测到语音指令和/或在所述实时动作信号中检测到动作指令，包括：
23.基于自适应滤波算法、谱减算法和维纳滤波算法等中的至少一种，对所述实时声音信号和/或实时动作信号进行降噪处理。
24.根据本发明提供的一种人员安全防护方法，所述安全控制指令是基于所述设备对操作人员的应急保护动作确定的。
25.本发明还提供一种人员安全防护装置，包括：
26.获取单元，用于获取设备处的实时声音信号和/或实时动作信号；
27.防护单元，用于若在所述实时声音信号中检测到语音指令和/或在所述实时动作信号中检测到动作指令，则基于所述语音指令和/或所述动作指令，以及安全控制指令库，确定用于所述设备执行的安全控制指令。
28.本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述人员安全防护方法的步骤。
29.本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述人员安全防护方法的步骤。
30.本发明实施例提供的人员安全防护方法、装置、电子设备及存储介质，通过获取设备处的实时声音信号和/实时动作信号，若在实时声音信号中检测到语音指令和/或在实时动作信号中检测到动作指令，则根据安全控制指令库中存储的候选语音指令和/或候选动作指令与安全控制指令的对应关系，确定用于设备执行的安全控制指令，由于对声音信号和/或动作信号进行检测，并连锁触发安全控制指令对设备进行控制，相比于现有的急停按钮方案，减少了操作人员的反应时间，提高了生产过程的安全性，同时，语音指令、动作指令和安全控制指令可以根据需要进行多样化设置，增加了设备安全控制和人员紧急救助的灵活性和多样性。
附图说明
31.为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
32.图1为本发明提供的人员安全防护方法的流程示意图；
33.图2为本发明提供的人员安全防护装置的结构示意图；
34.图3为本发明提供的电子设备的结构示意图。
具体实施方式
35.为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
36.生产工厂有设备在运转，此时由于操作人员的操作失误或者设备故障，导致设备对人产生了伤害。例如将人挤伤、压伤或者其他无法立即停止侵害人的状况。这时候需要身边有其他人发现异常并及时操作急停按钮，但可能十几秒之后或者更久。如果身边无其他人发现异常，受害人可能持续处于危险状态并且加重伤势。
37.图1为本发明提供的人员安全防护方法的流程示意图，如图1所示，该方法包括：
38.步骤110，获取设备处的实时声音信号和/或实时动作信号。
39.具体地，设备是指在生产过程中直接改变原材料属性、性能、形态或增强外观价值所必需的机械设备。例如高炉、机床或者生产线等。此处，设备处可以理解为在以设备为中心的一定距离范围的区域。距离范围的大小可以根据实际需要进行设置。例如，在距离机床1米范围内。
40.实时声音信号为生产过程中在设备处采集到的声音信号。实时声音信号中可能包含设备运行发出的声音，也可能包含生产工人发出的声音。实时动作信号为生产过程中在设备处采集到的操作人员的动作信号。
41.对实时声音信号和/或实时动作信号进行采集和分析，可以实现对生产过程中发生的安全事件进行监控，进而对操作人员进行保护。
42.步骤120，若在实时声音信号中检测到语音指令和/或在实时动作信号中检测到动作指令，则基于语音指令和/或动作指令，以及安全控制指令库，确定用于设备执行的安全控制指令。
43.具体地，语音指令是操作人员通过语音发出的指令。例如，语音指令可以为“降低转速”、“紧急停机”等。对获取的多个实时声音信号进行检测，检测实时声音信号中是否包含语音指令。例如，可以对每一实时声音信号进行语音识别，检查识别后得到的文本是否为语音指令。
44.动作指令是操作人员通过肢体动作发出的指令。例如，动作指令可以为用各种手势表示的动作，用来代表对设备的各种操作。例如，可以用双手交叉代表对设备进行停机。
45.安全控制指令用于对生产安全设备进行控制，使得设备停止对操作人员造成伤
害。
46.候选语音指令为存储在安全控制指令库中的语音指令。候选动作指令为存储在安全控制指令库中的动作指令。安全控制指令库用于存储多个候选语音指令和/或候选动作指令、多个安全控制指令，以及候选语音指令和/或候选动作指令与安全控制指令之间的对应关系。
47.如果在多个实时声音信号中的任意一个中检测到语音指令，则在安全控制指令库中，查找与该语音指令相对应的安全控制指令，将安全控制指令发送给设备用于执行相关的控制操作，实现安全保护功能。例如，若在机床处的任一实时声音信号中检测到语音指令“紧急停机”，根据安全控制指令库储存的语音指令与安全控制指令之间的对应关系，查找到语音指令“紧急停机”对应的安全控制指令为“切断电源”，则将安全控制指令“切断电源”发送至机床，使得机床的电源被切断，机床停止运行。
48.本发明实施例提供的人员安全防护方法，通过获取设备处的实时声音信号和/实时动作信号，若在实时声音信号中检测到语音指令和/或在实时动作信号中检测到动作指令，则根据安全控制指令库中存储的候选语音指令和/或候选动作指令与安全控制指令的对应关系，确定用于设备执行的安全控制指令，由于对声音信号和/或动作信号进行检测，并连锁触发安全控制指令对设备进行控制，相比于现有的急停按钮方案，减少了操作人员的反应时间，提高了生产过程的安全性，同时，语音指令、动作指令和安全控制指令可以根据需要进行多样化设置，增加了设备安全控制和人员紧急救助的灵活性和多样性。
49.基于上述实施例，步骤110包括：
50.基于安装在设备处的多个声音传感装置和/或动作传感装置分别获取实时声音信号和/或实时动作信号；
51.其中，声音传感装置和/或动作传感装置的安装位置和安装数量是基于设备的伤害模式和伤害范围确定的。
52.具体地，声音传感装置可以为压电陶瓷式声音传感装置、电容式声音传感装置和动圈式声音传感装置中的至少一种。在监控时，为了尽可能全面和及时检测到生产安全事件，可以在设备处分别设置多个声音传感装置同步进行采集，得到多个实时声音信号。例如，在大型机床的前后左右分别设置4个麦克风，同步对该机床运行时附近的声音信号进行采集，得到4个实时声音信号。动作传感装置可以为摄像头。通过对摄像头采集到的画面中操作人员的动作进行分析，得到实时动作信号。
53.声音传感装置和/或动作传感装置的安装位置和安装数量可以根据设备的伤害模式和伤害范围确定的。伤害模式为设备对操作人员的伤害方式，例如，伤害模式可以为碰撞、挤压、切割、电击、烫伤或者激光伤害等。伤害范围为设备对操作人员进行伤害时的发生区域。例如，伤害范围可以为设备周围1米范围内。
54.对设备的伤害模式和伤害范围进行分析，确定伤害可能发生的位置，然后可以根据这些位置确定声音传感装置和/或动作传感装置的安装位置和安装数量。例如，对于自动送料小车，其伤害模式为碰撞，伤害范围为小车移动路径所覆盖的区域，则可以在小车的移动路径中每隔3米设置1个声音传感装置或者1个摄像头，声音传感装置的安装位置可以为小车移动路径两边1米范围内。又例如，对于焊接机械手臂，其伤害模式包括碰撞和激光伤害两种。对于碰撞，可以在焊接机械手臂的活动区域边缘设置多个声音传感装置或者摄像
头；对于激光伤害，可以沿着激光光源的发射方向设置多个声音传感装置或者摄像头。
55.本发明实施例提供的人员安全防护方法，通过根据设备的伤害模式和伤害范围确定声音传感装置和/或动作传感装置的安装位置和安装数量，提高了声音传感装置的利用率，提高了语音指令和动作指令的准确性。
56.基于上述任一实施例，步骤120之后包括：
57.确定检测到语音指令的声音传感装置；
58.发送包含声音传感装置的安装位置的报警信号。
59.具体地，一般地，采集到语音指令的位置总是在安全事故发生的位置或者附近区域。在任一实时声音信号中检测到语音指令后，还可以根据该实时声音信号对应的声音传感装置的安装位置生成报警信号，将该报警信号发送给监控显示屏，或者声光报警设备，便于监控人员及时了解生产安全事故发生的位置，以便在第一时间进行救助。
60.例如，可以预先存储各个声音传感装置的安装位置，安装位置通过数字编号进行表示，当检测到语音指令时，可以直接读取相应的声音传感装置的数字编号，并将该数字编号直接发送给系统，由系统通过显示屏进行提示，或者通过手持终端向监控人员发出语音提醒。
61.本发明实施例提供的人员安全防护方法，在对设备进行安全控制的同时，还能够提供安全事故发生的位置，提高了操作人员的安全性。
62.基于上述任一实施例，步骤120包括：
63.确定实时声音信号对应的语音识别基准和/或确定实时动作信号对应的动作识别基准；
64.确定安全控制指令库中每一候选语音指令和/或候选动作指令与实时声音信号和/或实时动作信号对应的语音识别基准和/或动作识别基准之间的相似度；
65.若存在任一候选语音指令和/或候选动作指令与实时声音信号和/或实时动作信号对应的语音识别基准和/或动作识别基准之间的相似度大于预设相似度阈值，则将任一候选语音指令和/或候选动作指令作为在实时声音信号中检测到的语音指令和/或在实时动作信号中检测到的动作指令。
66.具体地，语音识别基准可以为语音识别文本，动作识别基准可以为手势动作。
67.对实时声音信号中的语音指令进行检测可以采用语音识别和文本匹配相结合的方法。在实际应用场景中，多个实时声音信号是并行处理的。下面以任一实时声音信号为例进行说明。
68.首先，对于任一实时声音信号，可以对该实时声音信号进行语音识别，得到该实时声音信号对应的语音识别基准。语音识别方法包括动态时间规整算法(dynamic time warping，dtw)、隐马尔可夫算法(hidden markov model，hmm)、矢量量化算法(vector quantization，vq)和人工神经网络算法(artificial neural network，ann)等。
69.其次，将该实时声音信号对应的语音识别基准与安全控制指令库中每一候选语音指令进行语义相似度比较，若语音识别基准和任一候选语音指令的语义相似度大于预设相似度阈值，则认为语音识别基准与该候选语音指令相同，也就是说，检测到的该候选语音指令为该实时声音信号中所包含的语音指令。
70.预设相似度阈值用于衡量语音识别基准和候选语音指令的语义相似度，语义相似
度越大，则语音识别基准和候选语音指令越相似，语义相似度越小，则语音识别基准和候选语音指令之间的差别越大。预设相似度阈值可以根据需要进行设置。
71.语义相似度的计算方法包括基于向量空间模型(vector space model，vsm)的计算方法、基于汉明距离的计算方法和基于语义理解的计算方法等。
72.对实时动作信号中的动作指令进行检测可以采用图像识别的方法。例如，对摄像头采集到的图像中操作人员的实时动作信号进行检测，是否存在手势动作，然后将该手势动作与候选动作指令之间的相似度进行匹配。此处，候选动作指令可以为预先设置的标准手势动作。
73.基于上述任一实施例，确定实时声音信号对应的语音识别基准，包括：
74.确定实时声音信号的响度；
75.若响度大于预设响度阈值，则确定实时声音信号对应的语音识别基准。
76.具体地，在生产过程中设备处采集的声音信号中，除了操作人员发出包含语音指令的实时声音信号外，还包括设备运行时发出的声音、操作人员之间交流的声音以及操作人员自身发出的不包含语音指令的实时声音信号等其他声音信号。例如，语音指令为“紧急停机”，操作人员在遇到危险时可能大声呼喊“紧急停机”，在与其他操作人员进行交流时也可能说出包含“紧急停机”的语音。其中，前者为有效声音信号，后者为无效声音信号，应当对前者进行语音识别。
77.考虑到即将发生或者正在发生生产安全事故时，操作人员要么经过事先训练大声说出语音指令，要么受到伤害出自本能大声说出语音指令。可以通过实时声音信号的响度来区分有效声音信号和无效声音信号。
78.预设响度阈值用来衡量实时声音信号是否可能为有效声音信号。例如，操作人员聊天时的声音响度是明显低于大声呼救时的声音响度的。因此，可以对操作人员正常交流时的声音和大声呼救时的声音进行采集，通过对比分析得到预设响度阈值。若实时声音信号的响度大于预设响度阈值时，则认为实时声音信号有效，可能为操作人员发出的语音指令，应立即进行语音识别；若实时声音信号的响度小于预设响度阈值时，则认为实时声音信号无效，可能为环境噪音，或者操作人员正常交流时的声音。
79.本发明实施例提供的人员安全防护方法，通过实时声音信号的响度大小触发进行语音识别，能够区分有效信号和无效信号，降低了误判率，避免了频繁地对实时声音信号进行语音识别，节约了控制系统的计算资源，提高了控制算法的执行效率。
80.基于上述任一实施例，确定实时声音信号对应的语音识别基准，之前包括：
81.基于自适应滤波算法、谱减算法和维纳滤波算法中的至少一种，对实时声音信号进行降噪处理。
82.具体地，设备的工作环境可能会存在各种各样的噪声，对实时声音信号的识别造成影响，因此，在对实时声音信号进行语音识别前，可以进行降噪处理。降噪的方法包括自适应滤波算法、谱减算法和维纳滤波算法等。
83.自适应滤波算法利用前一刻已获得的滤波器参数，自动调节当前滤波器参数，以适应信号和噪声未知的或随机变化的统计特性，从而实现最优滤波。谱减算法作为经典的降噪算法实现简单，运行处理快，被广泛的应用在语音降噪领域。谱减算法，主要为用带噪信号的频谱减去噪声信号的频谱。谱减算法是基于一个简单的假设：假设语音中的噪声只
有加性噪声，只要将带噪语音谱减去噪声谱，就可以得到纯净语音。维纳滤波算法是一种基于最小均方误差准则、对平稳过程的最优估计器。这种滤波器的输出与期望输出之间的均方误差为最小，因此，它是一个最佳滤波系统，它可用于提取被平稳噪声污染的信号。
84.基于上述任一实施例，安全控制指令是基于设备对操作人员的应急保护动作确定的。
85.具体地，安全控制指令可以根据设备对操作人员的应急保护动作进行确定。例如，当设备为自动送料小车时，对操作人员可能造成的伤害模式为碰撞，对应的应急保护动作可以为立即停车。又例如，当设备为焊接机械手臂时，对操作人员可能造成的伤害模式为碰撞和激光伤害。对于碰撞，对应的应急保护动作可以为反向动作，对于激光伤害，对应的应急保护动作可以为关闭激光电源。
86.基于上述任一实施例，本发明提供一种人员安全防护方法，该方法包括：
87.步骤一、识别风险
88.对生产场景内的所有设备进行识别和分析，列出所有事故风险点。尽量做到对每个设备的造成的每一种工伤风险都完全识别。
89.需要注意的是：
90.1、一个设备可能产生多种伤害模式：例如机械手臂焊接机器人，可能会撞伤挤伤人，也可能会激光扫到人。
91.2、一个设备可能会有多个造成工伤的位置。例如自动小车如果没有自动避开人体的设计，那么在行程路径范围内都可能撞伤人。
92.步骤二、设置麦克风，采集并识别声音信号
93.识别出所有风险后，将在所有可能产生风险的位置附近布置专用的声音监控麦克风，以确保所有可能发生危险的位置都有声音监控。很显然，一个区域的系统，可能存在多个麦克风，控制系统或者控制云端会并行同步解析多个麦克风的声音信号，并能根据收集到指令的麦克风编号判定发生问题的区域和设备。
94.声音信号传输到云端后，采用语音识别算法进行声音的过滤及识别。设备工作环境可能会比较嘈杂会影响识别，可利用机器运行等杂音的频率声带的频率有差异，使用滤波算法实现过滤杂音的预处理，使得指令在嘈杂环境能被更好识别。
95.为避免操作人员闲聊或者自言自语时发出的语音会被识别误触发；声音的大小也会作为重要参数，只有当声音大道一定程度才会触发指令，因此要求遇到问题的受害者必须大声呼喊指令。
96.男女声音以及带方言的声音也会被录入，语音识别算法通过学习不同性别、年龄、口音的人的指令，来提高设备的识别率。
97.进一步的，可以设置多个指令，和设备进行交互控制，通过更精确的指令实现更精准的动作。
98.步骤三、制定安全策略
99.有的设备可能存在多种场景下对人造成不同伤害，但有的设备可能只会造成一种伤害，此时的安全策略考虑在制动后的进一步动作策略来更好保护人员。
100.位移类设备，例如小车、立体仓库小车或者机械手臂，对人的伤害只可能是挤压和碰撞，那么可能需要在救援人员赶到前反向运行一段距离，避免撞倒后持续压伤人员。旋转
类设备只可能是搅伤(搅到头发和衣服等)，当通过系统检测到语音信号后，可能需要反转一段距离，放松搅动的压力，避免持续伤人。
101.针对部分设备可能会有多重伤害，可设置多个并行指令，以丰富救援动作，例如针对起重机之类的设备除了“停止当前动作”之外，还可以设置“后退”指令可让其照前一两秒的路径反向运动，避免将人持续碰撞造成侧面挤压。也可通过“抬升”指令，让起重机抬升，避免垂直方向的挤压。进一步的，可以给设计风险的操作人员配套的穿戴设备，通过监控脉搏等体征，进一步提升准确性。
102.基于上述任一实施例，图2为本发明提供的人员安全防护装置的结构示意图，如图2所示，该装置包括：
103.获取单元210，用于获取设备处的实时声音信号和/或实时动作信号；
104.防护单元220，用于若在实时声音信号中检测到语音指令和/或在实时动作信号中检测到动作指令，则基于语音指令和/或动作指令，以及安全控制指令库，确定用于设备执行的安全控制指令。
105.本发明实施例提供的人员安全防护装置，通过获取设备处的实时声音信号和/实时动作信号，若在实时声音信号中检测到语音指令和/或在实时动作信号中检测到动作指令，则根据安全控制指令库中存储的候选语音指令和/或候选动作指令与安全控制指令的对应关系，确定用于设备执行的安全控制指令，由于对声音信号和/或动作信号进行检测，并连锁触发安全控制指令对设备进行控制，相比于现有的急停按钮方案，减少了操作人员的反应时间，提高了生产过程的安全性，同时，语音指令、动作指令和安全控制指令可以根据需要进行多样化设置，增加了设备安全控制和人员紧急救助的灵活性和多样性。
106.基于上述任一实施例，安全控制指令库包括多个候选语音指令和/或候选动作指令，以及分别与各个候选语音指令和/或候选动作指令对应的安全控制指令
107.基于上述任一实施例，获取单元210具体用于：
108.基于安装在设备处的多个声音传感装置和/或动作传感装置分别获取实时声音信号和/或实时动作信号。
109.基于上述任一实施例，声音传感装置和/或动作传感装置的安装位置和安装数量是基于设备的伤害模式和伤害范围确定的。
110.基于上述任一实施例，该装置还包括：
111.报警单元，用于确定检测到语音指令的声音传感装置和/或确定检测到动作指令的动作传感装置；发送包含声音传感装置和/或动作传感装置的安装位置的报警信号。
112.基于上述任一实施例，防护单元220包括：
113.基准识别子单元，用于确定实时声音信号对应的语音识别基准和/或确定实时动作信号对应的动作识别基准；
114.相似度确定子单元，用于确定安全控制指令库中每一候选语音指令和/或候选动作指令与实时声音信号和/或实时动作信号对应的语音识别基准和/或动作识别基准之间的相似度；
115.检测子单元，用于若存在任一候选语音指令和/或候选动作指令与实时声音信号和/或实时动作信号对应的语音识别基准和/或动作识别基准之间的相似度大于预设相似度阈值，则将任一候选语音指令和/或候选动作指令作为在实时声音信号中检测到的语音
指令和/或在实时动作信号中检测到的动作指令。
116.基于上述任一实施例，基准识别子单元包括：
117.响度确定模块，用于确定实时声音信号的响度；
118.语音识别模块，用于若响度大于预设响度阈值，则确定实时声音信号对应的语音识别基准。
119.基于上述任一实施例，防护单元220还包括：
120.降噪子单元，用于基于自适应滤波算法、谱减算法和维纳滤波算法中的至少一种，对实时声音信号进行降噪处理。
121.基于上述任一实施例，安全控制指令是基于设备对操作人员的应急保护动作确定的。
122.基于上述任一实施例，图3为本发明提供的电子设备的结构示意图，如图3所示，该电子设备可以包括：处理器(processor)310、通信接口(communications interface)320、存储器(memory)330和通信总线(communications bus)340，其中，处理器310，通信接口320，存储器330通过通信总线340完成相互间的通信。处理器310可以调用存储器330中的逻辑命令，以执行如下方法：
123.获取设备处的实时声音信号和/或实时动作信号；若在实时声音信号中检测到语音指令和/或在实时动作信号中检测到动作指令，则基于语音指令和/或动作指令，以及安全控制指令库，确定用于设备执行的安全控制指令；其中，安全控制指令库包括多个候选语音指令和/或候选动作指令，以及分别与各个候选语音指令和/或候选动作指令对应的安全控制指令。
124.此外，上述的存储器330中的逻辑命令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干命令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read
‑
only memory)、随机存取存储器(ram，random access memory)、磁碟或者光盘等各种可以存储程序代码的介质。
125.本发明实施例提供的电子设备中的处理器可以调用存储器中的逻辑指令，实现上述方法，其具体的实施方式与前述方法实施方式一致，且可以达到相同的有益效果，此处不再赘述。
126.本发明实施例还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各实施例提供的方法，例如包括：
127.获取设备处的实时声音信号和/或实时动作信号；若在实时声音信号中检测到语音指令和/或在实时动作信号中检测到动作指令，则基于语音指令和/或动作指令，以及安全控制指令库，确定用于设备执行的安全控制指令；其中，安全控制指令库包括多个候选语音指令和/或候选动作指令，以及分别与各个候选语音指令和/或候选动作指令对应的安全控制指令。
128.本发明实施例提供的非暂态计算机可读存储介质上存储的计算机程序被执行时，
实现上述方法，其具体的实施方式与前述方法实施方式一致，且可以达到相同的有益效果，此处不再赘述。
129.以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
130.通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如rom/ram、磁碟、光盘等，包括若干命令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
131.最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。