线上音源控制方法、装置、设备与流程

1.本技术实施例涉及信息技术领域，涉及但不限于一种线上音源控制方法、装置、设备。


背景技术：

2.在工位和附近的同事参加同一个线上会议的工作场景下，由于网络数据传输带来的延迟，当旁边同事发言时会同时听到线下、线上两个错位的声音，给人带来不舒适感，同时影响会议质量。导致发言者附近的参会者能听到两个不同步的声音，影响会议内容的清晰度、可懂度，降低在线工作效率。


技术实现要素：

3.有鉴于此，本技术实施例提供一种线上音源控制方法、装置、设备。
4.本技术实施例的技术方案是这样实现的：
5.第一方面，本技术实施例提供一种线上音源控制方法，所述方法包括：从环境音中提取至少一个第一人声；获取所述线上音源中第二人声对应的声纹模型；确定任一所述第一人声与所述声纹模型匹配；在所述线上音源中停止所述第二人声的播放。
6.第二方面，本技术实施例提供一种线上音源控制装置，所述装置包括：提取模块，用于从环境音中提取至少一个第一人声；获取模块，用于获取所述线上音源中第二人声对应的声纹模型；第一确定模块，用于确定任一所述第一人声与所述声纹模型匹配；停止模块，用于在所述线上音源中停止所述第二人声的播放。
7.第三方面，本技术实施例提供一种电子设备，包括存储器和处理器，所述存储器存储有可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述方法。
8.第四方面，本技术实施例提供一种存储介质，存储有可执行指令，用于引起处理器执行时，实现上述方法。
9.本技术实施例中，首先从环境音中提取至少一个第一人声；然后获取所述线上音源中第二人声对应的声纹模型；最后确定任一所述第一人声与所述声纹模型匹配；在所述线上音源中停止所述第二人声的播放。这样，通过环境音监提取、声纹识别，在确定任一第一人声与声纹模型匹配的情况下，自动停止线上音源的播放，可以消除语音延迟带来的错位现象，提高参会效果和体验。
附图说明
10.图1为本技术实施例提供的一种线上音源控制方法的实现流程示意图；
11.图2为本技术实施例提供的一种从环境音中提取至少一个第一人声方法的实现流程示意图；
12.图3为本技术实施例提供的一种获取线上音源中第二人声对应的声纹模型方法的实现流程示意图；
13.图4为本技术实施例提供的一种线上音源控制方法的实现流程示意图；
14.图5为本技术实施例提供的一种线上音源控制装置的组成结构示意图；
15.图6为本技术实施例提供的电子设备的一种硬件实体示意图。
具体实施方式
16.为使本技术实施例的目的、技术方案和优点更加清楚，下面将结合本技术实施例中的附图，对申请实施例的具体技术方案做进一步详细描述。以下实施例用于说明本技术，但不用来限制本技术的范围。
17.在以下的描述中，涉及到“一些实施例”，其描述了所有可能实施例的子集，但是可以理解，“一些实施例”可以是所有可能实施例的相同子集或不同子集，并且可以在不冲突的情况下相互结合。
18.在以下的描述中，所涉及的术语“第一\第二\第三”仅仅是是区别类似的对象，不代表针对对象的特定排序，可以理解地，“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序，以使这里描述的本技术实施例能够以除了在这里图示或描述的以外的顺序实施。
19.除非另有定义，本文所使用的所有的技术和科学术语与属于本技术的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本技术实施例的目的，不是旨在限制本技术。
20.本技术实施例提供一种线上音源控制方法，如图1所示，该方法包括：
21.步骤s110、从环境音中提取至少一个第一人声；
22.环境音即周围环境的所有声音，至少包括环境中的背景噪声和其他声音。这里，可以利用拾音设备获取环境音，其中，拾音设备是用来采集现场声音再传送到后端设备的一个器件。以拾音设备为拾音头为例，拾音头是一种靠接收声音振动，将声音进行降噪、放大的电声学仪器。举例来说，线上会议的模拟拾音头，可以通过麦克风对声音的拾取，经过选频网络、以高性能低噪声双运算放大器(双运放)集成电路芯片为核心器件的放大降噪网络和自动反馈网络，达到声音拾取、放大及降噪功能扩大性能有效的降噪。
23.在实施过程中，其他声音包括环境中的人声，由于在环境中可能存在多个人声，所以可以从环境音中提取至少一个第一人声。这里，提取人声的方法包括以下至少之一：利用音频录制和编辑软件(adobe audition，au)进行人声的提取，还可以先滤除环境中的背景噪声再对其他声音进行识别，在确定存在人声的情况下提取出人声。
24.步骤s120、获取所述线上音源中第二人声对应的声纹模型；
25.这里，线上指的是网络上，举例来说线上会议就是在网络上开的会议。线上音源即从网络端获取到的音源，该音源包括发言者的第二人声。
26.声纹(voiceprint)，可以是用电声学仪器显示的携带言语信息的声波频谱。声纹模型，即根据发言者的声纹特征确定的模型。声纹特征可以是与人类的发音机制的解剖学结构有关的特征。每个人都有可以标识个人特性的声纹特征，即，每个人的声纹特征都是不同的。
27.在实施过程中，可以先通过播放器获取线上音源中第二人声，然后再基于第二人声确定该第二人声对应的声纹模型。
28.步骤s130、确定任一所述第一人声与所述声纹模型匹配；
29.在实施过程中，可以将识别到的每一第一人声与该声纹模型匹配，确定一个与该声纹模型匹配的第一人声。举例来说，在线上会议的场景下，如果存在用户正在参会，周围有其他参会者的发言的情况下，可以确定该发言者与线上的声纹模型匹配；如果用户正在参会，且正在发言，也可以确定该发言者与线上的声纹模型匹配。
30.步骤s140、在所述线上音源中停止所述第二人声的播放。
31.在一些实施例中，用户正在参会，周围有其他参会者的发言的情况下，可以停止线上音源的播放，以消除用于同时听到两个存在时延声音的错位不适感。
32.在一些实施例中，用户正在参会，且正在发言，也可以停止线上音源的播放，以对实现对用户本人说话声音进行回声消除。
33.本技术实施例中，首先从环境音中提取至少一个第一人声；然后获取所述线上音源中第二人声对应的声纹模型；最后确定任一所述第一人声与所述声纹模型匹配；在所述线上音源中停止所述第二人声的播放。这样，通过环境音监提取、声纹识别，在确定任一第一人声与声纹模型匹配的情况下，自动停止线上音源的播放，可以消除语音延迟带来的错位现象，提高参会效果和体验。
34.在一些实施例中，在上述步骤s130“确定任一所述第一人声与所述声纹模型匹配”之后，线上音源控制方法还包括以下步骤：
35.步骤s150、对与所述声纹特征匹配的第一人声做降噪和/或增益处理，得到目标第一人声；
36.在一些实施例中，可以对第一人声做降噪处理，得到目标第一人声。这里，降噪可以运用是声波被相互抵消的原理。通过拾音设备采集环境中的背景噪声，然后实时发送与背景噪声反向的声波，从而抵消掉的背景噪声；也可以对背景噪声对应频段的声音进行抑制，以降低背景噪声。
37.在一些实施例中，可以对第一人声做增益处理，得到目标第一人声。这里，可以先确定第一人声对应的频段，再对该频段的声音进行放大处理，可以得到提升增益的第一人声。
38.在一些实施例中，可以对第一人声先所降噪处理，再做增益处理，得到目标第一人声。这里，可以先降低第一人声中的背景噪声，再对得到的相对纯净的人声片段做增益处理，可以得到更清晰的第一人声。
39.步骤s160、播放所述目标第一人声。
40.本技术实施例中，对与所述声纹特征匹配的第一人声做降噪和/或增益处理，得到目标第一人声；播放所述目标第一人声。这样，播放出的目标第一人声的声音会更清晰，音量也更大。由于第一人声是从实时监测的环境音中获取的，无需网络传输，可以减少延迟和信息损失。
41.在一些实施例中，以上步骤s110“从环境音中提取至少一个第一人声”，如图2所示，可以通过以下步骤实现：
42.步骤s111、确定所述线上音源的播放环境中出现声音能量突变；
43.声音能量是自然界存在最为广泛的能量形式其中之一。举例来说，存在说话、音乐以及环境噪声等形式的声音能量。
44.在实施过程中，可以预先设置声音能量阈值，在确定采集到的环境音中的声音能量大于该声音能量阈值的情况下，确定该播放环境中出现声音能量突变。举例来说，在用户正在参加线上会议的情况下，用户所处环境中突然有人说话的情况下，可以确定出现声音能量突变。
45.步骤s112、获取所述环境音；
46.这里，确定声音能量突变，即在环境音中可能出现了人声，在这种情况下，再获取环境音，可以基于该环境音有效确定是否存在区别于环境噪声的其他声音。
47.步骤s113、确定所述环境音中存在人声；
48.这里，可以对区别于环境噪声的其他声音进行人声识别，以确定该环境音中是否存在人声。
49.步骤s114、对所述环境音进行人声提取得到至少一个所述第一人声。
50.本技术实施例中，首先确定所述线上音源的播放环境中出现声音能量突变；然后获取所述环境音；确定所述环境音中存在人声；最后对所述环境音进行人声提取得到至少一个所述第一人声。这样，不需要实时判断环境音中存在人声，只需要在播放环境中出现声音能量突变的情况下，确定环境音中存在人声，可以有效提升人声判断的准确性，也可以达到降低能耗的作用。
51.在一些实施例中，以上步骤114“对所述环境音进行人声提取得到至少一个所述第一人声”可以通过以下步骤实现：
52.步骤1141、获取所述播放环境中的背景噪声；
53.背景噪声，即被测量声源以外的声源发出的环境噪声的总和。举例来说，用户在工位参与线上会议的情况下，背景噪声即工作附近的噪声；用户在会议室参与线上会议的情况下，背景噪声即会议室中的噪声。
54.在实施过程中，可以预先采集播放环境中的背景噪声。
55.步骤1142、从所述环境音中过滤所述背景噪声，得到目标环境音；
56.这里，采集到的环境音中包括背景噪声和其他声音，从环境音中过滤背景噪声，得到的是区别于背景噪声的目标环境音。举例来说，在确定线上音源的播放环境中出现声音能量突变的情况下，从环境音中过滤背景噪声，可以得到声音能量突变部分的其他声音。
57.步骤1143、从所述目标环境音中提取至少一个所述第一人声。
58.本技术实施例中，首先获取所述播放环境中的背景噪声；然后从所述环境音中过滤所述背景噪声，得到目标环境音；最后从所述目标环境音中提取至少一个所述第一人声。这样，由于目标环境音是过滤背景噪声之后的声音，所以从目标环境音中提取第一人声的提取效率更高。
59.在一些实施例中，上述步骤s120“获取所述线上音源中第二人声对应的声纹模型”，如图3所示，可以通过以下步骤实现：
60.步骤s121、获取所述线上音源中的第二人声；
61.步骤s122、确定所述第二人声已注册在用于记录所述声纹模型的声纹模型库；
62.这里，声纹模型库是用于记录至少一个声纹模型的。举例来说，线上会议的声纹模型库可以记录线上发言的每一个发言者对应的声纹模型。
63.步骤s123、从所述声纹模型库中调取所述第二人声对应的声纹模型；
64.在实施过程中，每一发言者非首次发言的情况下，可以先确定该第二人声已注册在用于记录所述声纹模型的声纹模型库，再从该声纹模型库中调取第二人声对应的声纹模型。
65.步骤s124、确定所述第二人声对应的声纹模型未记录在所述声纹模型库；
66.步骤s125、基于所述第二人声确定所述声纹模型；
67.步骤s126、将所述声纹模型注册至所述声纹模型库。
68.在实施过程中，每一发言者首次发言的情况下，可以先确定该第二人声对应的声纹模型，再将该声纹模型注册至声纹模型库。
69.本技术实施例中，获取线上音源中的第二人声；确定第二人声已注册在用于记录声纹模型的声纹模型库；从声纹模型库中调取所述第二人声对应的声纹模型；确定第二人声对应的声纹模型未记录在声纹模型库；基于第二人声确定声纹模型；将声纹模型注册至声纹模型库。这样，由于建立了声纹模型库，在用户非首次发言的情况下，可以直接从声纹模型库中调取对应的声纹模型，提升了确定第二人声对应的声纹模型的效率。
70.在一些实施例中，在步骤s130“确定任一所述第一人声与所述声纹模型匹配”之后，步骤s140“停止所述第二人声的播放”之前，线上音源控制方法还包括以下步骤：
71.步骤170、利用语音活动检测对所述第二人声进行停顿判断；
72.这里，语音活动检测(voice activity detection，vad)，又称语音端点检测，语音边界检测，目的是从输入的语音中对语音和非语音进行区分。可以利用语音活动检测对第二人声进行停顿判断。
73.步骤180、确定所述第二人声处于停顿状态。
74.本技术实施例中，在确定任一第一人声与所述声纹模型匹配之后，可以利用语音活动检测对第二人声进行停顿判断，以确定第二人声处于停顿状态，然后再停止第二人声的播放。这样，对线上音源进行语音停顿时刻判断，在停顿处停止第二人声的播放，可以减少由于第二人声突然停止给用户带来的不适感。
75.在一些实施例中，上述步骤s140“停止所述第二人声的播放”，可以通过以下步骤实现：
76.步骤141、停止所述线上音源的播放；或，
77.在实施过程中，可以停止所有线上音源的播放，以实现停止第二人声的播放。
78.步骤142、从所述线上音源中滤除所述第二人声。
79.在实施过程中，还可以从线上音源中过滤与第一人声匹配的第二人声，以实现停止第二人声的播放。可以基于第二人声对应的频段，从所述线上音源中过滤该频段对应的声音。
80.本技术实施例中，可以停止线上音源的播放；或，从所述线上音源中滤除所述第二人声，以实现停止第二人声的播放。
81.图4为本技术实施例提供的一种线上音源控制方法的流程示意图，如图4所示包括环境音检测41、线上语音分析42和声音匹配与音源切换43三部分，其中：
82.环境音检测41可以通过以下步骤实现：
83.步骤1、利用用户拾音设备获取环境音；
84.在实施过程中，该环境音包括场景噪音和突变的声音能量，其中，突变的声音能量
包括人声，举例来说，用户正在参与线上会议，周围工位有人开始说话，该说话的人可能是在参与线上会议的发言。
85.步骤2、预设场景噪音过滤；
86.在实施过程中，可以通过预设环境音(工位、会议室等)，从环境音中过滤环境背景噪音(场景噪音)。
87.步骤3、声音能量突变检测；
88.在实施过程中，可以根据能量突变判断是否出现新声音。在确定出现新声音的情况下，执行步骤4。
89.步骤4、声音类型判断；
90.在实施过程中，可以对新声音进行声音类型的判断。在判断新声音为人声(第一人声)的情况下，执行步骤5。
91.步骤5、人声分割和提取；
92.在实施过程中，可以对第一人声进行分割，获取至少一个第一人声；再提取出每一人声对应的纯净人声片段(人声信号)。
93.步骤6、人声增益；
94.在实施过程中，可以对提取的每一第一人声信号进行降噪和/或增益处理。
95.线上语音分析42可以通过以下步骤实现：
96.步骤1、获取线上会议输出的第二人声；
97.步骤2、基于当前声纹模型进行发言者变换监测；
98.会议开始时进行声纹模型初始化。会议中，线上声音(第二人声)与当前声纹模型进行匹配。若匹配不成功，则标记发言者身份变换，否则继续标记为当前模型的发言者。
99.步骤3、确定当前声纹模型是否注册在声纹模型库；
100.监测到发言者切换的情况下，将第二人声与存储在设备上的声纹模型库进行匹配。若不存在，执行步骤4；若匹配成功，执行步骤5。
101.步骤4、声纹新模型注册；
102.在实施过程中，可以在声纹模型库中注册该新的声纹模型，并可选择地保存在设备的声纹模型库。
103.步骤5、声纹模型更新。
104.在实施过程中，可以从声纹模型库中读取该声纹模型，做为当前声纹模型。
105.声音匹配与音源切换43可以通过以下步骤实现：
106.步骤1、声纹识别；
107.在实施过程中，对环境音监测提取的环境人声(第一人声)与线上当前声纹模型进行一比一匹配。若匹配成功，可以进行音源切换，即执行步骤2；若未匹配成功，则说明该人声不属于当前会议，继续使用会议线上音源，即执行步骤5。
108.步骤2、通过检测用户语音开关，判断用户发言状态；
109.在实施过程中，在检测到用户语音开关为打开状态的情况下，可以确实是用户自己正在发言，执行步骤5；在检测到用户语音开关为关闭状态的情况下，可以确实是用户自己未在发言，执行步骤3。
110.步骤3、利用语音活动检测，判断线上发言停顿；
111.在实施过程中，音源切换时刻判断可以使用语音活动检测，对线上音源进行语音停顿时刻判断，在停顿处进行音源切换，以减少由于音源突然切换给用户带来的不适感。
112.步骤4、切换环境音源(第一人声)；
113.在实施过程中，可以将拾音器采集的第一人声作为音源进行播放。
114.在一些实施例中，发言者切换监测持续工作，当确定发言者切换的情况下，可以切换回线上音源，并继续进行发言者切换监测。
115.步骤5、使用线上音源(第二人声)。
116.本技术实施例中，会议软件增加环境音源输入，在保证降噪前提下，开启环境人声增益，并与线上发言者人声进行声纹识别一比一匹配。若未匹配成功，则说明该人声不属于当前会议，使用会议线上音源；若匹配成功，则说明该人声为当前发言者，此时关闭线上音源，切换为线下环境音源。将与发言者匹配成功的人声进行增强，作为会议环境音源，使得与发言者近距离空间的会议者只听到一个清晰的人声。
117.本技术提供的技术方案带来的有益效果至少包括：消除同时听到环境声源、线上延迟声源的错位不适感；实时监测环境音，无需网络传输，减少延迟和信息损失；设备模型库可以存储历史声音信息；用户可自定义选择开启/关闭本功能。
118.基于前述的实施例，本技术实施例提供一种线上音源控制装置，该装置包括所包括的各模块，各模块包括各子模块，各子模块包括单元，可以通过电子设备中的处理器来实现；当然也可通过具体的逻辑电路实现；在实施的过程中，处理器可以为中央处理器(cpu)、微处理器(mpu)、数字信号处理器(dsp)或现场可编程门阵列(fpga)等。
119.图5为本技术实施例提供的线上音源控制装置的组成结构示意图，如图5所示，所述装置500包括：
120.提取模块510，用于从环境音中提取至少一个第一人声；
121.获取模块520，用于获取所述线上音源中第二人声对应的声纹模型；
122.第一确定模块530，用于确定任一所述第一人声与所述声纹模型匹配；
123.停止模块540，用于在所述线上音源中停止所述第二人声的播放。
124.在一些实施例中，所述装置还包括处理模块和播放模块，其中，所述处理模块，用于对与所述声纹特征匹配的第一人声做降噪和/或增益处理，得到目标第一人声；所述播放模块，用于播放所述目标第一人声。
125.在一些实施例中，所述提取模块510包括第一确定子模块、第一获取子模块、第二确定子模块和提取子模块，其中，所述第一确定子模块，用于确定所述线上音源的播放环境中出现声音能量突变；所述第一获取子模块，用于获取所述环境音；所述第二确定子模块，用于确定所述环境音中存在人声；所述提取子模块，用于对所述环境音进行人声提取得到至少一个所述第一人声。
126.在一些实施例中，所述提取子模块包括获取单元、过滤单元和提取单元，其中，所述获取单元，用于获取所述播放环境中的背景噪声；所述过滤单元，用于从所述环境音中过滤所述背景噪声，得到目标环境音；所述提取单元，用于从所述目标环境音中提取至少一个所述第一人声。
127.在一些实施例中，所述获取模块520包括第二获取子模块、第三确定子模块和调取子模块，其中，所述第二获取子模块，用于获取所述线上音源中的第二人声；所述第三确定
子模块，用于确定所述第二人声已注册在用于记录所述声纹模型的声纹模型库；所述调取子模块，用于从所述声纹模型库中调取所述第二人声对应的声纹模型。
128.在一些实施例中，所述获取模块520还包括第四确定子模块、第五确定子模块和注册子模块，其中，所述第四确定子模块，用于确定所述第二人声对应的声纹模型未记录在所述声纹模型库；所述第五确定子模块，用于基于所述第二人声确定所述声纹模型；所述注册子模块，用于将所述声纹模型注册至所述声纹模型库。
129.在一些实施例中，所述装置还包括判断模块和第二确定模块，其中，所述判断模块，用于利用语音活动检测对所述第二人声进行停顿判断；所述第二确定模块，用于确定所述第二人声处于停顿状态。
130.在一些实施例中，所述停止模块540包括停止子模块和滤除子模块，其中停止子模块，用于停止所述线上音源的播放；滤除子模块，用于从所述线上音源中滤除所述第二人声。
131.以上装置实施例的描述，与上述方法实施例的描述是类似的，具有同方法实施例相似的有益效果。对于本技术装置实施例中未披露的技术细节，请参照本技术方法实施例的描述而理解。
132.需要说明的是，本技术实施例中，如果以软件功能模块的形式实现上述方法，并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本技术实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得电子设备(可以是手机、平板电脑、笔记本电脑、台式计算机等)执行本技术各个实施例所述方法的全部或部分。而前述的存储介质包括：u盘、移动硬盘、只读存储器(read only memory，rom)、磁碟或者光盘等各种可以存储程序代码的介质。这样，本技术实施例不限制于任何特定的硬件和软件结合。
133.对应地，本技术实施例提供一种存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述实施例中提供的线上音源控制方法中的步骤。
134.对应地，本技术实施例提供一种电子设备，图6为本技术实施例提供的电子设备的一种硬件实体示意图，如图6所示，该设备600的硬件实体包括：包括存储器601和处理器602，所述存储器601存储有可在处理器602上运行的计算机程序，所述处理器602执行所述程序时实现上述实施例中提供的线上音源控制方法中的步骤。
135.存储器601配置为存储由处理器602可执行的指令和应用，还可以缓存待处理器602以及电子设备600中各模块待处理或已经处理的数据(例如，图像数据、音频数据、语音通信数据和视频通信数据)，可以通过闪存(flash)或随机访问存储器(random access memory，ram)实现。
136.这里需要指出的是：以上存储介质和设备实施例的描述，与上述方法实施例的描述是类似的，具有同方法实施例相似的有益效果。对于本技术存储介质和设备实施例中未披露的技术细节，请参照本技术方法实施例的描述而理解。
137.应理解，说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本技术的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外，这些特定的特征、结
构或特性可以任意适合的方式结合在一个或多个实施例中。应理解，在本技术的各种实施例中，上述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本技术实施例的实施过程构成任何限定。上述本技术实施例序号仅仅为了描述，不代表实施例的优劣。
138.需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个
……”
限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
139.在本技术所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。
140.上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元；既可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
141.另外，在本技术各实施例中的各功能单元可以全部集成在一个处理单元中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
142.本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、只读存储器(read only memory，rom)、磁碟或者光盘等各种可以存储程序代码的介质。
143.或者，本技术上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本技术实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得电子设备(可以是手机、平板电脑、笔记本电脑、台式计算机等)执行本技术各个实施例所述方法的全部或部分。而前述的存储介质包括：移动存储设备、rom、磁碟或者光盘等各种可以存储程序代码的介质。
144.本技术所提供的几个方法实施例中所揭露的方法，在不冲突的情况下可以任意组合，得到新的方法实施例。
145.本技术所提供的几个产品实施例中所揭露的特征，在不冲突的情况下可以任意组合，得到新的产品实施例。
146.本技术所提供的几个方法或设备实施例中所揭露的特征，在不冲突的情况下可以任意组合，得到新的方法实施例或设备实施例。
147.以上所述，仅为本技术的实施方式，但本技术的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本技术揭露的技术范围内，可轻易想到变化或替换，都应涵盖在
本技术的保护范围之内。因此，本技术的保护范围应以所述权利要求的保护范围为准。