一种提升会议质量的方法、设备和存储介质与流程

1.本发明涉及通信技术领域，尤其涉及一种提升会议质量的方法、设备和存储介质。


背景技术：

2.在实际工作中，有很多的工作需要大家讨论沟通后决定，但是因为这次疫情的问题，导致大部分人只能在家上班，开会只能采用网络会议电话的模式进行沟通。在网络会议中，多方发言是经常出现的，信号问题，流量问题，多人发言等一系列问题都会影响到会议的质量。目前的会议电话不会对发言人说话进行处理，或者是在确认发言人后就对其他发言人进行静音。前面的一种方案在多人发言的情况下，容易干扰主发言人，导致主发言人的声音听不清楚问题。


技术实现要素：

3.本发明实施例的主要目的在于提出一种提升会议质量的方法、设备和存储介质，旨在保证网络会议中主发言人能够清晰的被他人听到的同时，其他发言人也有发言的权利，并且不会干扰到主发言人的发言，保证会议质量。
4.为至少实现上述目的，本发明实施例提供了一种提升会议质量的方法，所述方法包括以下步骤：在由多个终端参加的网络会议中，接收所述每个终端发送的状态信息；根据所述每个终端的状态信息，确定所述网络会议中的主讲终端；根据所确定的主讲终端进行会议质量提升处理。
5.为至少实现上述目的，本发明实施例提供了一种提升会议质量的方法，包括：检测终端的状态信息，所述状态信息包括下述一种或多种信息：用户与麦克风mic之间的距离，用户的身份信息，及用户的语音音色信息；将检测到的状态信息发送至服务器，以使得所述服务器从参加网络会议的多个终端中确定所述网络会议中的主讲终端；根据所确定的主讲终端进行会议质量提升处理。
6.为至少实现上述目的，本发明实施例还提出了一种提升会议质量的设备，所述设备包括存储器、处理器、存储在所述存储器上并可在所述处理器上运行的程序以及用于实现所述处理器和所述存储器之间的连接通信的数据总线，所述程序被所述处理器执行时实现前述方法的步骤。
7.为至少实现上述目的，本发明提供了一种计算机可读存储介质，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现前述方法的步骤。
8.本发明提出的一种提升会议质量的方法、设备和存储介质，其既能保证发言人能被其他人听清，同时能够实时更新发言人(保证发言人不是固定的)，优化网络电话的性能。
附图说明
9.图1是依据本发明一实施例提供的一种提升会议质量的方法流程图。
10.图2是依据本发明另一实施例提供的一种提升会议质量的方法流程图。
11.图3是本发明实施例提供的一段时间内检测发言人的语音能量信号变化示意图。
12.图4是本发明实施例提供的对图3的语音能量信号进行处理的示意图。
具体实施方式
13.应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
14.在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明，其本身没有特有的意义。因此，“模块”、“部件”或“单元”可以混合地使用。
15.实施例一
16.如图1所示，依据本发明实施例提供了一种提升会议质量的方法流程图，可以包括以下步骤：
17.步骤s110：在由多个终端参加的网络会议中，接收所述每个终端发送的状态信息；
18.步骤s120：根据所述每个终端的状态信息，确定所述网络会议中的主讲终端；
19.步骤s130：根据所确定的主讲终端进行会议质量提升处理。
20.应说明的是，在一实施方式中，上述提升会议质量的方法可以运行于服务器中被执行，也可以作为应用程序安装运行于终端中被执行。所述终端可以是会议终端、手机等任意适用的可以参加网络会议或电话会议或其他方式会议的终端。为了便于介绍，下述以服务器执行上述方法进行说明。
21.进一步的，所述状态信息包含用户与麦克风mic之间的距离或用户的身份信息，其中所述根据所述每个终端的状态信息，确定所述网络会议中的主讲终端包括：当所述状态信息包括用户与麦克风mic之间的距离时，依据每个所述终端的状态信息中的用户与麦克风mic之间距离，确认用户与麦克风mic之间距离最小的状态信息所对应的终端，将该终端作为主讲终端；或当所述状态信息包括用户的身份信息时，依据用户的身份信息为主讲人时，该该用户的身份信息所对应的终端作为主讲终端。
22.其中，所述状态信息包含用户与麦克风mic之间距离和用户的语音音色；其中，所述根据所述每个终端的状态信息，确定所述网络会议中的主讲终端包括：根据每个所述终端的状态信息中的用户与麦克风mic之间距离，确定至少一个目标终端的状态信息中的用户语音音色，其中，所述用户与麦克风mic之间距离小于预设距离；从预存的用户音色特征库中查询是否有所述终端的状态信息中的用户的语音音色；当所述服务器从预存的用户音色特征库中查询到所述终端的状态信息中的用户的语音音色时，将所述终端作为所述网络会议中的主讲终端。
23.本发明实施例所述方法还包括：根据所述每个终端的状态信息，确定所述网络会议中的参会终端；根据所确定的参会终端进行会议质量提升处理。
24.其中，所述确定所述网络会议中的参会终端包括：当所述状态信息包括用户与麦克风mic之间的距离时，依据每个所述终端的状态信息中的用户与麦克风mic之间距离，确认用户与麦克风mic之间距离大于预设距离的状态信息所对应的一个或多个终端，将所述一个或多个终端作为参会终端；或当所述状态信息包括用户的身份信息时，依据用户的身份信息为参会人员时，将所述终端作为所述网络会议中的参会终端。
25.本发明实施例还包括：接收所述主讲终端或所述参会终端发送的状态信息；当确认所述主讲终端的状态信息发生变化时，将所述主讲终端切换为参会终端；或当确认所述参会终端的状态信息发生变化时，将发生变化的参会终端切换为所述主讲终端。
26.本发明实施例在由多个终端组成的网络会议中之前，还包括：接收所述每个终端发送的用户音色特征或身份信息，并将所述每个用户音色特征或身份信息进行保存；其中，所述身份信息包括主发言人和其他参会人员。
27.其中，所述根据所确定的主讲终端进行会议指令提升处理可以包括下述一种或多种方式进行：通过mic拾取所述主讲终端的声音，并自动对所述主讲终端的mic拾取的音量进行增强处理；将主讲终端使用的mic采用第一采样模式；将所述主讲终端的网络传输设置为最高优先权的网络传输。在一实施方式中，可以通过将下述方式来进行增强处理：声音响度自动归一化，通过mic拾取声音并自动对声音的音量进行增强，提升响度。在一实施方式中，也可以采用声音音质最优原则：声音可以采用48k/32k/16k/8k等采样(具体采样方式也可以根据实际情况而定)，当选定为主发言人时，其所使用的mic采用最优的采样模式，清晰度最高；在一实施方式中，也可以采用网络传输最优原则：信号传输排序中，主发言人的信号传输优先权最高或比参会终端的优先权高。
28.其中，所述根据所确定的参会终端进行会议指令提升处理也可以包括下述一种或多种方式：通过mic拾取所述参会终端的声音，并自动对所述参会终端的mic拾取的音量进行降低处理，对参会终端使用的mic采用第二采样模式，将所述参会终端的网络传输设置为较低优先权的网络传输。在一实施方式中，可以将参会终端的声音响度自动减半；例如在确定有主发言人的情况下，对其他发言人的声音进行减弱但是不是完全消除，保证其声音可以听到(自动检测声音响度，在检测到是语音的情况下，声音音量如果太小也会给与一定的增强，但是增强的程度不大于50％)；在一实施方式中，也可以采用声音音质自动降低原则，例如，在确定有主发言人的情况下，通过检测信号的强度来确认其他发言人可以使用的采样速率，如果信号强度很强则可以采用48k/32k等采样(具体采样方式也可以根据实际情况而定)，如果信号低于一定的阈值，则强制降低采样率，将采样率降低到8k采样。在一实施方式中，也可以采用网络传输最低原则：信号传输排序中，其他发言人的信号传输优先权最低或比所述主讲终端的优先权低。
29.实施例二
30.图2是依据本发明另一实施例提供的一种提升会议质量的方法流程图，如图2所示，所述方法可以包括：
31.步骤s210：检测终端的状态信息，所述状态信息包括下述一种或多种信息：用户与麦克风mic之间的距离，用户的身份信息，及用户的语音音色信息；
32.步骤s220：将检测到的状态信息发送至服务器，以使得所述服务器从参加网络会议的多个终端中确定所述网络会议中的主讲终端；
33.步骤s230：根据所确定的主讲终端进行会议质量提升处理。
34.应说明的是，上述实施例中提升会议质量的方法可以运行于终端上。
35.依据本发明的一实施例，提出了一种提升会议质量的设备(附图未示出)，所述设备可以包括存储器、处理器、存储在所述存储器上并可在所述处理器上运行的程序以及用于实现所述处理器和所述存储器之间的连接通信的数据总线，所述程序被所述处理器执
行，以实现如图1或如图2所示的具体步骤。
36.依据本发明的一实施例，提出了一种计算机可读存储介质，该计算机可读存储介质可以存储有一个或者多个程序，该一个或者多个程序可被一个或者多个处理器执行，以实现如图1或图2可以所示的具体步骤。
37.本发明实施例提供的方法、设备、计算机存储介质可以针对网络会议或电话会议进行会议质量的提升，通过对会议中主讲终端或其他终端的动态识别，并结合音量、音质、网络等对会议的质量进行优化，保证了会议的质量。
38.在一实施方式中，所述提升会议质量的方法还可以针对会议参与人数据库自动建立：获取使用会议应用的用话的音色：使用会议应用的人，可能会录制一段固定语音(录制非必须，如果用户需要检测自己应用的mic和喇叭的是否ok时简单录制)，用来检测该用户的音色特征，并保存到数据库中。该用户首次使用该应用时，通过用户使用时的语音检测到说话，并自动录制一段该用户的音色特征，并保存到数据库中。
39.在一实施方式中，所述提升会议质量的方法还可以自动识别并保存相关信息：主讲人，参会人员或其他会议人员的角色并保存到数据库中。
40.在一实施例中，所述参会人员可以有至少两种身份变换：主发言人，参会人员等。在其他实施方式中，可以根据实际会议的身份安排有其他身份的变换。
41.在一实施方式中，在会议创建后，所述提升会议质量的方法还可以通过检测发言人音色和mic的振幅确认哪个终端对应的是主发言人，并确认其他终端的优先级降级为听众模式，例如可以将其他终端作为参会终端并执行相应的处理。
42.在一实施方式中，所述提升会议质量的方法还可以实时检测主发言人和mic之前的距离变化，mic拾取到的信号能量变化，如果主发言人和mic的距离出现明显的变化，则将主发言人对应的终端切换为听众模式。
43.其中，检测一段时间内发言人的语音能量信号是否出现明显的变化，如图3所示。能量energy(t3ˉt4)《energy(t2ˉt3)-ndb(n为可以分辨出mic距离变化的一定大小的响度),说明mic已经远离主发言人，这个信号表示主发言人已经讲完，或者不需要再说话。
44.在一实施方式中，可以实时根据存储的数据库信息检测主发言人的语音音色，在对语音进行分离后，确认其是否处于发言状态，对主发言人的语音进行处理，检测其是否处于静音状态，如图4所示。
45.在一实施方式中，可以使用vad(voice activity detection语音检测策略)，从声音信号流里面识别和确认长时间的静音期，当静音期长达一段时间或者以上的话，会议终端侧将状态信息发送到会议处理中心(服务器)，会议处理中心根据信息将默认发言人释放其发言人权利。当然也可以利用其他识别手段来识别是否处于静音模式等，例如，判断到所述发言人的终端设备音频设备等切换为静音，可以确认该发言人释放其发言人的权利。
46.在一实施方式中，还可以根据语音识别策略，在会议处理中心(服务器中)，如果获得的数据发现主发言人没有释放权限的情况有识别到除发言人以外的人，则将其加入到发言人中(主发言人数小于等于3人)。其他参会人在会议开始时自动设置为默认听众模式，在会议过程中，自动检测其与mic之间的距离，以及mic拾取到的信号能量的大小变化，当信号出现突变大于2s，且信号为语音时，会议终端将状态信息发送到会议处理中心，会议处理中心根据目前是否存在主发言人来确认是否提升其角色，如果信号维持超过一段时间则将其
设置为主发言人；如果主发言人已经释放权限，通过用户终端的mic语音检测并提供给会议处理中心发现有两个或两个以上的用户在发言，则会议处理中心根据mic拾取到的音量大小或者随机设置其中的一人为主发言人(其他人员为备选主发言人)，并实施检测该主发言人的mic语音能量，如果出现静音或者音量降低时自动释放其主发言人身份。
47.本发明实施例提出的一种提升会议质量的方法、设备和存储介质，其通过对参会人员建立了数据库，在开启会议时，自动识别保存了参会人员的语音特征，及其参会的身份特征。在开会会议过程中，根据与会人员的身份特征，以及语音特征，对他们的语音进行处理，增强发言人的语音清晰度和响度，同时降低其他人员的语音特征。同时发言人的身份不是特定的，是根据语音检测和距离检测等一系列的方法自动更新发言人。保证了网络会议中主发言人能够清晰的被他人听到的同时，其他发言人也有发言的权利，并且不会干扰到主发言人的发言。
48.本领域普通技术人员可以理解，上文中所公开方法中的全部或某些步骤、系统、设备中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。
49.在硬件实施方式中，在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分；例如，一个物理组件可以具有多个功能，或者一个功能或步骤可以由若干物理组件合作执行。某些物理组件或所有物理组件可以被实施为由处理器，如中央处理器、数字信号处理器或微处理器执行的软件，或者被实施为硬件，或者被实施为集成电路，如专用集成电路。这样的软件可以分布在计算机可读介质上，计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的，术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于ram、rom、eeprom、闪存或其他存储器技术、cd-rom、数字多功能盘(dvd)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外，本领域普通技术人员公知的是，通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据，并且可包括任何信息递送介质。
50.以上参照附图说明了本发明的优选实施例，并非因此局限本发明的权利范围。本领域技术人员不脱离本发明的范围和实质内所作的任何修改、等同替换和改进，均应在本发明的权利范围之内。