5G专网的质量评估方法、装置、电子设备及存储介质与流程

5g专网的质量评估方法、装置、电子设备及存储介质
技术领域
1.本技术涉及通信技术领域，尤其涉及一种5g专网的质量评估方法、装置、电子设备及存储介质。


背景技术：

2.随着通信技术的不断发展，运营商给用户提供的通信服务也越来越丰富，同时5g专网能够针对特殊业务需求，为用户提供安全、可靠以及定制化的网络服务，实现更为精准和专业和的网络通信。
3.为了保证5g专网的正常运营和日常维护，运营商需要对5g专网的通信质量进行评估，同时，由于5g专网是根据用户需求所部署多种多样的业务对其提供的具体通信服务质量进行调整，而这些不同的业务对通信质量的要求又不完全相同。例如，有的业务对丢包率要求较高、时延要求较低，而有的业务对时延要求较高等。因此，在5g专网处理的业务较为复杂多样的情况下，如何能够更加灵活、有效地对5g专网的通信质量进行评估，是本领域亟需解决的技术问题。


技术实现要素：

4.本技术提供一种5g专网的质量评估方法、装置、电子设备及存储介质，用于对5g专网的通信质量进行评估。
5.本技术第一方面提供一种5g专网的质量评估方法，包括：获取待评估的5g专网执行的多个通信业务，以及每个所述通信业务的多个通信指标；根据预设的多个业务类别，将所述多个通信业务进行分类；确定所述多个业务类别中，每个所述业务类别所对应的所述多个通信指标的第一权重值；根据所述第一权重值对所述多个通信业务的通信指标进行加权处理，得到所述多个通信业务的业务评估参数；确定所述多个通信业务中，每个所述通信业务所对应的第二权重值；根据所述第二权重值对所述多个通信业务的业务评估参数进行加权处理，得到通信质量参数；其中，所述通信质量参数用于对所述5g专网的通信质量进行评估。
6.在本技术第一方面一种实现方式中，所述确定所述多个通信业务中，每个所述通信业务所对应的第二权重值，包括：将所述5g专网执行所述多个通信业务时每个通信业务的通信流量，在所述5g专网的总通信流量中的占比，作为所述多个通信业务中每个通信业务对应的第二权重值。
7.在本技术第一方面一种实现方式中，所述通信指标包括：通信速率、通信时延、通信抖动和丢包率；所述通信业务类别包括：上行大带宽业务、下行大带宽业务、实时交互业务和大连接业务。
8.在本技术第一方面一种实现方式中，所述获取待评估的5g专网进行的多个通信业务，以及每个所述通信业务的通信指标，包括：根据深度包检测dpi技术，获取所述5g专网在预设时间段内的业务流量、报文内容和通信参数；根据所述业务流量、所述报文内容和所述
通信参数，确定所述5g专网进行的通信业务，并计算每个通信业务的通信指标。
9.在本技术第一方面一种实现方式中，所述根据预设的多个业务类别，将所述多个通信业务进行分类，包括：按照预设的多个业务类别，将所述多个通信业务中的每个所述通信业务归类为所述多个业务类别中的一个或多个业务类别。
10.在本技术第一方面一种实现方式中，对于所述多个通信业务中，归类为多个业务类别的第一通信业务，得到所述第一通信业务的业务评估参数的步骤，包括：根据所述第一权重值，对所述第一通信业务中，对应于每个业务类别的通信指标进行加权处理，得到所述第一通信业务对应于多个业务类别的业务评估子参数；根据所述第一通信业务对应的每个业务类别的第三权重值，对所述多个业务类别的业务评估子参数进行加权处理，得到所述第一通信业务的业务评估参数。
11.在本技术第一方面一种实现方式中，所述得到通信质量参数之后，还包括：根据所述通信质量参数所在的第一数值区间和第一映射关系，确定所述5g专网的通信质量级别；所述第一映射关系包括多个第一数值区间，以及每个所述第一数值区间对应的通信质量级别；根据所述多个通信业务中，每个通信业务的业务评估参数所在的第二数值区间和第二映射关系，确定所述通信业务的通信质量级别；所述第二映射关系包括多个第二数值区间，以及每个所述第二数值区间对应的通信质量级别。
12.在本技术第一方面一种实现方式中，所述方法还包括：在显示界面上显示所述5g专网的通信质量级别和/或所述多个通信业务的通信质量级别。
13.本技术第二方面提供一种5g专网的质量评估装置，包括：获取模块，获取待评估的5g专网执行的多个通信业务，以及每个所述通信业务的多个通信指标；分类模块，根据预设的多个业务类别，将所述多个通信业务进行分类；第一确定模块，确定所述多个业务类别中，每个所述业务类别所对应的所述多个通信指标的第一权重值；业务评估模块，根据所述第一权重值对所述多个通信业务的通信指标进行加权处理，得到所述多个通信业务的业务评估参数；第二确定模块，确定所述多个通信业务中，每个所述通信业务所对应的第二权重值；质量评估模块，根据所述第二权重值对所述多个通信业务的业务评估参数进行加权处理，得到通信质量参数；其中，所述通信质量参数用于对所述5g专网的通信质量进行评估。
14.本技术第三方面提供一种电子设备，包括：处理器以及存储器；其中，存储器中存储有计算机程序，当处理器执行计算机程序时，处理器可用于执行如本技术第一方面任一项所述的5g专网的质量评估方法。
15.本技术第四方面提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被执行时可用于执行如本技术第一方面任一项所述的5g专网的质量评估方法。
16.综上，本技术提供的5g专网的质量评估方法、装置、电子设备及存储介质，能够针对5g专网提供的不同类别的业务，对所提供的业务的质量以及整个5g专网的通信质量进行评估，尤其在不同5g专网的业务类别下，对不同业务类别的通信指标使用不同第一加权值计算通信业务的业务评估参数，并根据5g专网所有多个通信业务的业务流量，使用第二加权值计算5g专网整体的通信质量参数，从而实现对5g专网的通信质量进行评估，进而使得运营商能够根据质量评估结果对5g专网更好地进行设置与维护，保证5g专网的正常运营和日常维护。
附图说明
17.为了更清楚地说明本技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
18.图1为一种业务质量感知映射模型；
19.图2为本技术提供的一种5g专网的质量评估模型的建立方法；
20.图3为本技术提供的5g专网的质量评估方法一实施例的流程示意图；
21.图4为一种对5g专网进行dpi采集的系统部署结构图；
22.图5为本技术提供的显示界面一实施例的效果示意图；
23.图6为本技术提供的5g专网的质量评估方法另一实施例的流程示意图；
24.图7为本技术提供的5g专网的质量评估装置一实施例的结构示意图；
25.图8为本技术提供的电子设备一实施例的结构示意图。
具体实施方式
26.下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本技术一部分实施例，而不是全部的实施例。基于本技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本技术保护的范围。
27.本技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本技术的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
28.随着通信技术的不断发展，运营商给用户提供的通信服务也越来越丰富，例如在运营商给用户提供的个人移动通信服务中，网页浏览、视频传输、游戏等互联网业务和语音通话占据了80％以上的流量。又例如，随着5g技术的广泛应用，5g专网可以为个人用户提供安全、可靠以及定制化的网络服务。其中，5g专网能够针对特殊业务需求，为用户提供更为精准和专业和的网络通信。
29.由于5g专网是根据用户需求所部署多种多样的业务对其提供的具体通信服务质量进行调整，而这些不同的业务对通信质量的要求又不尽相同，例如在5g专网提供的视频类业务(机器视觉、视频监控等)对丢包率要求较高、时延要求较低；而工业生产控制数据、物联网传感器采集等控制业对时延要求较高。因此，在5g专网处理的业务较为复杂多样的情况下，如何能够更加灵活、有效地对5g专网的通信质量进行评估，是本领域亟需解决的技术问题。
30.本技术针对上述技术问题，提供一种5g专网的质量评估方法，能够针对5g专网提供的不同类型的业务，对所提供的业务的质量以及整个5g专网的通信质量进行评估，使得
供应商能够根据评估结果对5g专网更好地进行设置与维护，保证5g专网的正常运营和日常维护。下面以具体地实施例对本技术的技术方案进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例不再赘述。
31.本技术针对5g专网的质量评估体系，提供一种5g专网业务的类别划分规则、一种5g专网业务的通信指标的选取规则、一种5g专网业务的评估规则，以及一种业务指标影响因子的模板。下面首先分别对这些用于对5g专网进行质量评估的规则和模板进行说明。
32.在一些实施例中，本技术可以将5g专网所执行的通信业务至少划分为如下几个业务类别：大带宽(enhanced mobile broadband，简称：embb)业务、实时交互(ultra-reliable and low latency communications，简称：urllc)业务和大连接(massive machinetype communication，简称：mmtc)业务。其中，大带宽业务进一步可以划分为：上行大带宽业务(或者称为无明显下行带宽需求的业务，如视频回传等)和下行大带宽业务(或者被称为无明显上行带宽需求的业务，如流媒体播放等)两种业务类别。
33.示例性地，在智能制造的应用场景中，5g专网执行的智能制造相关的通信业务包括：视频监控、机器视觉、机器人控制、可编程逻辑控制器(programmable logic controller，简称：plc)工业控制和数据采集等。则按照这些通信业务的业务需求，可以将这些通信业务划分为上述四种业务类别中的一种业务类别，其划分的结果如表1所示。
34.表1
[0035][0036]
其中，机器视觉和机器人控制需要上行传输高清视频和各种传感器数据，可以被划分为表1中
“●”
指示的上行大带宽类业务；而对设备进行的plc工业控制，可以被划分为表1中
“●”
指示的实时交互类业务。同时，在网络侧处理时，类似于机器视觉这种复合型业务，一般按照多业务要求承载在不同的切片或qos流(qos flow)之上，当作不同业务处理，使得机器视觉等通信业务可以被划分为不同多个的业务类别。具体地，上述通信业务进行业务解析得到业务类别的过程可以通过如下表2示出。
[0037]
表2
[0038][0039]
在一些实施例中，为了5g专网的通信质量进行衡量，本技术还提供一种通过对5g专网所执行的通信业务的异常事件进行质量衡量的通信指标。具体地，图1为一种业务质量感知映射模型，如图1所示出了影响用户体验的感知指标服务质量(quality of service，简称：qoe)所对应的业务指标(key quality indicator，简称：kqi)，可以具体应用的网络指标kpi包括：通信速率、通信时延、通信抖动和丢包率。示例性地，在典型的智能制造场景中，视频回传、视频点播、plc实时控制、电网差动保护等业务，影响用户体验qoe的网络关键指标kqi均可以归纳为速率、时延、抖动、丢包的影响。此外，为了网络质量评估模板的可扩展性(完整性)，引入业务特殊指标(如接入性能、移动性能等)作为对有特殊指标要求的专网业务的网络质量评估补充因素，可以按需补充到上述模板的通信指标中。本技术实施例中将这些影响记为通信指标，如下表3示出了不同业务类别所对应的通信指标(kpi)的一种具体对应关系。
[0040]
表3
[0041][0042]
在一些实施例中，本技术还提供一种应用于5g专网的网络指标评估模板，用于对5g专网的质量进行量化评估。其中，在5g专网的应用场景中，由于对通信指标的监控相对于个人移动通信网更为严格，因此设置的量化门限值应较低，使得低于门限标注的量化值都被认为通信质量下降而出发后续告警等处理。
[0043]
在一些实施例中，本技术可以对5g专网的质量划分为三个通信质量级别，包括：优秀、良好和告警，以及对每个通信指标的通信质量也可以划分为上述三个级别。示例性地，将用于指示5g专网通信质量参数记为指标数据(sampling data)则在对5g专网进行质量评估时，计算得到该通信质量参数后，可以通过如下表4所示的对应关系来确定5g专网的通信质量级别。
[0044]
表4
[0045][0046]
其中，3对应于优秀的通信质量级别，所采集的网络指标数据data较“优秀”门限(threshold1)更佳，表明网络性能指标有较为充裕的安全余量；2对应于良好的通信质量级别，所采集的网络指标数据处于“优秀”门限(threshold1)与“告警”门限(threshold2)之间，说明网络指标正常，可以满足业务正常工作需要，但安全余量较小；1对应于告警的通知质量级别，所采集的网络指标数据data劣于“告警”门限(threshold2)，说明网络指标不能满足业务正常工作，需要告警提示专业人员进行网络性能排查；0为异常，表示该指标在该业务评估时不予考虑等。
[0047]
按照上述表4中相同的方式，还可以分别定义四个通信指标，通信速率、通信时延、通信抖动和丢包率的通信质量等级，如下表5所示：
[0048]
表5
[0049][0050]
此外，本技术仅提供了上述四个通信指标的通信质量等级作为示例，可以理解的是，可应用于5g专网的特殊指标(如接入性能、移动性能等)同样按照上述相同的方式进行评估设计，补充相关门限参数，并最终按5g专网业务需求纳入评估系统。
[0051]
在一些实施例中，本技术还提供一种业务指标影响因子的模板，可用于根据通信业务的通信指标对通信业务的质量进行评价时，对不同的通信指标予以不同的加权。其中，针对5g专网的业务中不同业务类别的特点，可以对不同业务类别的通信业务给予不同的权重值，记为第一权重值、或者记为影响权重/影响因子等。示例性地，如下表6为本技术提供的第一权重值的具体实现方式。
[0052]
表6
[0053][0054]
其中，对于上行大带宽业务，包括如视频监控、视频记录存储、直播拉流等业务，其特点是根据视频编码的帧率、码率、分辨率等视频质量进行实时传输，对网络传输的速率要求要满足码率要求即可，对传输时延有一定要求。因此，如表6所示的第一权重值中，上行速率为关键指标，速率的第一权重值最高，设定为5。对于影响多媒体回传质量的丢包率的第一权重值最高设定为3，时延和抖动的第一权重值最高设定为2。下行传输要求不高，第一权重值最高设定为1或0。
[0055]
对于下行大带宽业务，该业务于传统2c的流媒体传输业务模型相同，对下行传输速率有较高要求，第一权重值设定为5，下行丢包的第一权重值设定为3，时延和抖动的第一权重值设定2。上行传输要求不高，其第一权重值设定为1或0。
[0056]
对于实时交互业务，主要是小包传输业务，对网络带宽没有诉求，主要是超低时延要求。对于工业级的urllc业务，对实验和抖动要求更为苛刻。因此双向时延和抖动的第一权重值设定为5，上下行速率的第一权重值设定为2。由于工业控制命令一般由上层协议通过多次发送和重传机制保障不会丢包，丢包的第一权重值可以设定为0。
[0057]
对于大连接业务，mmtc业务数据包大小和吞吐量要求通常很小，但是设备密度很高。最大的挑战和关注点是网络对高连接密度的支持能力和网络能效这两个方面。通常的业务质量评价是从业务体验和传输质量视角对业务进行评价，但是mmtc业务对传输要求低，但是对网络资源的开销，对网络能耗利用率影响大，也是从业务建网视角看的关键评价维度，目标是质量可以保障的同时，资源占用最少，能量开销最低。这类业务主要靠应用层保障数据传输的可靠性，对带宽和时延要求都不高，第一权重值可以设定为1，丢包的第一权重值可以设定子为2。
[0058]
结合上述实施例中，本技术提供的对5g专网通信业务划分的业务类别、选取的通信指标、制定的评估规则，即可实现对5g专网的通信质量进行评估。而在评估之前，可以建立通用的评估模型，或称为评估模板等，使得不同的5g专网可以配置不同的模板，使得对5g专网的评估方法的应用更加灵活，具有更广泛、更普遍的适用性。例如，图2为本技术提供的一种5g专网的质量评估模型的建立方法，其中，该方法包括如下步骤：
[0059]
s1：确定待评估的5g专网所执行的通信业务，即，对5g专网所部署的通信业务进行业务梳理，得到5g专网所执行的通信业务，或者所执行的部分主流业务等，例如，s1中可以确定5g专网所执行的i个通信任务如下表7所示。
[0060]
表7
[0061][0062]
s2：根据预设的上行大带宽业务、下行大带宽业务、实时交互业务和大连接业务等多个业务类别，对s1中确定的通信业务进行分类，将每个通信业务划分为预设的多个业务类别中的一个或多个类别。例如将表7中的i个通信业务，拆分成j个业务小类后，可以分别对应于k个不同的通信业务的业务类别，最终得到如表8所示的分类结果。
[0063]
表8
[0064][0065]
s3：确定s2中每个通信业务的通信指标，并以表格或者矩阵形式建立通信业务与对应的通信指标的对应关系，即生成网络质量评估表，实现对分好类的各个业务进行业务指标选取及评分定义，给出所涉及业务的关键指标评分标准，定义网络指标评估模板；并按照该专网业务分类维度，生成该专网业务的网络质量评估表如下表9所示。
[0066]
表9
[0067][0068]
则当确定5g专网的多个通信业务的上述通信指标后，即可代入表9中的网络指标评估一列，将表9中向网络指标评估所填充的通信指标记为网络指标评估结果矩阵r，可以通过如下公式一表示：
[0069][0070]
其中，r用于表示一个填充如表9中的一个业务或者一个业务的小类对应的通信指标，j为多个通信业务划分的小类数，k为影响通信业务的通信指标的数量，在表9中k对应于上行的4个通信指标、下行的4个通信指标和1个业务特殊指标共9列。
[0071]
s4：确定当前5g专网的第一权重值，即生成网络指标权重表：对已给出的各类指标的默认权重/影响因子模板进行校验，调整因子，形成如网络指标权重/影响因子，如表10所示，可以理解的是表6为表10的一种具体取值的示例实现方式。
[0072]
表10
[0073][0074]
其中，f为某类业务指标的权重/影响因子，记为第一权重值。可以理解的是，在实际应用的过程中，可以针对当前待评估的专网中不同业务分解后的业务小类，调整该5g专网对应的业务指标的权重/影响因子，形成表10中的fj,k，最终组成该专网的业务小类权重/影响因子矩阵f可以通过如下公式二表示：
[0075][0076]
s5：设置业务间初始权重表：对于各个业务所占专网业务量进行各业务间的权重调整，形成如表11所示的业务权重矩阵记为w。
[0077]
表11
[0078][0079]
其中，w
,j
为业务小类权重，w为业务小类权重矩阵，可以通过如下公式三表示，公式三中的初始默认权值为各个类型业务权值相同，后续可以根据业务在专网中业务占比自动实时调整。
[0080][0081]
s6：根据s1-s5所设置的参数，建立用于5g专网质量评估的计算模型。
[0082]
具体地，对于5g专网所执行的每个通信业务，定义与通信业务有关的业务评估参数的计算公式如下公式四表示：
[0083][0084]
其中，q为每个通信业务的业务评估参数，j为业务小类的数量，r为通过公式一生成的矩阵，f为通过公式二生成的矩阵。随后可以通过如下公式五，对属于同一个通信业务的子类进行加权平均后，可以得到5g专网执行的一个可以划分为多个业务类别的通信业务的质量评分，记为该通信业务的业务评估参数。
[0085][0086]
其中，i为5g专网中第i个通信业务，该第i个通信业务可分解为表8中的m到n个业务小类。最终计算出所有通信业务的业务评估参数后可以得到如下公式六的业务评估矩阵，其中，i为5g专网所执行的通信业务的数量。
[0087][0088]
随后，可以设置针对待评估的5g专网的通信业务的通信质量评估门限，并通过将公式六中每个通信业务的业务评估参数与通信质量评估门限进行比较方式，确定每个通信业务的通信质量级别，其对应关系如下表12所示。
[0089]
表12
[0090][0091]
在一些实施例中，对于5g专网整体的通信质量，在计算与通信业务有关的通信质量参数时，可以针对5g专网所执行的多个通信业务的通信流量确定每个通信任务对5g专网的通信质量参数的权重值，记为第二权重值。
[0092]
例如，可以对5g专网所执行的i个通信业务定义业务量占比矩阵t如下公式七表示：
[0093][0094]
其中，up_service__traff_ratioi为5g专网的第i个通信业务占5g专网总业务流量的比例。随后可结合公式六和公式七，通过如下公式八计算出考虑业务流量占比的第二权重值修正的，5g专网的通信质量参数：
[0095][0096]
或者，还可以结合公式三和公式四，通过如下公式九计算出不考虑业务流量占比的5g专网的通信质量参数：
[0097]qpn
＝[q]
t x[w]
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
公式九
[0098]
最终，可以设置针对待评估的5g专网的通信质量评估门限，并通过将上述公式八或者公式九，计算出的通信质量参数与通信质量评估门限进行比较方式，确定5g专网的通信质量级别，其对应关系如下表13所示。
[0099]
表13
[0100][0101]
根据上述图2所示的方法建立的5g专网的质量评估模型，本技术还提供一种可以使用该模型对5g专网进行质量评估的方法，其执行主体可以是电脑、服务器等电子设备，本技术以电子设备作为执行主体，对电子设备执行5g专网的质量评估方法的过程进行说明。例如，图3为本技术提供的5g专网的质量评估方法一实施例的流程示意图，如图3所示，本实施例提供的5g专网的质量评估方法包括：
[0102]
s101：电子设备获取待评估的5g专网执行的多个通信业务，以及每个通信业务的多个通信指标。
[0103]
在一些实施例中，电子设备可以根据运营商的工作人员的指示，对待评估的5g专网进行质量评估，或者，电子设备可以按照预设的任务，在指定的时间对预设的5g专网进行质量评估。则在s101中，为了对5g专网进行质量评估，首先确定5g专网所执行的多个通信业务，以及每个通信业务的通信指标，其中，通信指标包括：通信速率、通信时延、通信抖动和丢包率等。
[0104]
在一些实施例中，在s101中，电子设备具体可以通过深度包检测(deep packet inspection，简称：dpi)的方式，获取待评估的5g专网在预设时间段内的业务流量、报文内容和通信参数等，随后根据所获取的业务流量、报文内容和通信参数确定5g专网的通信业务，并计算每个通信业务的通信指标。
[0105]
例如，图4为一种对5g专网进行dpi采集的系统部署结构图，其中，dpi信令采集系统对相关网络接口链路进行旁路分光，对链路中的数据进行实时分析并生成信令详单(sdr，针对于信令部分)和流量详单(fdr，针对于用户面流量数据)。并将所有的详单(sdr和fdr，统称xdr)传送到dpi合成器进行数据关联，生成信令面及用户面的xdr原始话单。并通过属于该专网的imsi过滤出属于该专网的xdr话单。基于业务的网络质量评估指标主要基于用户面xdr话单计算生成。随后，按照5分钟、1小时、24小时维度提取业务相关指标形成用户面宽表，如下表14所示，并以“业务名称(servname)”为基准对用户面宽表进行合并，得到按照业务维度统计的xdr网络指标，即可获得相关的网络性能kpi，时间粒度同样对应为5分钟、1小时、24小时。
[0106]
表14
[0107]
ncistringcelliddnnstringapnmccstring国家码mncstring运营商网络代码gpsistringmsisdnsupistringimsipeistringpeitacidstringpei前8位servnamestring业务小类唯一值service_typestring目的ip网络指标1
……
网络指标2
……
网络指标3
……………
[0108]
随后，基于上述获取的内容，可以计算5g专网的通信指标，其中，业务流量：可以通过用户面宽表参数获取，得到上行业务流量up_service_ul_traff、下行业务流量up_service_dl_traff和总业务流量up_service_total_traff，随后即可通过如下公式十计算出多个通信业务中，每个通信业务i的业务量占比，最终形成公式七中的业务量占比矩阵t。
[0109][0110]
通过如下公式十一计算业务速率，即通信指标中的通信速率，其中由于各个用户的业务流量和时长不同，计算业务速率时计算各个中户的平均业务速率，up_service_ul/dl_traff为上/下行业务流量，up_ul_dura_total_time为上/下行时间持续总时长。
[0111][0112]
通过如下公式十二计算业务平均速率，其中，l为时间粒度内使用通信业务的用户数量。
[0113][0114]
通过如下公式十三计算通信指标中的通信时延，其中，对于tcp业务，如http网页浏览，选取上下行tcp rtt时延作为业务端到端时延，则可以得到上行rtt总时延up_ul_rtt_total_time_delay和下行rtt总时延up_dl_rtt_total_time_delay，而对于承载在udp上的业务，需要分析udp之上的应用协议来客观反映业务时延。如，多媒体业务，需要分析rtp协议等。
[0115][0116]
up_rtp_ul/dl_packet为rtp上/下行报数，up_rtp_ul/dl_duration为rtp上/下行
业务时长。
[0117]
所获取的通信指标中的通信抖动，包括上行抖动时延up_ul_jitter_sum、下行抖动时延up_dl_jitter_sum、上行抖动统计个数up_ul_jitter_count、下行抖动统计个数up_dl_jitter_count、上行最大抖动up_ul_jitter_max和下行最大抖动up_dl_jitter_max。
[0118]
通过如下公式十四计算通信指标中的丢包率，其中，tcp依靠重传机制保障无丢包；承载在upd上的业务需要依赖上层协议统计丢包。如，多媒体业务，需要分析rtp协议，可以获得rtp上行丢包数ul_rtp_ul/dl_lost_packet和rtp上/下行总包数up_rtp_ul/dl_total_packet。
[0119][0120]
s102：电子设备对s101中获取的多个通信业务进行分类，根据预设的多个业务类别，将多个通信业务划分为其中的一个或者多个业务类别。
[0121]
在一些实施例中，通信业务类别包括：上行大带宽业务、下行大带宽业务、实时交互业务和大连接业务。则电子设备在s102中可以按照表9所示的方式，对多个通信业务进行分类，并确定每个通信业务对应的通信指标，进而得到公式一种的网络指标评估结果矩阵r用于后续计算。
[0122]
s103：电子设备确定多个业务类别中，每个业务类别对应的多个通信指标的第一权重值。
[0123]
在一些实施例中，电子设备可以在s103中确定表10所示的不同业务类别对应的多个通信指标的第一权重值，并根据所有业务类别的多个通信指标的第一权重值形成公式二中的第一权重值矩阵f用于后续计算。
[0124]
在一些实施例中，第一权重值可以是预设的、也可以是运营商所指定的，例如可以提前存储在电子设备中，或者由电子设备通过互联网获取。或者，第一权重值可以根据不同的条件进行设置，例如a地区的5g专网使用一种第一权重值、b地区的5g专网使用另一种权重值等；或者白天使用一种第一权重值、夜间使用另一种权重值等，来提高第一权重值的粒度，进而提高质量评估的准确性。
[0125]
s104：电子设备根据第一权重值对多个通信业务的通信指标进行加权处理，得到多个通信业务的业务评估参数。
[0126]
在一些实施例中，电子设备具体根据s103中得到的矩阵f进行对s102中得到的矩阵r进行加权处理，通过公式四计算出多个通信业务中每个通信业务的业务评估参数，并形成公式六中的业务评估参数矩阵。
[0127]
更为具体地，对于归类为多个业务类别中多个业务类别的第一通信业务，该第一通信业务即为表11中对应于多个小类的通信业务，则通过公式四计算出该第一通信业务对应的多个业务类别的业务评估子参数后，通过公式五对所有业务评估子参数进行加权平均的方式，得到该第一通信业务对应的业务评估参数，其中，将加权值记为第三权重值。
[0128]
s105：电子设备确定多个通信业务中，每个通信业务所对应的第二权重值。其中，每个通信业务对应的第二权重值可以是预设的、可以是运营商指定的；或者，第二权重值还可以根据5g专网的多个通信业务的通信流量在总通信流量中的占比确定的。
[0129]
例如，在一些实施例中，电子设备在s105中可以通过公式七所示的方式，确定出业
务量占比矩阵t用于后续计算，该矩阵包括5g专网的i个通信业务的通信流量(或称为业务流量)在5g专网的业务流量的占比。使得通信业务流量较大的通信业务在对5g专网进行质量评估时将分配更大的权重值，能够更全面、有效地对5g专网进行质量评估。
[0130]
s106：根据s105中确定的第二权重值，对多个通信业务的业务评估参数进行加权处理，得到5g专网的通信质量参数。
[0131]
在一些实施例中，电子设备在s106中具体可以通过公式八的计算方式，计算得到5g专网的通信质量参数，使得所计算得到的通信质量参数可用于后续对5g专网的通信质量进行评估。
[0132]
随后，电子设备在得到5g专网的通信质量参数后，可以根据表13所示的方式，根据计算得到的通信质量参数所在的第一数值区间和表13中的第一映射关系，确定5g专网的通信质量级别为优秀、良好或者告警。
[0133]
以及，电子设备在得到多个通信业务的业务评估参数后，也可以通过如表12所示的方式，根据计算得到的业务评估参数所在的第二数值区间，和表12中的第二映射关系，确定通信业务的通信质量级别为优秀、良好或者告警。
[0134]
在一些实施例中，当电子设备确定上述5g专网的通信质量级别，以及每个通信业务的通信质量级别后，在显示器等显示界面上，显示所得到的5g专网的通信质量级别和/或多个通信业务的通信质量级别。例如，图5为本技术提供的显示界面一实施例的效果示意图，其中，电子设备在显示界面上显示5g专网的通信质量级别为“良好”，以及显示每个通信业务1-i的通信质量等级，以及每个通信业务对应的小类的详细指标等。
[0135]
图6为本技术提供的5g专网的质量评估方法另一实施例的流程示意图，示出了如图4所示方法的一种具体实现方式，其中，作为执行主体的电子设备通过dip数据采集后，进行dip数据分析并提取网络基础性能指标等，从而确定5g专网的多个通信业务和通信指标。随后，电子设备将通信指标输入图2所建立的网络指标评估模板后得到表9所示的指标评分，进而将表9所示的指标评分输入表10中通过第一权重值确定的网络质量评估模板，实现计算每个业务的业务评估参数，并可以在不考虑每个通信业务的流量的情况下，通过公式九得到整个5g专网的质量总体评分。而当考虑每个业务的通信流量，则可以根据dip数据分析得到5g专网中每个通信业务的流量，得到公式七中的业务量占比矩阵，随后根据业务量占比调整第二权重值后，最终通过公式八得到5g专网的的质量总体评分即通信质量参数。
[0136]
综上，本技术实施例提供的5g专网的质量评估方法，能够针对5g专网提供的不同类别的业务，对所提供的业务的质量以及整个5g专网的通信质量进行评估，尤其在不同5g专网的业务类别下，对不同业务类别的通信指标使用不同第一加权值计算通信业务的业务评估参数，并根据5g专网所有多个通信业务的业务流量，使用第二加权值计算5g专网整体的通信质量。使得运营商能够根据评估结果对5g专网更好地进行设置与维护，保证5g专网的正常运营和日常维护。此外，本技术实施例提供的5g专网的质量评估方法还能够根据5g专网的业务流量的变化，自适应地实时调整计算通信质量参数的权重值，从而更加真实、有效地对5g专网的当前通信质量进行评估，使得评估结果具有准确性和时效性。
[0137]
在前述各实施例中，对本技术实施例提供的5g专网的质量评估方法进行了介绍，而为了实现上述本技术实施例提供的5g专网的质量评估方法中的各功能，作为执行主体的电子设备可以包括硬件结构和/或软件模块，以硬件结构、软件模块、或硬件结构加软件模
块的形式来实现上述各功能。上述各功能中的某个功能以硬件结构、软件模块、还是硬件结构加软件模块的方式来执行，取决于技术方案的特定应用和设计约束条件。
[0138]
例如，图7为本技术提供的5g专网的质量评估装置一实施例的结构示意图，如图7所示，本技术还提供一种5g专网的质量评估装置，包括：获取模块1001、分类模块1002、第一确定模块1003、业务评估模块1004、第二确定模块1005和质量评估模块1006。其中，获取模块1001用于获取待评估的5g专网执行的多个通信业务，以及每个所述通信业务的多个通信指标；分类模块1002用于根据预设的多个业务类别，将所述多个通信业务进行分类；第一确定模块1003用于确定所述多个业务类别中，每个所述业务类别所对应的所述多个通信指标的第一权重值；业务评估模块1004用于根据所述第一权重值对所述多个通信业务的通信指标进行加权处理，得到所述多个通信业务的业务评估参数；第二确定模块1005用于确定所述多个通信业务中，每个所述通信业务所对应的第二权重值；质量评估模块1006用于根据所述第二权重值对所述多个通信业务的业务评估参数进行加权处理，得到通信质量参数；其中，所述通信质量参数用于对所述5g专网的通信质量进行评估。
[0139]
具体地，5g专网的质量评估装置中的各模块分别执行的上述步骤的具体原理及实现方式，可参考本技术前述实施例中的5g专网的质量评估方法中的描述，不再赘述。
[0140]
需要说明的是，应理解以上装置的各个模块的划分仅仅是一种逻辑功能的划分，实际实现时可以全部或部分集成到一个物理实体上，也可以物理上分开。且这些模块可以全部以软件通过处理元件调用的形式实现；也可以全部以硬件的形式实现；还可以部分模块通过处理元件调用软件的形式实现，部分模块通过硬件的形式实现。可以为单独设立的处理元件，也可以集成在上述装置的某一个芯片中实现，此外，也可以以程序代码的形式存储于上述装置的存储器中，由上述装置的某一个处理元件调用并执行以上确定模块的功能。其它模块的实现与之类似。此外这些模块全部或部分可以集成在一起，也可以独立实现。这里所述的处理元件可以是一种集成电路，具有信号的处理能力。在实现过程中，上述方法的各步骤或以上各个模块可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。
[0141]
例如，以上这些模块可以是被配置成实施以上方法的一个或多个集成电路，例如：一个或多个特定集成电路(application specific integrated circuit，asic)，或，一个或多个微处理器(digital signal processor，dsp)，或，一个或者多个现场可编程门阵列(field programmable gate array，fpga)等。再如，当以上某个模块通过处理元件调度程序代码的形式实现时，该处理元件可以是通用处理器，例如中央处理器(central processing unit，cpu)或其它可以调用程序代码的处理器。再如，这些模块可以集成在一起，以片上系统(system-on-a-chip，soc)的形式实现。
[0142]
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本技术实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字
用户线(dsl))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，dvd)、或者半导体介质(例如固态硬盘solid state disk(ssd))等。
[0143]
例如，图8为本技术提供的电子设备一实施例的结构示意图，如图8所示，本申还提供一种电子设备200，包括：处理器201以及存储器202，通过总线连接；其中，存储器202中存储有计算机程序，当处理器201执行计算机程序时，处理器201可用于执行如本技术前述实施例中任一的5g专网的质量评估方法。在一些实施例中，处理器201还可以通过通信接口203与其他设备交互。
[0144]
本技术还提供一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，计算机程序被执行时可用于执行如本技术前述实施例中任一的5g专网的质量评估方法。
[0145]
本技术实施例还提供一种运行指令的芯片，所述芯片用于执行如本技术前述任一实施例中由电子设备所执行的5g专网的质量评估方法。
[0146]
本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：rom、ram、磁碟或者光盘等各种可以存储程序代码的介质。
[0147]
最后应说明的是：以上各实施例仅用以说明本技术的技术方案，而非对其限制；尽管参照前述各实施例对本技术进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本技术各实施例技术方案的范围。