一种服务平台的评估方法、装置、存储介质及电子设备与流程

1.本发明涉及数据处理技术领域，特别涉及一种服务平台的评估方法、装置、存储介质及电子设备。


背景技术：

2.目前，为了满足用户日益变化的需求，需要持续对服务平台进行更新。然而，在服务平台进行更新时，通常是由开发人员对服务平台的更新效果进行主观评估，导致更新效果评估不准确，从而容易使得用户体验差。


技术实现要素：

3.本发明所要解决的技术问题是提供一种服务平台的评估方法、装置、存储介质及电子设备，能够获得准确的更新行为评估结果。
4.本发明还提供了一种服务平台的评估装置，用以保证上述方法在实际中的实现及应用。
5.一种服务平台的评估方法，包括：
6.响应于评估指令，确定已发生预设更新行为的服务平台；
7.获取所述服务平台的样本数据，所述样本数据包括第一类型变量以及与所述第一类型变量相匹配的第二类型变量，所述第一类型变量用于表征用户的使用感程度，且与所述更新行为相关联，所述第二类型变量与所述更新行为不相关；
8.获取所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数；
9.基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果。
10.上述的方法，可选的，所述获取所述服务平台的样本数据，包括：
11.获取所述服务平台的第一类型变量组以及第二类型变量组；所述第一类型变量组包括多个第一类型变量，所述第二类型变量组包括多个第二类型变量；
12.在所述第二类型变量组中确定出与每个所述第一类型变量相匹配的第二类型变量；
13.将每个所述第一类型变量以及与每个所述第一类型变量相匹配的第二类型变量，组成所述服务平台的样本数据。
14.上述的方法，可选的，所述在所述第二类型变量组中确定出与所述第一类型变量相匹配的第二类型变量，包括：
15.利用预设的倾向得分匹配psm算法在所述第二类型变量组中确定出与所述第一类型变量相匹配的第二类型变量。
16.上述的方法，可选的，所述利用预设的倾向得分匹配psm算法在所述第二类型变量组中确定出与所述第一类型变量相匹配的第二类型变量，包括：
17.对所述第一类型变量组以及所述第二类型变量组进行平行趋势检验；
18.在所述对所述第一类型变量组以及所述第二类型变量组的平行趋势检验通过的情况下，利用预设的倾向得分匹配psm算法在所述第二类型变量组中确定出与每个所述第一类型变量相匹配的第二类型变量。
19.上述的方法，可选的，所述基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果，包括：
20.利用预设的双重差分did算法，基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果。
21.一种服务平台的评估装置，包括：
22.确定单元，用于响应于评估指令，确定已发生预设更新行为的服务平台；
23.第一获取单元，用于获取所述服务平台的样本数据，所述样本数据包括第一类型变量以及与所述第一类型变量相匹配的第二类型变量，所述第一类型变量用于表征用户的使用感程度，且与所述更新行为相关联，所述第二类型变量与所述更新行为不相关；
24.第二获取单元，用于获取所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数；
25.评估单元，用于基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果。
26.上述的装置，可选的，所述第一获取单元，包括：
27.第一获取子单元，用于获取所述服务平台的第一类型变量组以及第二类型变量组；所述第一类型变量组包括多个第一类型变量，所述第二类型变量组包括多个第二类型变量；
28.确定子单元，用于在所述第二类型变量组中确定出与每个所述第一类型变量相匹配的第二类型变量；
29.执行子单元，用于将每个所述第一类型变量以及与每个所述第一类型变量相匹配的第二类型变量，组成所述服务平台的样本数据。
30.上述的装置，可选的，所述确定子单元，包括：
31.确定模块，用于利用预设的倾向得分匹配psm算法在所述第二类型变量组中确定出与所述第一类型变量相匹配的第二类型变量。
32.一种存储介质，所述存储介质包括存储指令，其中，在所述指令运行时控制所述存储介质所在的设备执行如上述的服务平台的评估方法。
33.一种电子设备，包括存储器，以及一个或者一个以上的指令，其中一个或一个以上指令存储于存储器中，且经配置以由一个或者一个以上处理器执行如上述的服务平台的评估方法。
34.与现有技术相比，本发明包括以下优点：
35.本发明提供了一种服务平台的评估方法、装置、存储介质及电子设备，其中，可以响应于评估指令，确定已发生预设更新行为的服务平台；获取所述服务平台的样本数据，所述样本数据包括第一类型变量以及与所述第一类型变量相匹配的第二类型变量，所述第一
类型变量用于表征用户的使用感程度，且与所述更新行为相关联，所述第二类型变量与所述更新行为不相关；获取所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数；基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果。应用本发明实施例提供的方法，能够获得准确的更新行为评估结果。
附图说明
36.为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
37.图1为本发明提供的一种服务平台的评估方法的方法流程图；
38.图2为本发明提供的一种获取服务平台的指标变量集合的过程的流程图；
39.图3为本发明提供的一种服务平台的评估过程的流程图；
40.图4为本发明提供的一种服务平台的评估装置的结构示意图；
41.图5为本发明提供的一种电子设备的结构示意图。
具体实施方式
42.下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
43.在本技术中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个
……”
限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
44.目前，为了满足用户日益变化的需求，需要持续对服务平台进行更新。然而，在服务平台进行更新时，通常是由开发人员对服务平台的更新效果进行主观评估，导致更新效果评估不准确，从而容易使得用户体验差。
45.基于此，本发明实施例提供了一种服务平台的评估方法，该方法可以应用于电子设备，所述方法的方法流程图如图1所示，具体包括：
46.s101：响应于评估指令，确定已发生预设更新行为的服务平台；
47.在本实施例中，评估指令可以是用户点击预设的按键或虚拟控件触发的指令，也可以是在检测到服务平台发生更新后触发的指令。
48.可选的，该更新行为用于对服务平台的至少一个功能模块进行更新。
49.在本实施例中，该服务平台可以是软件平台。
50.s102：获取所述服务平台的样本数据，所述样本数据包括第一类型变量以及与所述第一类型变量相匹配的第二类型变量，所述第一类型变量用于表征用户的使用感程度，
且与所述更新行为相关联，所述第二类型变量与所述更新行为不相关。
51.在本实施例中，第一类型变量可以是被解释变量，第一类型变量可以用于表征用户的使用感程度，例如第一类型变量可以包括服务平台的功能模块的点击量、用户调研满意度、业务场景访问时间、访问频率、表单导出量等等。第二类型变量可以是控制变量，该第二类型变量可以包括服务平台的研发投入资源量、服务平台宣传力度、测试人员点击量等等。
52.可选的，该第二类型变量可以为对该第一类型变量存在干扰影响，且与更新行为不相关的变量。
53.在本实施例中，服务平台的样本数据可以为多个，每个样本数据可以包括一个第一类型变量以及一个与该第一类型变量相匹配的第二类型变量。
54.s103：获取所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数。
55.可选的，第一类型变量的指标参数可以包括服务平台发生更新行为前的第一参数和服务平台发生更新行为后的第二参数。
56.可选的，第二类型变量的指标参数可以包括服务平台发生更新行为前的第三参数和服务平台发生更新行为后的第四参数。
57.s104：基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果。
58.在本实施例中，可以将利用预设的评估算法基于基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果。
59.可选的，该更新行为评估结果可以表征服务平台在发生更新行为后的效果。
60.在本实施例中，获取所述服务平台的指标变量集合，所述指标变量集合包括多个第一类型变量以及多个第二类型变量；在各个所述第一类型变量中选取出第一目标变量，以及在各个所述第二类型变量中选取出第二目标变量；获取所述第一目标变量的指标参数以及所述第二目标变量的指标参数；基于所述第一目标变量的指标参数以及所述第二目标变量的指标参数，获得所述服务平台的更新行为评估结果。通过结合不同类型变量的指标参数对更新行为进行评估，能够获得准确的更新行为评估结果。
61.在本发明提供的一实施例中，基于上述的实施过程，可选的，所述获得所述服务平台的更新行为评估结果之后，包括：
62.输出所述服务平台的更新行为评估结果。
63.可选的，可以将服务平台的更新行为评估结果进行输出显示，也可以将服务平台的更新行为评估结果发往预设的设备端。
64.在一些实施例中，输出更新行为评估结果后，若接收到发布指令，则对已发生更新行为的服务平台进行发布。
65.在一些实施例中，可以确定服务平台的更新行为评估结果是否满足预设的发布条件，若服务平台满足所述发布条件，则对服务平台进行发布。
66.在本发明提供的一实施例中，基于上述的实施过程，可选的，所述获取所述服务平台的样本数据的过程，如图2所示，包括：
67.s201：获取所述服务平台的第一类型变量组以及第二类型变量组；所述第一类型变量组包括多个第一类型变量，所述第二类型变量组包括多个第二类型变量。
68.可选的，第二类型变量组中的第二类型变量的数量不大于预设的阈值。
69.s202：在所述第二类型变量组中确定出与每个所述第一类型变量相匹配的第二类型变量。
70.在本实施例中，对于每个第一类型变量，可以确定该第一类型变量与第二类型变量组中的每个第二类型变量的相似度，将相似度大于预设相似度阈值的第二类型变量作为与该第一类型变量相匹配的变量。
71.s203：将每个所述第一类型变量以及与每个所述第一类型变量相匹配的第二类型变量，组成所述服务平台的样本数据。
72.在本实施例中，一个第一类型变量以及一个第二类型变量组成一个样本数据，服务平台的样本数据可以为多个。
73.在本发明提供的一实施例中，基于上述的实施过程，可选的，所述在所述第二类型变量组中确定出与所述第一类型变量相匹配的第二类型变量，包括：
74.利用预设的倾向得分匹配psm算法在所述第二类型变量组中确定出与所述第一类型变量相匹配的第二类型变量。
75.在本实施例中，通过psm算法，可以先计算出每个第一类型变量与每个第二类型变量的倾向得分，根据每个第一类型变量的倾向得分与每个第二类型变量的倾向得分，确定出每个第一类型变量相匹配的第二类型变量。
76.可选的，利用psm算法，能够过滤出较为纯粹的关键变量的作用效果，得到更纯粹更准确的对比分析结果，进而能够更加准确地评估一次更新操作。
77.在本发明提供的一实施例中，基于上述的实施过程，可选的，所述利用预设的倾向得分匹配psm算法在所述第二类型变量组中确定出与所述第一类型变量相匹配的第二类型变量，包括：
78.对所述第一类型变量组以及所述第二类型变量组进行平行趋势检验；
79.在所述对所述第一类型变量组以及所述第二类型变量组的平行趋势检验通过的情况下，利用预设的倾向得分匹配psm算法在所述第二类型变量组中确定出与每个所述第一类型变量相匹配的第二类型变量。
80.在本实施例中，通过平行趋势检验，可以检验第一类型变量组和第二类型变量组在进行功能更新迭代之前，用户使用无明显差异，以防止有其他因素干扰对效果的评估。
81.在本发明提供的一实施例中，基于上述的实施过程，可选的，所述基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果，包括：
82.利用预设的双重差分did算法，基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果。
83.在本实施例中，通过两次差分可以消除时间趋势效应和个人固定效应，从而降低研究对象以外的因素影响，过滤出更纯粹的第一类型变量组相对于第二类型变量组来说因为行为影响而产生的差异，进而能够得到更加准确科学的评估结果。
84.参见图3，为本发明实施例提供的一种服务平台的评估过程的流程图，具体如下：
85.第一，选择第一类型变量。其中，第一类型变量的选择直接体现了平台的用户使用体验程度，需要选择可以及时并且较为敏感的可量化指标作为第一类型变量来反应用户体验。
86.第二，选择第二类型变量，第二类型变量的选择影响着模型分析的准确性，因为面对不同业务场景，存在着许多不同的其他影响因素干扰分析的结果，需要剔除这些干扰因素，以避免分析结果偏离真实的情况。
87.第三，对第一类型变量组和第二类型变量组进行平行趋势检验。在本实施例中，通过平行趋势检验才能说明两组数据在功能设计更新之前不存在显著的趋势差异，分析结果更具纯粹性。
88.第四，在第一类型变量组和第二类型变量组通过平行趋势检验后，利用psm倾向得分匹配方法选择样本数据。
89.在本实施例中，具体的样本匹配方法是选择适合的倾向得分计算方式，计算得出倾向得分值进行样本匹配。匹配后的第一类型变量组与第二类型变量组在其他方面尽可能相似，解决了反事实的问题。使用倾向得分匹配后的样本进行效果评估，可以过滤出较为纯粹的关键变量的作用效果，得到更纯粹更准确的对比分析结果，进而能够更加科学准确地评估更新行为，因此，本发明中利用psm方法进行样本选择有利用提高平台完善效果评估的准确性。
90.第五，利用did模型进行评估。
91.在本实施中，通过did模型，可以对受更新行为影响的第一类型变量组和不受该更新行为影响的第二类型变量组进行差分，差分结果是否具有显著差异便表明了被研究的更新行为效果。两次差分可以消除时间趋势效应和个人固定效应，从而降低研究对象以外的因素影响，过滤出更纯粹的实验组相对于处理组来说因为行为影响而产生的差异，进而能够得到更加准确科学的评估结果。
92.具体did模型的回归方程如下：
93.lny
it
＝β0 β1treat
it
×
after
it
β2treat
it
β3after
it
βx μi λi ε
it
94.其中，lny
it
为第一类型变量，用于代表服务平台的用户使用感；treat
it
×
after
it
为交互项，其系数表示了某次迭代更新对平台用户使用感的因果效应；treat
it
为分组虚拟变量，如果平台功能模块i在t时间接受迭代更新取值为1，否则为0；after
it
时间虚拟变量，如果服务平台的功能模块i在t时间已经完成迭代更新取值为1，否则为0；x为第二类型变量集合；μi为平台功能模块的个体效应参数；λi为时间效应参数；ε
it
随机误差参数。
95.在进行双重差分后，主要关注交互项的系数，其正负号和绝对值大小在不同应用场景中都说明着不同的含义，进而描述了本次更新行为的效果，达到量化功能设计完善行为的评估目的。在进行双重差分后，主要关注交互项的系数，其正负号和绝对值大小在不同应用场景中都说明着不同的含义，进而描述了本次更新行为的效果，达到量化功能设计完善行为的评估目的。
96.与图1所述的方法相对应，本发明实施例还提供了一种服务平台的评估装置，用于对图1中方法的具体实现，本发明实施例提供的服务平台的评估装置可以应用于电子设备中，其结构示意图如图4所示，具体包括：
97.确定单元401，用于响应于评估指令，确定已发生预设更新行为的服务平台；
98.第一获取单元402，用于获取所述服务平台的样本数据，所述样本数据包括第一类型变量以及与所述第一类型变量相匹配的第二类型变量，所述第一类型变量用于表征用户的使用感程度，且与所述更新行为相关联，所述第二类型变量与所述更新行为不相关；
99.第二获取单元403，用于获取所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数；
100.评估单元404，用于基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果。
101.在本发明提供的一实施例中，基于上述的装置，可选的，所述第一获取单元402，包括：
102.第一获取子单元，用于获取所述服务平台的第一类型变量组以及第二类型变量组；所述第一类型变量组包括多个第一类型变量，所述第二类型变量组包括多个第二类型变量；
103.确定子单元，用于在所述第二类型变量组中确定出与每个所述第一类型变量相匹配的第二类型变量；
104.执行子单元，用于将每个所述第一类型变量以及与每个所述第一类型变量相匹配的第二类型变量，组成所述服务平台的样本数据。
105.在本发明提供的一实施例中，基于上述的装置，可选的，所述确定子单元，包括：
106.确定模块，用于利用预设的倾向得分匹配psm算法在所述第二类型变量组中确定出与所述第一类型变量相匹配的第二类型变量。
107.在本发明提供的一实施例中，基于上述的装置，可选的，所述确定模块，包括：
108.检验子模块，用于对所述第一类型变量组以及所述第二类型变量组进行平行趋势检验；
109.确定子模块，用于在所述对所述第一类型变量组以及所述第二类型变量组的平行趋势检验通过的情况下，利用预设的倾向得分匹配psm算法在所述第二类型变量组中确定出与每个所述第一类型变量相匹配的第二类型变量。
110.在本发明提供的一实施例中，基于上述的装置，可选的，所述评估单元，包括：
111.评估子单元，用于利用预设的双重差分did算法，基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果。
112.在本发明提供的一实施例中，基于上述的装置，可选的，还包括：
113.输出单元，用于输出所述服务平台的更新行为评估结果。
114.上述本发明实施例公开的服务平台的评估装置中的各个单元和模块具体的原理和执行过程，与上述本发明实施例公开的服务平台的评估方法相同，可参见上述本发明实施例提供的服务平台的评估方法中相应的部分，这里不再进行赘述。
115.本发明实施例还提供了一种存储介质，所述存储介质包括存储的指令，其中，在所述指令运行时控制所述存储介质所在的设备执行上述服务平台的评估方法。
116.本发明实施例还提供了一种电子设备，其结构示意图如图5所示，具体包括存储器501，以及一个或者一个以上的指令502，其中一个或者一个以上指令502存储于存储器501
中，且经配置以由一个或者一个以上处理器503执行所述一个或者一个以上指令502进行以下操作：
117.响应于评估指令，确定已发生预设更新行为的服务平台；
118.获取所述服务平台的样本数据，所述样本数据包括第一类型变量以及与所述第一类型变量相匹配的第二类型变量，所述第一类型变量用于表征用户的使用感程度，且与所述更新行为相关联，所述第二类型变量与所述更新行为不相关；
119.获取所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数；
120.基于所述样本数据中的第一类型变量的指标参数，以及所述样本数据中的第二类型变量的指标参数，获得所述服务平台的更新行为评估结果。
121.需要说明的是，本发明提供的一种服务平台的评估方法、装置、存储介质及电子设备可用于金融领域或其他领域，例如可以应用于金融领域中的金融软件服务平台的更新评估，其他领域为金融领域之外的任意领域，例如，软件技术领域。上述仅为示例，并不对本发明提供的一种服务平台的评估方法、装置、存储介质及电子设备的应用领域进行限定。
122.需要说明的是，本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
123.最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个
……”
限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
124.为了描述的方便，描述以上装置时以功能分为各种单元分别描述。当然，在实施本发明时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
125.通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
126.以上对本发明所提供的一种服务平台的评估方法进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。