应用程序测试方法、装置、电子设备和存储介质与流程

1.本发明实施例涉及计算机技术领域，特别是涉及一种应用程序测试方法、一种应用程序测试装置、电子设备和存储介质。


背景技术：

2.众所周知，游戏等各类应用程序会不断的更新应用程序，从而给予玩家新的游戏内容和修复已有的bug(故障)，与此同时，应用程序的更新也不可避免带来新的故障，为了控制由于应用程序更新所带来新的故障的影响范围，一般会采取局部控制方案，具体来说，先开放给小部分玩家先体验更新的应用程序，等到更新的应用程序新的故障修复后再开放给全部玩家。
3.然而，由于目前的局部控制方案并不完善，使得所有玩家同时体验更新后的应用程序，导致更新后的应用程序带来的新的故障的影响范围不可控。


技术实现要素：

4.鉴于上述问题，提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种应用程序测试方法和相应的一种应用程序测试装置、电子设备、存储介质。
5.为了解决上述问题，本发明实施例公开了一种应用程序测试方法，所述方法包括：
6.在终端设备的应用程序更新后，获取所述应用程序的测试体验规则；
7.获取用于唯一标识所述终端设备的终端数据；
8.采用所述测试体验规则处理所述终端数据，得到测试处理数据；
9.根据所述测试处理数据，确定所述终端设备运行所述应用程序时的运行逻辑；所述运行逻辑用于表征所述终端设备是否运行更新后的所述应用程序，以在部分的终端设备上对更新后的所述应用程序进行测试。
10.可选地，获取所述应用程序的测试体验规则，包括：
11.从服务器获取所述应用程序的测试规则标识和测试比对数据；
12.获取所述测试规则标识对应的测试体验规则。
13.可选地，所述根据所述测试处理数据，确定所述终端设备运行所述应用程序时的运行逻辑，包括：
14.比对所述测试处理数据和所述测试比对数据，得到比对结果；
15.根据所述比对结果确定所述终端设备运行所述应用程序时的运行逻辑。
16.可选地，所述根据所述比对结果确定所述终端设备运行所述应用程序时的运行逻辑，包括：
17.在所述对比结果为所述测试处理数据大于或等于所述测试比对数据时，确定所述终端设备是运行更新前的所述应用程序，在所述对比结果为所述测试处理数据小于所述测试比对数据时，确定所述终端设备是运行更新后的所述应用程序；或者，
18.在所述对比结果为所述测试处理数据小于所述测试比对数据时，确定所述终端设备是运行更新前的所述应用程序，在所述对比结果为所述测试处理数据大于等于所述测试比对数据时，确定所述终端设备是运行更新后的所述应用程序。
19.可选地，在根据所述测试处理数据，确定所述终端设备运行所述应用程序时的运行逻辑之后，所述方法还包括：
20.获取所述终端设备在运行更新后的所述应用程序时产生的日志数据；
21.将所述日志数据提交至服务器中，以使所述服务器根据所述日志数据确定所述应用程序存在的故障。
22.可选地，在根据所述测试处理数据，确定所述终端设备运行所述应用程序时的运行逻辑之后，所述方法还包括：
23.在所述终端设备上运行更新后的所述应用程序时，获取针对所述应用程序的用户反馈数据；
24.将所述用户反馈数据提交至服务器中，以使所述服务器根据所述日志数据确定所述应用程序存在的故障。
25.可选地，所述终端数据包括mac地址。
26.本发明实施例还公开了一种应用程序测试装置，所述装置包括：
27.测试体验规则获取模块，用于在终端设备的应用程序更新后，获取所述应用程序的测试体验规则；
28.终端数据获取模块，用于获取用于唯一标识所述终端设备的终端数据；
29.终端数据处理模块，用于采用所述测试体验规则处理所述终端数据，得到测试处理数据；
30.运行逻辑确定模块，用于根据所述测试处理数据，确定所述终端设备运行所述应用程序时的运行逻辑；所述运行逻辑用于表征所述终端设备是否运行更新后的所述应用程序，以在部分的终端设备上对更新后的所述应用程序进行测试。
31.可选地，获取测试体验规则获取模块，用于从服务器获取所述应用程序的测试规则标识和测试比对数据；获取所述测试规则标识对应的测试体验规则。
32.可选地，所述运行逻辑确定模块，用于比对所述测试处理数据和所述测试比对数据，得到比对结果；根据所述比对结果确定所述终端设备运行所述应用程序时的运行逻辑。
33.可选地，所述运行逻辑确定模块，用于在所述对比结果为所述测试处理数据大于或等于所述测试比对数据时，确定所述终端设备是运行更新前的所述应用程序，在所述对比结果为所述测试处理数据小于所述测试比对数据时，确定所述终端设备是运行更新后的所述应用程序；或者，在所述对比结果为所述测试处理数据小于所述测试比对数据时，确定所述终端设备是运行更新前的所述应用程序，在所述对比结果为所述测试处理数据大于等于所述测试比对数据时，确定所述终端设备是运行更新后的所述应用程序。
34.可选地，所述装置还包括：日志数据提交模块，用于获取所述终端设备在运行更新后的所述应用程序时产生的日志数据；将所述日志数据提交至服务器中，以使所述服务器根据所述日志数据确定所述应用程序存在的故障。
35.可选地，所述装置还包括：用户反馈数据提交模块，用于在所述终端设备上运行更新后的所述应用程序时，获取针对所述应用程序的用户反馈数据；将所述用户反馈数据提
交至服务器中，以使所述服务器根据所述日志数据确定所述应用程序存在的故障。
36.可选地，所述终端数据包括mac地址。
37.本发明实施例公开了一种电子设备，包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上所述的应用程序测试方法的步骤。
38.本发明实施例公开了一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如上所述的应用程序测试方法的步骤。
39.本发明实施例包括以下优点：
40.在本发明实施例中，在终端设备的应用程序更新后，获取应用程序的测试体验规则和用于唯一标识终端设备的终端数据，然后采用测试体验规则处理终端数据得到测试处理数据，并根据测试处理数据确定终端设备运行应用程序时的运行逻辑，使得能够在部分的终端设备上对更新后的应用程序进行测试。本发明实施例的测试处理数据是基于唯一标识终端设备的终端数据处理所得，因此基于测试处理数据来确定终端设备对应用程序的执行逻辑，可以保证同一终端设备不会既运行更新前的应用程序，又运行更新后的应用程序，更新后的应用程序所带来的故障的影响范围变得可控。
附图说明
41.图1是本发明的一种应用程序测试方法实施例的步骤流程图；
42.图2是本发明的一种确定运行逻辑的步骤流程图；
43.图3是本发明的一种应用程序测试装置实施例的结构框图。
具体实施方式
44.为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。
45.以游戏为例，在游戏更新后的局部控制方案有两种，具体地：
46.第一种方案是基于服务器进行控制，不同服务器执行不同的代码，同时通过特殊的网络协议告知客户端(例如手机、平板电脑等终端设备)，客户端依据服务器所执行的代码来决定是否要体验新版本的游戏。
47.第二种方案是客户端去请求另一个服务器，此处的服务器可以是http服务器，根据服务器返回的数值确定是否要体验新版本的游戏。具体地，首先客户端约定一个数值范围，假设为0
‑
100，在http服务器设置一个服务器数值，表示本次测试的影响概率，客户端去服务器请求该数值，同时本地产生一个随机值，与服务器数值进行比较，如果随机值小于服务器数值，则体验新版本的游戏例如客户端产生随机值为55，服务器数值为60，55＜60，则需要体验新版本的游戏。
48.由上述说明可知，第一种方案存在一个明显弊端是需要受到服务器的限制，客户端是否体验新版本的游戏，在连接服务器之前就已经确定。第二种方案相对第一种方案的优势是抛开了服务器的限制，更加灵活，但是第二种方案基于随机值确定是否体验新版本的游戏不具备稳定性，可以理解，玩家每次打开客户端都随机生成一个随机值，那么有可能上一次要体验新版本的游戏，下一次则不需要体验新版本的游戏。举例来说，假设服务器数
值为60，玩家上一次打开客户端生成的随机值是55，下一次打开客户端生成的随机值80，则上一次需要体验新版本的游戏，下一次则不需要体验新版本的游戏，导致新版本的游戏带来的故障的影响范围变得不可控。
49.针对上述问题，本发明实施例提出了一种应用程序测试方法，基于能够唯一标识终端设备的终端数据来生成用于确定是否运行更新后的应用程序的测试处理数据，使得针对同一终端设备，在玩家任意时间打开时间测试处理数据都是相同，测试处理数据不需要受到服务器的限制的同时也具有稳定性，因此更新后的应用程序带来的故障的影响范围变得可控。
50.参照图1，示出了本发明的一种应用程序测试方法实施例的步骤流程图，本发明实施例具体可以包括如下步骤：
51.步骤101、在终端设备的应用程序更新后，获取所述应用程序的测试体验规则。
52.其中，测试体验规则可以是数学运算规则，例如求余运算规则、逻辑运算规则等，根据测试体验规则可以计算出一个测试处理数据，依据该测试处理数据可以确定是否在终端设备运行更新后的应用程序。
53.具体地，测试体验规则可以与更新后的应用程序对应。例如，假设应用程序更新为新版本1，则可以设置新版1的应用程序的测试体验规则为求余运算规则，假设应用程序更新为新版本2，则可以设置新版2的应用程序的测试体验规则为逻辑运算规则。这样，根据更新后的应用程序来设置测试体验规则，可以根据不同的测试需求来随机确定需要运行更新后的应用程序。
54.在本发明实施例中，终端设备的应用程序更新后，例如游戏更新后，玩家打开应用程序时，就可以获取该游戏对于的测试体验规则。
55.步骤102、获取用于唯一标识所述终端设备的终端数据。
56.其中，终端数据可以是终端设备的mac地址。具体地，mac地址的英文全称为media access control address，直译为媒体存取控制位址，也称为局域网地址(lan address)、mac位址、以太网地址(ethernet address)或物理地址(physical address)，是一个用来确认终端设备位置的位址。mac地址可以用于在网络中唯一标识一台终端设备。
57.具体地，依据mac地址的定义，mac地址的长度为6字节，前3字节是厂商代号，后3字节是厂商的系列号，可知mac地址是可以唯一标识一台终端设备，具有稳定性。
58.步骤103、采用所述测试体验规则处理所述终端数据，得到测试处理数据。
59.在本发明实施例中，在玩家打开应用程序后，获取终端设备的mac地址，然后可以根据测试体验规则处理终端数据，得到测试处理数据。例如，假设测试体验规则为求余运算规则，则可以按照求余运算规则对mac地址进行求余运算，得到测试处理数据。
60.步骤104、根据所述测试处理数据，确定所述终端设备运行所述应用程序时的运行逻辑；所述运行逻辑用于表征所述终端设备是否运行更新后的所述应用程序，以在部分的终端设备上对更新后的所述应用程序进行测试。
61.具体地，终端设备可以运行更新后的应用程序，也可以运行更新前的应用程序。例如，假设在游戏中更新了一个新的游戏角色，如果终端设备上是运行更新后的应用程序，则玩家可以体验该新的游戏角色，如果终端设备上是运行更新前的应用程序，则玩家无法体验该新的游戏角色。
62.在本发明实施例，在得到测试处理数据后，可以根据该测试处理数据来确定终端运行应用程序时的运行逻辑，由于mac地址作用于计算测试处理数据，保证了测试的稳定性，可以避免某台终端设备第一次启动运行更新后的应用程序，第二次启动运行更新前的应用程序的情况发生。
63.在上述应用程序测试方法中，在终端设备的应用程序更新后，获取应用程序的测试体验规则和用于唯一标识终端设备的终端数据，然后采用测试体验规则处理终端数据得到测试处理数据，并根据测试处理数据确定终端设备运行应用程序时的运行逻辑，使得能够在部分的终端设备上对更新后的应用程序进行测试。本发明实施例的测试处理数据是基于唯一标识终端设备的终端数据处理所得，因此基于测试处理数据来确定终端设备对应用程序的执行逻辑，可以保证同一终端设备不会既运行更新前的应用程序，又运行更新后的应用程序，更新后的应用程序所带来的故障的影响范围变得可控。
64.在一示例性实施例中，所述步骤101、获取所述应用程序的测试体验规则，可以包括如下步骤：
65.从服务器获取所述应用程序的测试规则标识和测试比对数据；
66.获取所述测试规则标识对应的测试体验规则。
67.其中，测试规则标识是用于标识测试体验规则的编码或者名称，测试比对数据则是与测试体验规则对应的数值。
68.具体地，在服务器中可以根据应用程序预先设置好针对应用程序的测试规则标识，在终端设备上保存测试体验规则，在终端设备上打开应用程序后，终端设备向服务器请求测试规则标识，然后终端设备再根据测试规则标识获取到对应的测试体验规则。
69.在上述示例性实施例中，针对不同的测试需要和不同的测试样本要求对规则进行丰富，只需要客户端新增对应的测试体验规则，并且在服务器配置新的规则编号即可。
70.在一示例性实施例中，参照图2，所述步骤104、根据所述测试处理数据，确定所述终端设备运行所述应用程序时的运行逻辑，可以包括如下步骤：
71.步骤201、比对所述测试处理数据和所述测试比对数据，得到比对结果；
72.步骤202、根据所述比对结果确定所述终端设备运行所述应用程序时的运行逻辑。
73.在本发明实施例中，通过比对测试处理数据和测试比对数据，得到比对结果，进而根据比对结果来确定终端设备运行应用程序的运行逻辑。
74.在一示例性实施例中，所述步骤202、根据所述比对结果确定所述终端设备运行所述应用程序时的运行逻辑，可以包括如下步骤：
75.在所述对比结果为所述测试处理数据大于或等于所述测试比对数据时，确定所述终端设备是运行更新前的所述应用程序，在所述对比结果为所述测试处理数据小于所述测试比对数据时，确定所述终端设备是运行更新后的所述应用程序；或者，
76.在所述对比结果为所述测试处理数据小于所述测试比对数据时，确定所述终端设备是运行更新前的所述应用程序，在所述对比结果为所述测试处理数据大于等于所述测试比对数据时，确定所述终端设备是运行更新后的所述应用程序。
77.在本发明实施例，可以根据测试需求来设置如何确定终端设备对应用程序的运行逻辑。作为一个示例，假设测试处理数据为3，测试对比数据为5，则对比结果为测试处理数据小于测试比对数据时，则终端设备是运行更新后的应用程序。作为另一个示例，假设测试
处理数据为3，测试对比数据为2，则对比结果为测试处理数据大于测试比对数据时，则终端设备是运行更新后的应用程序。
78.在一示例性实施例中，在步骤104、根据所述测试处理数据，确定所述终端设备运行所述应用程序时的运行逻辑之后，所述方法还可以包括如下步骤：
79.获取所述终端设备在运行更新后的所述应用程序时产生的日志数据；
80.将所述日志数据提交至服务器中，以使所述服务器根据所述日志数据确定所述应用程序存在的故障。
81.具体地，在终端设备上运行更新后的应用程序时，获取日志数据(log)，然后可以将日志数据提交至服务器中，使得服务器可以根据日志数据进行分析，从而确定更新后的应用程序存在的一些故障，例如游戏角色的技能数值过高，活动的奖励发放不合理等等，进而可以针对故障进行修复。
82.在另一示例性实施例中，在步骤104、根据所述测试处理数据，确定所述终端设备运行所述应用程序时的运行逻辑之后，所述方法还可以包括如下步骤：
83.在所述终端设备上运行更新后的所述应用程序时，获取针对所述应用程序的用户反馈数据；
84.将所述用户反馈数据提交至服务器中，以使所述服务器根据所述日志数据确定所述应用程序存在的故障。
85.具体地，在终端设备上运行更新后的应用程序时，可以获取玩家针对该应用程序反馈的用户反馈数据，使得服务器可以根据用户反馈数据进行分析，从而确定更新后的应用程序存在的一些故障，例如活动的时间不合理、游戏角色的局内动作僵硬等等，进而可以针对故障进行修复。
86.举例说明，假设应用程序更新的内容是520节日活动，520节日活动是5月20日当天才会开放给玩家体验，为了测试需要，可以让部分玩家提前体验520节日活动，以便开发者依据玩家的反馈用户数据和收到的日志数据发现可能存在的问题，进而对应用程序进行修复，以更好地为广大玩家提供服务。
87.为了使本领域技术人员更好地理解本发明实施例，以下采用一个具体的示例进行说明。具体地，确定终端设备上应用程序的运行逻辑的过程为：
88.1、获取用户当前网络设备的mac地址。
89.具体地，依据mac地址的定义，mac地址的长度为6字节，前3字节是厂商代号，后3字节是厂商的系列号，可知mac地址是可以唯一标识一台网络设备的，具有稳定性。
90.2、从http服务器上获取数值x与规则编号y。
91.此处扩展了一个参数y，y可以用来标记一种规则，对x值的含义进行丰富化，例如可以是1/x的概率，也可以是x％的概率。
92.3、依据不同的规则对mac地址进行处理，与x进行比较，返回是否需要执行测试逻辑。
93.假设是用到了1/x的概率模式，那么可以对mac地址进行模x操作，如果模为0，则认定该设备执行测试逻辑，否则执行正式逻辑。同样的对于x百分号的概率模式，用到的方法是模100操作，如果模小于x，则可以认定执行测试逻辑。
94.应用本发明实施例所带来的优势，可以从以上步骤总结而来，第一步选取了mac地
址作为参数，保证了测试的稳定性，可以避免某台设备第一次启动执行测试逻辑，第二次启动执行正式逻辑的情况发生。第二步从传统的一个参数扩展为了两个参数，且第二个参数为自定义的规则编号，在满足当前需求的基础上保留了扩展性，可以针对不同的测试需要和不同的测试样本要求对规则进行丰富，只需要客户端添加新增规则的逻辑和http服务器配置新的规则编号即可。
95.需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
96.参照图3，示出了本发明的一种应用程序测试装置实施例的结构框图，本发明实施例具体可以包括如下模块：
97.测试体验规则获取模块301，用于在终端设备的应用程序更新后，获取所述应用程序的测试体验规则；
98.终端数据获取模块302，用于获取用于唯一标识所述终端设备的终端数据；
99.终端数据处理模块303，用于采用所述测试体验规则处理所述终端数据，得到测试处理数据；
100.运行逻辑确定模块304，用于根据所述测试处理数据，确定所述终端设备运行所述应用程序时的运行逻辑；所述运行逻辑用于表征所述终端设备是否运行更新后的所述应用程序，以在部分的终端设备上对更新后的所述应用程序进行测试。
101.在一示例性实施例中，获取测试体验规则获取模块301，用于从服务器获取所述应用程序的测试规则标识和测试比对数据；获取所述测试规则标识对应的测试体验规则。
102.在一示例性实施例中，所述运行逻辑确定模块304，用于比对所述测试处理数据和所述测试比对数据，得到比对结果；根据所述比对结果确定所述终端设备运行所述应用程序时的运行逻辑。
103.在一示例性实施例中，所述运行逻辑确定模块304，用于在所述对比结果为所述测试处理数据大于或等于所述测试比对数据时，确定所述终端设备是运行更新前的所述应用程序，在所述对比结果为所述测试处理数据小于所述测试比对数据时，确定所述终端设备是运行更新后的所述应用程序；或者，在所述对比结果为所述测试处理数据小于所述测试比对数据时，确定所述终端设备是运行更新前的所述应用程序，在所述对比结果为所述测试处理数据大于等于所述测试比对数据时，确定所述终端设备是运行更新后的所述应用程序。
104.在一示例性实施例中，所述装置还包括：日志数据提交模块，用于获取所述终端设备在运行更新后的所述应用程序时产生的日志数据；将所述日志数据提交至服务器中，以使所述服务器根据所述日志数据确定所述应用程序存在的故障。
105.在一示例性实施例中，所述装置还包括：用户反馈数据提交模块，用于在所述终端设备上运行更新后的所述应用程序时，获取针对所述应用程序的用户反馈数据；将所述用户反馈数据提交至服务器中，以使所述服务器根据所述日志数据确定所述应用程序存在的故障。
106.在一示例性实施例中，所述终端数据包括mac地址。
107.对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
108.综上可知，在本发明实施例中，在终端设备的应用程序更新后，获取应用程序的测试体验规则和用于唯一标识终端设备的终端数据，然后采用测试体验规则处理终端数据得到测试处理数据，并根据测试处理数据确定终端设备运行应用程序时的运行逻辑，使得能够在部分的终端设备上对更新后的应用程序进行测试。本发明实施例的测试处理数据是基于唯一标识终端设备的终端数据处理所得，因此基于测试处理数据来确定终端设备对应用程序的执行逻辑，可以保证同一终端设备不会既运行更新前的应用程序，又运行更新后的应用程序，更新后的应用程序所带来的故障的影响范围变得可控。
109.本发明实施例公开了一种电子设备，包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上应用程序测试方法实施例所述的步骤。
110.本发明实施例公开了一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如上应用程序测试方法实施例所述的步骤。
111.本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
112.本领域内的技术人员应明白，本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd
‑
rom、光学存储器等)上实施的计算机程序产品的形式。
113.本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
114.这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
115.这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
116.尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基
本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
117.最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个
……”
限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
118.以上对本发明所提供的一种应用程序测试方法、一种应用程序测试装置、电子设备和存储介质，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。