终端老化测试方法、装置、设备、介质及程序产品与流程

摘要: 本公开涉及终端工厂测试,尤其涉及一种终端老化测试方法、装置、设备、介质及程序产品。背景技术:1、在终端工厂老化测试场景中,测试框架普遍包含reboot_test...
终端老化测试方法、装置、设备、介质及程序产品与流程

本公开涉及终端工厂测试,尤其涉及一种终端老化测试方法、装置、设备、介质及程序产品。

背景技术:

1、在终端工厂老化测试场景中,测试框架普遍包含reboot_test类型的用例,即测试会在设备多次重启的过程中持续运行。由于重启本身是测试流程的一部分,设备会在前台与后台同时推进多项测试项,而重启瞬间恰好可能落在某个前台测试项正在执行、倒计时尚未归零的中间阶段。现有手段在重启后往往只能看到该前台项被系统打上了exception标记,却无法回答三个关键问题:第一,该测试项究竟执行到了哪个阶段、剩余多少倒计时;第二,这次异常是真实的脏中断,还是一次被误标的、其实已经临近完成的干净暂停;第三,该测试项是否被伪装成已完成但实际上前置阶段被跳过或倒计时未真正归零。

2、目前业界主流采用以下几种实现方案。第一种是基于整块checkpoint的周期性存档:测试框架每隔固定时间间隔把当前全部测试项的运行状态序列化为一个较大的快照文件,整体覆盖写入持久化分区,重启后读取最近一次快照恢复进度。第二种是基于共享内存或属性系统/本地数据库的键值对记录:每个测试项维护一条记录,状态变化时直接更新对应字段,重启后读取该记录继续。第三种是简单的断点文件法:在测试项开始与结束时各自写一个标记文件,重启后通过判断标记文件是否存在来推断该项是否完成。第四种是在应用层维护一个线性日志,仅追加记录某项开始、某项结束两种粗粒度事件,重启后顺序回放日志重建状态。

3、目前,终端老化测试的效率较低,用户体验较低。

技术实现思路

1、本公开提供一种终端老化测试方法、装置、设备、介质及程序产品,以至少解决现有终端老化测试的效率较低,用户体验较低的问题。

2、本公开的技术方案如下:

3、本公开实施例提供一种终端老化测试方法,包括:

4、在测试流程的状态发生迁移的情况下,生成包括当前状态信息和历史状态信息的证明片段,并以追加写的方式将所述证明片段持久化存储;其中,所述证明片段之间通过哈希指针串联形成哈希链;

5、在设备重启后,读取所述证明片段,基于所述哈希链的链式结构对所述证明片段进行完整性校验,得到完整性校验结果;

6、对所述完整性校验结果为校验通过的候选证明片段进行逻辑一致性分析,基于预定义的测试状态迁移规则,逐跳校验状态迁移的语义合法性,定位所述候选证明片段中最后一个合法的目标证明片段;

7、根据所述目标证明片段以及所述目标证明片段对应的后续片段,识别测试中断的中断类型,并根据所述中断类型确定恢复策略,以从断点处恢复测试流程。

8、可选地,所述在测试流程的状态发生迁移的情况下,生成包括当前状态信息和历史状态信息的证明片段,并以追加写的方式将所述证明片段持久化存储,包括:

9、在测试流程的状态发生迁移的情况下,获取当前证明链的链尾片段;

10、以规范化编码方式对前一哈希值及全部业务字段进行编码,计算自哈希;

11、利用设备密钥对所述自哈希进行签名或认证计算,生成消息认证码;

12、以追加写及同步落盘方式将所述证明片段持久化存储。

13、可选地,所述完整性校验包括至少一种校验方式:

14、重新计算各证明片段的自哈希,将自哈希与存储值进行比对;

15、验证当前片段记录的前一片段哈希值是否与物理上相邻的前一片段的自哈希值一致;

16、利用设备密钥验证各证明片段的消息认证码的有效性;

17、基于单调时钟时间戳,验证证明片段的时间顺序是否发生回拨。

18、可选地,语义合法性校验,包括确定性有限状态机校验、拓扑排序校验、区间运算校验、约束满足校验及因果图与集合运算校验中的至少一种:

19、所述确定性有限状态机校验包括:对同一测试项标识的相邻两片段,检查三元组是否落在合法迁移规则表中;在三元组未落在合法迁移规则表的情况下,则判定当前片段的后一片段为非法迁移片段,当前片段后所有同项片段视为不可信;

20、所述拓扑排序校验包括:依据阶段拓扑序偏序,对同项片段序列的阶段做拓扑合法性检查,在同项片段序列中出现阶段在拓扑序上越级跳跃、跳过必经的中间阶段的情况下,则判定存在非法跳步;

21、所述区间运算校验包括:每个阶段对应一个允许的倒计时剩余量闭区间,在当前片段的倒计时剩余量不在当前片段的阶段对应的倒计时剩余量闭区间内,则判定在当前片段违反区间约束;

22、所述约束满足校验包括:对被标记为done的当前片段,同时满足直接前驱片段阶段为running、倒计时剩余量为0、前台状态为done且后台状态为done或idle、迁移操作为finish、基于因果图与集合运算的必须子任务的完成集合覆盖期望集合,则判定当前片段为合法完成;

23、所述因果图与集合运算校验包括:以测试项为节点、以前后台依赖为边构建因果依赖图,对每个done项取所有因果前驱节点的完成状态集合,做集合差运算;在集合差非空的情况下,则判定存在未满足的前置依赖。

24、可选地,所述中断类型包括:异常中断、非法跳步和伪完成;所述根据所述目标证明片段以及所述目标证明片段对应的后续片段,识别测试中断的中断类型,包括:

25、在所述最后一个合法的状态节点处于运行中状态,且后续无合法的终止操作记录的情况下,则确定中断类型为异常中断;

26、在检测到相邻合法片段之间存在非法跳步的情况下,则确定中断类型为非法跳步;

27、在检测到完成状态为伪完成状态的情况下,则确定中断类型为伪完成。

28、可选地,所述根据所述中断类型确定恢复策略,包括:

29、在所述中断类型为异常中断的情况下,则所述恢复策略为从运行中状态节点处续测;

30、在所述中断类型为非法跳步的情况下,则所述恢复策略为回退至跳步前的最后一个合法运行中状态节点重新执行;

31、在所述中断类型为伪完成的情况下,则所述恢复策略为作废该完成状态,回退至最近合法的运行中状态节点续测。

32、本公开实施例还提供一种终端老化测试装置,包括:

33、生成模块,用于在测试流程的状态发生迁移的情况下,生成包括当前状态信息和历史状态信息的证明片段,并以追加写的方式将所述证明片段持久化存储;其中,所述证明片段之间通过哈希指针串联形成哈希链;

34、第一校验模块,用于在设备重启后,读取所述证明片段,基于所述哈希链的链式结构对所述证明片段进行完整性校验,得到完整性校验结果;

35、第二校验模块,对所述完整性校验结果为校验通过的候选证明片段进行逻辑一致性分析,基于预定义的测试状态迁移规则,逐跳校验状态迁移的语义合法性,定位所述候选证明片段中最后一个合法的目标证明片段;

36、识别模块,用于根据所述目标证明片段以及所述目标证明片段对应的后续片段,识别测试中断的中断类型,并根据所述中断类型确定恢复策略,以从断点处恢复测试流程。

37、本公开实施例还提供一种电子设备,包括:

38、处理器;

39、用于存储处理器可执行指令的存储器;

40、其中,所述处理器被配置为执行指令,以实现上述的方法中的各步骤。

41、本公开实施例还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述的方法中的各步骤。

42、本公开实施例还提供一种计算机程序产品,包括计算机程序/指令,所述计算机程序/指令被处理器执行时实现上述的方法中的各步骤。

43、本公开的实施例提供的技术方案至少带来以下有益效果:

44、在本公开的一些实施例中,在测试流程的状态发生迁移的情况下,生成包括当前状态信息和历史状态信息的证明片段,并以追加写的方式将证明片段持久化存储,单次落盘数据量小,写入快,且永不产生半写损坏;其中,证明片段之间通过哈希指针串联形成哈希链;在设备重启后,读取证明片段,基于哈希链的链式结构对证明片段进行完整性校验,得到完整性校验结果;对完整性校验结果为校验通过的候选证明片段进行逻辑一致性分析,基于预定义的测试状态迁移规则,逐跳校验状态迁移的语义合法性,定位候选证明片段中最后一个合法的目标证明片段;根据目标证明片段以及目标证明片段对应的后续片段,识别测试中断的中断类型,并根据中断类型确定恢复策略,以从断点处恢复测试流程,每次迁移把测试项还原至中断前的真实进度,提高终端老化测试的效率,提升用户体验。

45、应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。