性能测试方法、设备、存储介质及程序产品与流程

摘要: 本申请涉及计算机,尤其涉及一种性能测试方法、设备、存储介质及程序产品。背景技术:1、在模型训练过程中,需要周期性地保存检查点(checkpoint),以确保因为...
性能测试方法、设备、存储介质及程序产品与流程

本申请涉及计算机,尤其涉及一种性能测试方法、设备、存储介质及程序产品。

背景技术:

1、在模型训练过程中,需要周期性地保存检查点(checkpoint),以确保因为硬件故障而导致的模型训练中断能够被快速恢复。在进行检查点保存时,可能会存在突发写入的情况(即短时间内向待测存储设备写入大量数据),在此情况下,对存储设备进行性能测试就显得尤为重要。

2、在现有技术中,通常使用fio、recordstoreperf等压力器对存储设备进行性能测试,具体实施时,对存储设备进行数据填充,之后通过脚本不断启停压力器,交替产生高压流量和低压流量,以模拟检查点的数据写入特征(周期性的突发写数据)。但是,在这种方式下,压力器需要不断启停,且在每次停止后,需要收集测试结果,并在汇总统计后再启动下一次测试,耗时较长。

技术实现思路

1、本申请实施例提供了一种性能测试方法、设备、存储介质及程序产品,可以进行不同压力阶段之间的无缝切换,耗时少,测试效率高。

2、第一方面,本申请实施例提供了一种性能测试方法,所述方法包括:

3、对待测存储设备进行数据填充;

4、在所述待测存储设备满足第一设定填充条件的情况下,按照第一压力阶段对应的第一测试参数对所述待测存储设备执行数据访问操作;

5、检测到所述第一压力阶段对应的数据访问操作满足第一切换条件,按照第二压力阶段对应的第二测试参数对所述待测存储设备执行数据访问操作,所述第一测试参数和所述第二测试参数不同;

6、检测到所述第二压力阶段对应的数据访问操作满足第二切换条件,继续执行所述按照第一压力阶段对应的第一测试参数执行数据访问操作的步骤,直至所述待测存储设备满足测试终止要求。

7、第二方面,本申请实施例提供了一种性能测试装置,所述装置包括:

8、填充模块,用于对待测存储设备进行数据填充。

9、执行模块,用于在所述待测存储设备满足第一设定填充条件的情况下,按照第一压力阶段对应的第一测试参数对所述待测存储设备执行数据访问操作,以及检测到所述第一压力阶段对应的数据访问操作满足第一切换条件,按照第二压力阶段对应的第二测试参数对所述待测存储设备执行数据访问操作,所述第一测试参数和所述第二测试参数不同。

10、检测模块,用于检测到所述第二压力阶段对应的数据访问操作满足第二切换条件,继续执行所述按照第一压力阶段对应的第一测试参数执行数据访问操作的步骤,直至所述待测存储设备满足测试终止要求。

11、第三方面,本申请实施例提供了一种性能测试方法,所述方法包括:

12、对待测存储设备进行数据填充;

13、在所述待测存储设备满足第三设定填充条件的情况下,调用第一压力器按照第一压力阶段对应的第一测试参数执行数据访问操作;

14、在所述第一压力阶段结束之后,暂停调用所述第一压力器,并调用第二压力器按照第二压力阶段对应的第二测试参数执行数据访问操作;

15、在所述第二压力阶段结束之后,暂停调用所述第二压力器,并继续执行所述调用第一压力器按照第一压力阶段对应的第一测试参数执行数据访问操作的步骤直至所述待测存储设备满足测试终止要求。

16、第四方面,本申请实施例提供了一种性能测试装置,所述装置包括:

17、填充模块,用于对待测存储设备进行数据填充。

18、调用模块,用于在所述待测存储设备满足第三设定填充条件的情况下,调用第一压力器按照第一压力阶段对应的第一测试参数执行数据访问操作,以及在所述第一压力阶段结束之后,暂停调用所述第一压力器,并调用第二压力器按照第二压力阶段对应的第二测试参数执行数据访问操作。

19、执行模块,用于在所述第二压力阶段结束之后,暂停调用所述第二压力器,并继续执行所述调用第一压力器按照第一压力阶段对应的第一测试参数执行数据访问操作的步骤直至所述待测存储设备满足测试终止要求。

20、第五方面,本申请实施例提供一种电子设备,包括:存储器、处理器、通信接口;其中,所述存储器上存储有可执行代码,当所述可执行代码被所述处理器执行时,使所述处理器执行如第一方面或第三方面所述的性能测试方法。

21、第六方面,本申请实施例提供了一种非暂时性机器可读存储介质,所述非暂时性机器可读存储介质上存储有可执行代码,当所述可执行代码被电子设备的处理器执行时,使所述处理器至少可以实现如第一方面或第三方面所述的性能测试方法。

22、第七方面,本申请实施例提供了一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序被处理器执行时能够实现如第一方面或第三方面所述的性能测试方法。

23、本申请实施例提供的性能测试方案中,通过对待测存储设备进行数据填充,可以准确模拟实际需要的测试环境,如模拟模型训练过程中检查点保存的突发负载环境。在模拟出实际需要的测试环境后,按照第一压力阶段对应的第一测试参数对待测存储设备执行数据访问操作,并在检测到第一压力阶段对应的数据访问操作满足第一切换条件的情况下,按照第二压力阶段对应的第二测试参数对待测存储设备执行数据访问操作,在此过程中,若检测到第二压力阶段对应的数据访问操作满足第二切换条件,则继续执行按照第一压力阶段对应的第一测试参数执行数据访问操作的步骤,直至待测存储设备满足测试终止要求。

24、需要说明的是,在待测存储设备满足测试终止要求之前,会不断对第一压力阶段和第二压力阶段进行交替测试,且在整个测试过程中,第一压力阶段和第二压力阶段之间的切换主要依靠第一切换条件和第二切换条件,应理解,在满足第一切换条件时,会直接对测试参数进行更新,即将第一测试参数变更为第二测试参数,自动从第一压力阶段切换至第二压力阶段,同理,在满足第二切换条件时,也是直接对测试参数进行更新,即将第二测试参数变更为第一测试参数,自动从第二压力阶段切换至第一压力阶段。概括来说,本方案在不同压力阶段对应的数据访问操作满足切换条件时,通过对测试参数的修改即可实现两个压力阶段之间的无缝切换,无需频繁启停压力器。并且,在测试终止后,统一获取最终的测试结果即可,整个测试过程始终不会中断,耗时少,测试效率高。

1.一种性能测试方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述在所述待测存储设备满足所述第一设定填充条件的情况下,按照第一压力阶段对应的第一测试参数对所述待测存储设备执行数据访问操作,包括:

3.根据权利要求2所述的方法,其特征在于,还包括:

4.根据权利要求2所述的方法,其特征在于,所述第一测试参数包含第一限流数据量;所述在所述待测存储设备满足所述第一设定填充条件的情况下,按照所述第一测试参数,向所述待测存储设备发送目标写请求,包括:

5.根据权利要求4所述的方法,其特征在于,所述统计已发送请求数量是否达到所述第一限流数量之后,所述方法还包括:

6.根据权利要求1-5中任一项所述的方法,其特征在于,所述对待测存储设备进行数据填充,包括:

7.根据权利要求1-5中任一项所述的方法,其特征在于,所述第一测试参数包括第一请求写入时长、第一带宽、第一限流数量;所述第二测试参数包括第二请求写入时长、第二带宽、第二限流数量;

8.根据权利要求1-5中任一项所述的方法,其特征在于,所述检测到所述第二压力阶段对应的数据访问操作满足第二切换条件,继续执行所述按照第一压力阶段对应的第一测试参数执行数据访问操作的步骤,直至所述待测存储设备满足测试终止要求之后,所述方法还包括:

9.根据权利要求1-5任一项所述的方法,其特征在于,所述测试终止要求包括以下至少一种:测试时长达到设定时长;不同压力阶段发送的写任务数量达到设定数量阈值;以及,所述第一压力阶段与所述第二压力阶段的循环迭代次数达到设定次数阈值。

10.一种性能测试方法,其特征在于,包括:

11.一种电子设备,其特征在于,包括:存储器、处理器、通信接口;其中,所述存储器上存储有可执行代码,当所述可执行代码被所述处理器执行时,使所述处理器执行如权利要求1至9中任一项或权利要求10所述的性能测试方法。

12.一种非暂时性机器可读存储介质,其特征在于,所述非暂时性机器可读存储介质上存储有可执行代码,当所述可执行代码被电子设备的处理器执行时,使所述处理器执行如权利要求1至9中任一项或权利要求10所述的性能测试方法。

13.一种计算机程序产品,其特征在于,包括:计算机程序,当所述计算机程序被电子设备的处理器执行时,使所述处理器执行如权利要求1至9中任一项或权利要求10所述的性能测试方法。