一种代码测试方法、装置、设备及存储介质与流程

摘要: 本公开涉及代码测试,尤其涉及一种代码测试方法、装置、设备及存储介质。背景技术:1、目前,芯片的代码测试方法主要包括ate设备测试、自研自动化测试设备测试和测试人...
一种代码测试方法、装置、设备及存储介质与流程

本公开涉及代码测试,尤其涉及一种代码测试方法、装置、设备及存储介质。

背景技术:

1、目前,芯片的代码测试方法主要包括ate设备测试、自研自动化测试设备测试和测试人员手动测试;然而,现有技术中,ate设备进行代码测试需花费大量资源,自研自动化测试设备进行代码测试可能存在部分环节忽略问题,导致测试结果不可控,测试人员手动测试,测试质量和测试效率均不可靠。

技术实现思路

1、为了解决上述技术问题或者至少部分地解决上述技术问题,本公开提供了一种代码测试方法、装置、设备及存储介质。

2、本公开示例性实施例提供了一种代码测试方法,所述方法包括:

3、获取测试用例清单,调度所述测试用例清单中的测试用例,生成可执行文件;

4、运行所述可执行文件,获取目标检查点的实际输出数据和预期输出数据,基于预设的数据校验机制,确定所述实际输出数据与所述预期输出数据的校验结果;

5、获取执行数据,基于所述执行数据和所述校验结果,生成测试记录,所述执行数据至少包括执行时间。

6、在一些示例性实施例中,所述数据校验机制包括宏封装层、校验执行层和校验策略层;

7、所述基于预设的数据校验机制,确定所述实际输出数据与所述预期输出数据的校验结果,包括:

8、基于宏封装层获取宏定义,将目标检查点的实际输出数据和预期输出数据,一并传输至校验执行层;

9、基于所述校验执行层,对所述实际输出数据和所述预期输出数据进行数值比对,将数值比对结果暂存至预设的校验缓冲区中,所述数值比对结果包括一致和不一致;

10、获取待测模块的模块类型,基于校验策略层,匹配所述模块类型对应的校验策略,将所述校验策略作为所述数值比对的判定基准,所述校验策略包括寄存器精确比对、容差范围比对、时序容差比对、循环冗余校验和帧格式校验、计数值容差和中断触发校验、回读比对和纠错码校验、传输长度和目的地址数据校验、复位超时校验;

11、在可执行文件的各目标检查点均执行所述数值比对后,调用所述校验执行层提供的结果汇总函数,对所述校验缓冲区中的数值比对结果进行汇总判定;

12、若所述数值比对结果均为一致,则判定所述可执行文件校验通过;

13、若存在任一所述数值比对结果为不一致,则判定所述可执行文件校验不通过;

14、将所述汇总判定的结果作为所述实际输出数据与所述预期输出数据的校验结果。

15、在一些示例性实施例中,所述获取目标检查点的实际输出数据和预期输出数据,包括:

16、基于预设的控制脚本,建立与调试接口的底层通信,对所述可执行文件进行执行控制,所述执行控制包括:启动、暂停和终止;

17、在预设的目标检查点处暂停所述执行控制,基于所述目标检查点的类型获取实际输出数据,所述目标检查点包括函数返回检查点、寄存器检查点、通信数据检查点;

18、若所述目标检查点为所述函数返回检查点,则获取当前被测试函数执行后返回的状态码,作为所述实际输出数据,所述状态码包括正确码和错误码;

19、若所述目标检查点为所述寄存器检查点,则基于所述底层通信,获取目标硬件平台中对应外设寄存器的当前值,作为所述实际输出数据;

20、若所述目标检查点为所述通信数据检查点,则读取通信总线接收到的数据载荷,作为所述实际输出数据;

21、基于所述目标检查点的类型和所述可执行文件对应的测试用例标识,获取所述目标检查点的预期输出数据。

22、在一些示例性实施例中,所述获取测试用例清单,调度所述测试用例清单中的测试用例,生成可执行文件,包括:

23、获取用户输入的待测模块名称指令,基于待测模块名称查找对应的模块文件路径并获取所述模块文件路径下的测试用例清单;

24、若所述待测模块名称不存在或输入错误,则向用户反馈错误提示信息;

25、获取所述测试用例清单中测试用例的排列顺序,基于所述排列顺序,依次调度各测试用例,形成测试执行循环;

26、若所述测试用例清单中的各测试用例均被调度完毕,则结束所述测试执行循环;

27、在各测试执行循环中,基于当前调度的测试用例,动态分配目标工程的参数信息,对所述当前调度的测试用例进行编译,生成可执行文件。

28、在一些示例性实施例中,调度所述测试用例清单中的测试用例,包括:

29、在调度所述测试用例清单的测试用例的过程中,动态检查当前调度的测试用例在所述测试用例清单中的描述信息与所述当前调度的测试用例的实际名称是否一致;

30、若一致,则继续执行当前测试用例的调度;

31、若不一致,则中止所述调度,并向用户返回错误报告,所述错误报告包括所述描述信息与所述实际名称不一致的提示信息。

32、在一些示例性实施例中,所述运行所述可执行文件,包括:

33、将所述可执行文件下载至目标硬件平台中;

34、基于目标硬件平台,运行所述可执行文件。

35、在一些示例性实施例中,所述获取执行数据,基于所述执行数据和所述校验结果,生成测试记录,所述执行数据至少包括执行时间,包括:

36、基于预设的通信脚本,建立与目标硬件平台之间的调试通信链路,从所述目标硬件平台中提取所述校验结果对应的原始结果数据,并将所述原始结果数据传输回主控脚本环境中;

37、基于所述主控脚本环境中的主控脚本,获取测试用例的预期执行结果;

38、将所述原始结果数据和预期执行结果进行结果比对,若所述原始结果数据表征校验通过且所述预期执行结果为校验通过,或所述原始结果数据表征校验不通过且所述预期执行结果为校验不通过,则判定执行与预期一致,否则,判定不一致;

39、基于所述结果比对,生成所述测试用例的最终判定结果;

40、获取所述测试用例从启动至生成所述最终判定结果所经历的时间长度,作为执行时间;

41、基于所述原始结果数据、所述最终判定结果和所述执行时间,获取所述执行数据;

42、基于预设的测试记录模板,将所述执行数据和所述校验结果填充至相应位置,生成测试记录。

43、本公开示例性实施例还提供了一种代码测试装置,所述装置包括:

44、第一生成模块,用于获取测试用例清单,调度所述测试用例清单中的测试用例,生成可执行文件;

45、确定模块,用于运行所述可执行文件,获取目标检查点的实际输出数据和预期输出数据,基于预设的数据校验机制,确定所述实际输出数据与所述预期输出数据的校验结果;

46、第二生成模块,用于获取执行数据,基于所述执行数据和所述校验结果,生成测试记录,所述执行数据至少包括执行时间。

47、在一些示例性实施例中,所述第一生成模块,具体用于:

48、获取用户输入的待测模块名称指令,基于待测模块名称查找对应的模块文件路径并获取所述模块文件路径下的测试用例清单;

49、若所述待测模块名称不存在或输入错误,则向用户反馈错误提示信息;

50、获取所述测试用例清单中测试用例的排列顺序,基于所述排列顺序,依次调度各测试用例,形成测试执行循环;

51、若所述测试用例清单中的各测试用例均被调度完毕,则结束所述测试执行循环;

52、在各测试执行循环中,基于当前调度的测试用例,动态分配目标工程的参数信息,对所述当前调度的测试用例进行编译,生成可执行文件。

53、在一些示例性实施例中,所述第一生成模块,具体包括:

54、在调度所述测试用例清单的测试用例的过程中,动态检查当前调度的测试用例在所述测试用例清单中的描述信息与所述当前调度的测试用例的实际名称是否一致;

55、若一致,则继续执行当前测试用例的调度;

56、若不一致,则中止所述调度,并向用户返回错误报告,所述错误报告包括所述描述信息与所述实际名称不一致的提示信息。

57、在一些示例性实施例中,所述确定模块,具体用于:

58、将所述可执行文件下载至目标硬件平台中;

59、基于目标硬件平台,运行所述可执行文件。

60、在一些示例性实施例中,所述确定模块,具体用于:

61、基于预设的控制脚本,建立与调试接口的底层通信,对所述可执行文件进行执行控制,所述执行控制包括:启动、暂停和终止;

62、在预设的目标检查点处暂停所述执行控制,基于所述目标检查点的类型获取实际输出数据,所述目标检查点包括函数返回检查点、寄存器检查点、通信数据检查点;

63、若所述目标检查点为所述函数返回检查点,则获取当前被测试函数执行后返回的状态码,作为所述实际输出数据,所述状态码包括正确码和错误码;

64、若所述目标检查点为所述寄存器检查点,则基于所述底层通信,获取目标硬件平台中对应外设寄存器的当前值,作为所述实际输出数据;

65、若所述目标检查点为所述通信数据检查点,则读取通信总线接收到的数据载荷,作为所述实际输出数据;

66、基于所述目标检查点的类型和所述可执行文件对应的测试用例标识,获取所述目标检查点的预期输出数据。

67、在一些示例性实施例中,所述数据校验机制包括宏封装层、校验执行层和校验策略层;

68、所述确定模块,具体包括:

69、基于宏封装层获取宏定义,将目标检查点的实际输出数据和预期输出数据,一并传输至校验执行层;

70、基于所述校验执行层,对所述实际输出数据和所述预期输出数据进行数值比对,将数值比对结果暂存至预设的校验缓冲区中,所述数值比对结果包括一致和不一致;

71、获取待测模块的模块类型,基于校验策略层,匹配所述模块类型对应的校验策略,将所述校验策略作为所述数值比对的判定基准,所述校验策略包括寄存器精确比对、容差范围比对、时序容差比对、循环冗余校验和帧格式校验、计数值容差和中断触发校验、回读比对和纠错码校验、传输长度和目的地址数据校验、复位超时校验;

72、在可执行文件的各目标检查点均执行所述数值比对后,调用所述校验执行层提供的结果汇总函数,对所述校验缓冲区中的数值比对结果进行汇总判定;

73、若所述数值比对结果均为一致,则判定所述可执行文件校验通过;

74、若存在任一所述数值比对结果为不一致,则判定所述可执行文件校验不通过;

75、将所述汇总判定的结果作为所述实际输出数据与所述预期输出数据的校验结果。

76、在一些示例性实施例中,所述第二生成模块,具体包括:

77、基于预设的通信脚本,建立与目标硬件平台之间的调试通信链路,从所述目标硬件平台中提取所述校验结果对应的原始结果数据,并将所述原始结果数据传输回主控脚本环境中;

78、基于所述主控脚本环境中的主控脚本,获取测试用例的预期执行结果;

79、将所述原始结果数据和预期执行结果进行结果比对,若所述原始结果数据表征校验通过且所述预期执行结果为校验通过,或所述原始结果数据表征校验不通过且所述预期执行结果为校验不通过,则判定执行与预期一致,否则,判定不一致;

80、基于所述结果比对,生成所述测试用例的最终判定结果;

81、获取所述测试用例从启动至生成所述最终判定结果所经历的时间长度,作为执行时间;

82、基于所述原始结果数据、所述最终判定结果和所述执行时间,获取所述执行数据;

83、基于预设的测试记录模板,将所述执行数据和所述校验结果填充至相应位置,生成测试记录。

84、本公开示例性实施例还提供了一种电子设备,所述电子设备包括:处理器;用于存储所述处理器可执行指令的存储器;所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现如本公开示例性实施例提供的代码测试方法。

85、本公开示例性实施例还提供了一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序用于执行如本公开示例性实施例提供的代码测试方法。

86、本公开示例性实施例提供的技术方案与现有技术相比具有如下优点:

87、本公开示例性实施例提供的代码测试方法,通过获取测试用例清单,调度所述测试用例清单中的测试用例,生成可执行文件;运行所述可执行文件,获取目标检查点的实际输出数据和预期输出数据,基于预设的数据校验机制,确定所述实际输出数据与所述预期输出数据的校验结果;获取执行数据,基于所述执行数据和所述校验结果,生成测试记录,所述执行数据至少包括执行时间;本发明通过测试用例的调度、执行、数据校验和测试记录生成,有效实现了代码测试。