一种覆盖率驱动白盒测试优化方法、电子设备及存储介质与流程

摘要: 本发明实施例涉及芯片测试,特别涉及一种覆盖率驱动白盒测试优化方法、电子设备及存储介质。背景技术:1、白盒测试是软件测试领域中的一种重要测试方法,又称为结构测试或...
一种覆盖率驱动白盒测试优化方法、电子设备及存储介质与流程

本发明实施例涉及芯片测试,特别涉及一种覆盖率驱动白盒测试优化方法、电子设备及存储介质。

背景技术:

1、白盒测试是软件测试领域中的一种重要测试方法,又称为结构测试或逻辑驱动测试。在白盒测试中,测试者能够清楚地了解被测软件内部的逻辑结构和运作方式,使用程序内部的逻辑结构及相关知识来设计或选择测试用例,对程序的所有逻辑路径进行测试。白盒测试广泛应用于各个领域的软件开发过程中,尤其对于数据处理量大、业务逻辑复杂的金融系统、医疗系统和企业级信息系统,白盒测试可以深入测试软件的内部逻辑,确保在各种业务场景下都能正确运行。

2、随着微服务架构、容器化技术、敏捷开发和devops(development和operations的组合词)等新技术及开发模式的快速发展,软件系统的更新迭代周期大幅缩短,代码的版本变更频率显著提高。与此同时,企业级软件项目的规模和复杂度持续增长,业务实现类之间的相互依赖关系日益复杂,一个功能模块的正确运行往往依赖于ioc(inversion ofcontrol,控制反转)容器注入、数据库连接池、外部服务接口调用等大量基础设施组件。在此背景下,白盒测试面临着测试效率、测试充分性和测试可执行性之间的多重矛盾:一方面,需要在短时间内完成对新版本代码的全面测试;另一方面,传统的白盒测试方法在测试用例设计、测试环境搭建、代码覆盖率管理以及测试结果分析优化等方面均存在显著不足,难以满足高频迭代开发对测试效率和质量的双重要求。

3、相关技术中,涉及基于增量代码分析和历史覆盖信息的白盒测试方法,基于agent技术的白盒测试环境自动化方法,基于大语言模型的测试用例自动生成方法,基于大模型的代码测试用例生成方法,但这些白盒测试技术方案主要存在以下缺点:

4、缺点一:以单个代码文件为输入独立生成和执行测试用例,未解决企业级项目中业务实现类之间复杂依赖关系的问题,导致自动生成的测试用例因项目级依赖缺失而无法在真实业务项目中正常执行。

5、缺点二:自动化闭环仅关注测试用例的编译通过或运行而不报错,缺乏以代码覆盖率为核心驱动、结合大模型进行具体到行号和分支的多维度深度诊断及迭代优化的能力。

6、缺点三:对于大型企业级项目,未提出从全局覆盖率数据中精准解析和提取用户指定目标文件覆盖信息的技术手段,导致覆盖率分析过程中存在严重的信息噪声干扰。

7、缺点四:缺乏将项目级代码获取、编译安装、测试代码生成、测试执行、覆盖率报告生成、ai多维诊断、诊断建议自动应用和重新执行验证全流程打通的一站式平台化闭环操作能力。

技术实现思路

1、本发明的目的在于至少提供一种覆盖率驱动白盒测试优化方法、电子设备及存储介质,至少可以解决现有方法中企业级项目中业务类相互依赖导致自动生成的测试用例无法正常执行、仅以编译通过或运行不报错为测试优化的闭环终点,大型项目中全局覆盖率报告信息噪声干扰ai诊断准确性,测试操作流程碎片化、人工干预环节多的技术问题。

2、为解决上述技术问题,本技术的至少一个实施例提供了一种覆盖率驱动白盒测试优化方法,包括:

3、获取当前测试任务的项目代码源并确定目标测试文件;

4、对所述项目代码源进行编译安装,加载项目全部依赖;

5、将所述目标测试文件提交至大模型,生成测试代码;

6、在已完成编译安装的项目环境中执行所述测试代码,生成覆盖率数据文件;

7、从所述覆盖率数据文件中解析和提取所述目标测试文件的覆盖率信息;

8、将所述目标测试文件的覆盖率信息、所述项目代码源以及所述测试代码一并提交至大模型进行多维诊断,生成诊断结果,所述诊断结果中包含所有未覆盖区域的补充测试代码;

9、响应于用户的应用建议指令,将所述诊断结果中的补充测试代码与已有测试代码进行自动合并,重新执行合并后的测试代码,以更新覆盖率信息,并支持再次触发多维诊断,形成覆盖率目标驱动的迭代优化闭环,所述应用建议指令包括选择应用至少部分未覆盖区域的补充测试代码建议。

10、本技术的至少一个实施例还提供了一种覆盖率驱动白盒测试优化装置,包括:

11、代码获取模块,用于获取当前测试任务的项目代码源并确定目标测试文件;

12、编译安装模块,用于对所述项目代码源进行编译安装,加载项目全部依赖;

13、测试生成模块,用于将所述目标测试文件提交至大模型,生成测试代码;

14、测试执行模块,用于在已完成编译安装的项目环境中执行所述测试代码,生成覆盖率数据文件;

15、覆盖率提取模块,用于从所述覆盖率数据文件中解析和提取所述目标测试文件的覆盖率信息;

16、多维诊断模块,用于将所述目标测试文件的覆盖率信息、所述项目代码源以及所述测试代码一并提交至大模型进行多维诊断,生成诊断结果,所述诊断结果中包含所有未覆盖区域的补充测试代码;

17、迭代优化模块,用于响应于用户的应用建议指令,将所述诊断结果中的补充测试代码与已有测试代码进行自动合并,重新执行合并后的测试代码,以更新覆盖率信息,并支持再次触发多维诊断,形成覆盖率目标驱动的迭代优化闭环,所述应用建议指令包括选择应用至少部分未覆盖区域的补充测试代码建议。

18、本技术的至少一个实施例还提供了一种电子设备,包括:至少一个处理器;以及,与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述的覆盖率驱动白盒测试优化方法。

19、本技术的至少一个实施例还提供了一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时实现上述的覆盖率驱动白盒测试优化方法。

20、本技术的实施例提供的方法,通过项目级代码获取与编译安装解决企业级项目中业务类相互依赖的问题,通过大模型自动生成目标测试文件的测试代码并执行测试,通过精准解析覆盖率数据文件提取目标测试文件的覆盖率信息,将目标测试文件覆盖率信息、原始源代码和生成的测试代码一并提交大模型进行多维度深度诊断,并提供用户一键应用诊断建议、系统自动合并测试代码并重新执行验证的覆盖率目标驱动迭代优化闭环,全流程通过平台化系统进行统一管理和操作。

21、在一些可选的实施例中,获取当前测试任务的项目代码源并确定目标测试文件,包括:

22、接收用户的代码获取请求并根据所述代码获取请求获取项目代码源,所述代码获取请求包含代码来源方式和目标测试文件的指定信息;

23、对所述项目代码源进行项目结构识别,得到项目构建类型和构建配置文件;

24、根据所述项目代码源或者所述代码获取请求中指定信息,确定目标测试文件,记录所述目标测试文件的标识信息;

25、将所述项目代码源和所述目标测试文件的标识信息存储至当前测试任务对应的工作空间。

26、在一些可选的实施例中,对所述项目代码源进行编译安装,加载项目全部依赖,包括:

27、根据识别的项目构建类型,确定编译安装命令;

28、在当前测试任务对应的工作空间中执行所述编译安装命令;

29、验证项目依赖加载的完整性。

30、在一些可选的实施例中,将所述目标测试文件提交至大模型,生成测试代码,包括:

31、根据所述目标测试文件的编程语言类型、项目构建类型和测试框架类型,构建用于引导大模型生成测试代码的提示信息;

32、向大模型发送所述提示信息,并接收大模型根据所述提示信息生成并返回的测试代码;

33、对所述测试代码进行解析和格式化处理;

34、记录解析和格式化处理后的测试代码。

35、在一些可选的实施例中,在已完成编译安装的项目环境中执行所述测试代码,生成覆盖率数据文件,包括:

36、根据项目构建类型和测试框架类型确定测试执行命令,所述测试执行命令中同时配置覆盖率采集工具的参数,使得测试执行过程中同步采集代码覆盖率数据;

37、在当前测试任务对应的工作空间中执行所述测试执行命令,并捕获测试执行结果。

38、在一些可选的实施例中,从所述覆盖率数据文件中解析和提取所述目标测试文件的覆盖率信息,包括:

39、根据所述目标测试文件的标识信息解析覆盖率数据文件,定位到与所述目标测试文件对应的覆盖率数据文件;

40、从定位到的覆盖率数据文件中提取所述目标测试文件的细粒度覆盖率信息,所述细粒度覆盖率信息包括:所述目标测试文件的行覆盖率、分支覆盖率、方法覆盖率、覆盖的行的覆盖信息和未覆盖的行的信息;

41、基于所述细粒度覆盖率信息生成所述目标测试文件的覆盖率摘要,作为所述目标测试文件的覆盖率信息。

42、在一些可选的实施例中,将所述目标测试文件的覆盖率信息、所述项目代码源以及所述测试代码一并提交至大模型进行多维诊断,生成诊断结果,包括:

43、基于所述目标测试文件的覆盖率信息、所述项目代码源以及所述测试代码,构建多维诊断提示信息,所述多维诊断提示信息包括诊断输出格式,所述诊断输出格式包括:针对未覆盖的代码区域的优先级建议、针对未覆盖的代码区域的未覆盖原因、针对每个未覆盖区域的能够触发执行的业务场景和/或输入条件、针对每个未覆盖区域的补充测试代码建议;

44、将所述多维诊断提示信息发送至大模型进行多维诊断,并接收大模型返回的诊断结果;

45、解析和存储所述诊断结果。

46、在一些可选的实施例中,响应于用户的应用建议指令,将所述诊断结果中的补充测试代码与已有测试代码进行自动合并,重新执行合并后的测试代码,以更新覆盖率信息,并支持再次触发多维诊断,形成覆盖率目标驱动的迭代优化闭环,包括:

47、接收用户根据所述诊断结果发出的应用建议指令,所述应用建议指令包括选择应用至少部分未覆盖区域的补充测试代码建议;

48、响应于所述应用建议指令,将所述应用建议指令所选择的补充测试代码与已有的测试代码进行自动合并;

49、重新执行合并后的测试代码和生成覆盖率数据文件;

50、从所述覆盖率数据文件中解析和提取覆盖率信息;

51、在根据覆盖率信息判断是否已达到期望目标:若覆盖率仍未达到期望目标,则将覆盖率信息、所述项目代码源以及执行合并后的测试代码一并提交至大模型再次进行多维诊断,生成新的诊断结果,以供用户确定是否再次发出应用建议指令。