一种跨系统的端到端自动化测试方法与流程

摘要: 本发明涉及软件测试与自动化测试,尤其涉及一种跨系统的端到端自动化测试方法、一种跨系统的端到端自动化测试装置、一种电子设备及一种存储介质。背景技术:1、在现代企业...
一种跨系统的端到端自动化测试方法与流程

本发明涉及软件测试与自动化测试,尤其涉及一种跨系统的端到端自动化测试方法、一种跨系统的端到端自动化测试装置、一种电子设备及一种存储介质。

背景技术:

1、在现代企业级软件系统中,业务流程通常横跨多个独立的子系统。以供应链管理为例,总部返单流程涉及iscm系统(integrated supply chain management,集采供应链管理系统)的数据管理和校验,以及eos系统(electronic ordering system,电子订货系统)的业务执行和结果生成。这种跨系统的业务流程对端到端测试提出了极高的要求:既要保证单个系统的操作正确性,又要验证跨系统数据传递的一致性和完整性。

2、目前业界主要采用的跨系统测试方案,一是手工联调测试方式。即,测试人员分别在iscm和eos系统中手动执行操作步骤,通过截图和文字记录验证结果。这种方式耗时长(一个完整的返单流程测试通常需要1~2小时)。且跨系统数据一致性的人工比对容易遗漏错误。二是单系统自动化方式。即,使用selenium、playwright等自动化测试框架为每个系统编写独立的自动化测试脚本,通过ci/cd流水线(continuous integration/continuousdeployment pipeline,持续集成/持续部署流水线)分别执行。虽然单系统操作实现了自动化,但跨系统的数据传递和一致性验证仍需要人工介入,无法实现真正的端到端全自动化。且测试报告生成依赖人工统计,耗时长、易出错、缺乏多维度的深度分析。

技术实现思路

1、本发明提供了一种跨系统的端到端自动化测试方法、一种跨系统的端到端自动化测试装置、一种电子设备及一种存储介质,用于解决或部分解决当前跨系统测试环境隔离困难、数据一致性验证缺失、测试效率低下、测试报告生成烦琐的技术问题。

2、本发明提供了一种跨系统的端到端自动化测试方法,所述方法包括:

3、获取待测试用例;所述待测试用例包括多个测试步骤;

4、基于所述多个测试步骤,按预设顺序执行浏览器上下文隔离的跨系统端到端测试流程,在测试执行过程中,采集每个所述测试步骤的关键执行数据;

5、根据所有所述测试步骤的关键执行数据进行多维度聚合分析,获得所述待测试用例的关键测试指标数据;

6、基于所述关键测试指标数据,生成所述待测试用例的测试报告。

7、可选地,所述基于所述多个测试步骤,按预设顺序执行浏览器上下文隔离的跨系统端到端测试流程,包括:

8、通过测试协调器启动预先创建的第一浏览器上下文与第二浏览器上下文,并通过数据总线加载登录认证凭据,完成统一认证;

9、当完成统一认证后,自动登录位于所述第一浏览器上下文的第一目标端系统和位于所述第二浏览器上下文的第二目标端系统;

10、通过所述第一目标端系统导出业务数据与源数据指纹;

11、通过所述数据总线记录所述源数据指纹,同时将所述业务数据传递至所述第二目标端系统;

12、通过所述第二目标端系统导入所述业务数据,自动校验所述业务数据的数据格式,并在数据格式校验通过后执行业务流程;

13、当所述第二目标端系统执行完业务流程后,通过所述数据总线向所述第一目标端系统回写当前数据状态;

14、通过所述测试协调器向所述第一目标端系统发起回验请求,以查询所述第一目标端系统的当前数据状态;

15、通过所述数据总线根据所述当前数据状态与所述源数据指纹进行数据一致性验证,并向所述测试协调器反馈验证结果;

16、若数据一致性验证通过,则表明所述业务数据在传递过程中保持一致,结束所述待测试用例的跨系统端到端测试流程。

17、可选地,所述方法还包括:

18、在测试执行过程中,每执行完一个测试步骤,自动记录所述测试步骤的执行状态;所述执行状态的类型包括成功、失败、跳过;

19、若所述测试步骤的执行状态类型为失败,则记录所述测试步骤的断点位置与异常事件类型,并将所述断点位置与所述异常事件类型推送至测试人员的终端显示界面;

20、响应于检测到异常已被成功修复,从所述断点位置处恢复执行测试流程。

21、可选地,在同时启动第一浏览器上下文与第二浏览器上下文之前,所述方法还包括:

22、识别所述待测试用例在测试执行期间关联的第一目标端系统与第二目标端系统;

23、响应于浏览器上下文创建操作,通过所述测试协调器分别创建所述第一目标端系统对应的第一浏览器上下文,所述第二目标端系统对应的第二浏览器上下文;

24、其中,所述第一浏览器上下文与所述第二浏览器上下文通过数据总线共享测试数据;所述第一浏览器上下文与所述第二浏览器上下文的会话状态信息互不干扰;所述会话状态信息包括客户端cookie与服务端session数据。

25、可选地,所述在测试执行过程中,采集每个所述测试步骤的关键执行数据,包括:

26、在测试执行过程中,每完成一个测试步骤,则通过hook机制自动采集所述测试步骤的关键执行数据;所述关键执行数据包括执行状态、执行耗时、失败截图、控制台日志和网络请求记录。

27、可选地,所述根据所有所述测试步骤的关键执行数据进行多维度聚合分析,获得所述待测试用例的关键测试指标数据,包括:

28、对各个所述测试步骤的关键执行数据进行清洗,并基于清洗后所得数据进行多维度聚合分析,获得所述待测试用例的关键测试指标数据;所述关键测试指标数据包括测试用例通过率、模块执行分布统计、失败根因归类与统计、通过率趋势。

29、可选地,所述基于所述关键测试指标数据,生成所述待测试用例的测试报告,包括:

30、基于所述测试用例通过率,生成概要统计;

31、基于所述模块执行分布统计、所述失败根因归类与统计、所述通过率趋势,生成可视化图表;

32、根据所述概要统计与所述可视化图表,按预设模板生成所述待测试用例的测试报告。

33、本发明还提供了一种跨系统的端到端自动化测试装置,所述装置包括:

34、测试用例获取单元,用于获取待测试用例;所述待测试用例包括多个测试步骤;

35、测试流程执行单元,用于基于所述多个测试步骤,按预设顺序执行浏览器上下文隔离的跨系统端到端测试流程,在测试执行过程中,采集每个所述测试步骤的关键执行数据;

36、多维度聚合分析单元,用于根据所有所述测试步骤的关键执行数据进行多维度聚合分析,获得所述待测试用例的关键测试指标数据;

37、测试报告生成单元,用于基于所述关键测试指标数据,生成所述待测试用例的测试报告。

38、本发明还提供了一种电子设备,所述设备包括处理器以及存储器:

39、所述存储器用于存储程序代码,并将所述程序代码传输给所述处理器;

40、所述处理器用于根据所述程序代码中的指令执行如上任一项所述的跨系统的端到端自动化测试方法。

41、本发明还提供了一种计算机可读存储介质,所述计算机可读存储介质用于存储程序代码,所述程序代码用于执行如上任一项所述的跨系统的端到端自动化测试方法。

42、从以上技术方案可以看出,本发明具有以下优点:

43、提供了一种跨系统的端到端自动化测试方法。获取待测试用例;所述待测试用例包括多个测试步骤;基于多个测试步骤,按预设顺序执行浏览器上下文隔离的跨系统端到端测试流程,在测试执行过程中,采集每个测试步骤的关键执行数据;一方面,通过设置浏览器上下文隔离机制实现多系统间的端到端自动化测试编排。基于这一机制,跨系统的端到端测试流程本质上是在对应的浏览器上下文中按照测试用例的测试步骤序列依次操作各目标端系统,从而执行完整的端到端测试流程。另一方面,测试执行过程中所采集的各个测试步骤的关键执行数据,可以用于后续的数据分析流程,以及自动化生成相应的测试报告。根据所有测试步骤的关键执行数据进行多维度聚合分析,获得待测试用例的关键测试指标数据;基于关键测试指标数据,生成待测试用例的测试报告。从而通过智能数据采集与多维度聚合分析实现了智能化的测试报告自动生成,简化了测试报告生成流程,最终实现了“执行上下文隔离的跨系统的端到端测试流程→智能数据采集与分析→生成测试报告”的全自动化测试流程。