一种自动化测试的任务调度方法及任务执行方法与流程
本技术涉及自动化测试,具体而言,涉及一种自动化测试的任务调度方法及任务执行方法。
背景技术:
1、随着web应用功能日趋复杂、测试用例规模从数百增长到数千甚至上万,ui自动化测试已从单机执行方式逐步转向由中心调度服务统一分配任务、多个执行节点并行执行的分布式测试架构,以满足大规模测试的执行效率与多环境兼容性验证需求。
2、在现有的分布式测试实践中,节点管理通常采用运维人员手动在调度服务中配置各执行节点地址与并发的静态配置方式;任务调度则采用单层任务队列,所有测试任务进入一个共享队列,由调度服务按顺序分配给空闲执行节点。
3、上述测试方式存在任务调度灵活性不足的问题。
技术实现思路
1、本技术的目的在于,针对上述现有技术中的不足,提供一种自动化测试的任务调度方法及任务执行方法,可以提高任务调度的灵活性。
2、为实现上述目的,本技术实施例采用的技术方案如下:
3、第一方面,本技术一实施例提供了一种自动化测试的任务调度方法,应用于调度端,所述调度端与多个执行端通信连接,所述方法包括:
4、接收测试任务,提取所述测试任务中的主机字段;
5、若所述主机字段不为空,则根据所述主机字段的值,从多个所述执行端中确定指定执行端,并将所述测试任务写入所述指定执行端对应的专属任务池;所述专属任务池仅由对应的执行端取用;
6、若所述主机字段为空,则将所述测试任务写入全局任务池;所述全局任务池供各执行端共享取用;
7、写入完成后,通过消息发布订阅机制广播调度通知,以触发各执行端从对应的专属任务池中取出任务,在对应的专属任务池中不存在待执行任务时,从所述全局任务池中取出任务。
8、在一些实施例中,所述通过消息发布订阅机制广播调度通知,包括:
9、通过内存数据库中预设的发布/订阅消息通道发布携带任务启动标识的通知消息,以由各执行端在订阅所述发布/订阅消息通道后,响应所述通知消息进入调度流程。
10、在一些实施例中,所述方法还包括:
11、接收各所述执行端在启动时发送的注册请求;
12、根据所述注册请求登记所述执行端,并向所述执行端返回注册确认。
13、在一些实施例中,所述注册请求中包括所述执行端的地址信息;所述接收各所述执行端在启动时发送的注册请求之后,所述方法还包括:
14、根据各所述执行端的地址信息,拼接得到各所述执行端对应的专属任务池的池标识;
15、所述将所述测试任务写入所述指定执行端对应的专属任务池,包括:
16、将所述测试任务写入所述池标识所指示的专属任务池。
17、在一些实施例中,所述方法还包括:
18、基于预设心跳周期接收各所述执行端上报的心跳信息,所述心跳信息包括对应执行端的地址信息和当前并发任务数;
19、根据所述心跳信息更新各所述执行端的在线状态与当前负载;所述当前负载为基于所述执行端的当前并发任务数和最大并发任务数确定的;
20、在目标执行端未上报心跳信息的时间大于或等于预设时长时,将所述目标执行端的在线状态标记为离线,并停止向所述目标执行端的专属任务池写入测试任务。
21、第二方面,本技术另一实施例提供了一种任务执行方法,应用于任一执行端,所述执行端与调度端通信连接,所述方法包括:
22、接收所述调度端通过消息发布订阅机制广播的调度通知;
23、响应于所述调度通知,判断所述执行端对应的专属任务池中是否存在待执行任务;所述专属任务池中的任务,由所述调度端在测试任务的主机字段指定所述执行端时写入;
24、若存在待执行任务,则从所述执行端对应的专属任务池中取出任务;
25、若不存在待执行任务,则从供各执行端共享取用的全局任务池中取出任务;所述全局任务池中的任务由所述调度端在测试任务所携带的主机字段未指定执行端时写入;
26、执行所取出的任务。
27、在一些实施例中,所述执行所取出的任务,包括:
28、运行所取出的任务,并更新所述执行端的当前并发任务数。
29、在一些实施例中,所述接收所述调度端通过消息发布订阅机制广播的调度通知之前,所述方法还包括:
30、在所述执行端启动时获取所述执行端的地址信息并向所述调度端发送注册请求,所述注册请求包括本执行端的地址信息,所述地址信息用于构成所述执行端的专属任务池的池标识;
31、在注册成功后,订阅所述调度端所使用的发布/订阅消息通道,以接收所述调度通知。
32、在一些实施例中,所述方法还包括:
33、将所述所取出的任务的执行开始时间登记至执行状态记录;
34、根据预设检测周期读取所述执行状态记录中正在执行的各任务的执行开始时间,针对任一任务,根据所述任务的执行开始时间,确定所述任务的执行时长;
35、在所述任务的执行时长大于预设时长阈值时,确定所述任务执行超时,并对所述任务执行超时恢复处理。
36、在一些实施例中,所述对所述任务执行超时恢复处理,包括:
37、从所述执行状态记录中删除该任务的任务信息;
38、终止所述任务对应的进程以及该进程的全部子进程;
39、根据所述任务所携带的所述主机字段,在所述主机字段指定执行端时,将所述任务重新写入该指定执行端对应的专属任务池,在所述任务的主机字段未指定执行端时,将所述任务重新写入所述全局任务池;
40、通过所述消息发布订阅机制广播所述调度通知,以触发各执行端重新取出所述任务并执行。
41、第三方面,本技术另一实施例提供了一种自动化测试的任务调度装置,所述装置包括: 第一接收模块、第一写入模块、第一发布模块;其中:
42、第一接收模块,用于接收测试任务,提取所述测试任务中的主机字段;
43、第一写入模块,用于若所述主机字段不为空,则根据所述主机字段的值,从多个所述执行端中确定指定执行端,并将所述测试任务写入所述指定执行端对应的专属任务池;所述专属任务池仅由对应的执行端取用;若所述主机字段为空,则将所述测试任务写入全局任务池;所述全局任务池供各执行端共享取用;
44、第一发布模块,用于写入完成后,通过消息发布订阅机制广播调度通知,以触发各执行端从对应的专属任务池中取出任务,在对应的专属任务池中不存在待执行任务时,从所述全局任务池中取出任务。
45、在一些实施例中,所述第一发布模块,具体用于通过内存数据库中预设的发布/订阅消息通道发布携带任务启动标识的通知消息,以由各执行端在订阅所述发布/订阅消息通道后,响应所述通知消息进入调度流程。
46、在一些实施例中,所述第一接收模块,具体用于接收各所述执行端在启动时发送的注册请求;
47、所述第一发布模块,具体用于根据所述注册请求登记所述执行端,并向所述执行端返回注册确认。
48、在一些实施例中,所述第一写入模块,具体用于根据各所述执行端的地址信息,拼接得到各所述执行端对应的专属任务池的池标识;
49、所述第一写入模块,具体用于将所述测试任务写入所述池标识所指示的专属任务池。
50、在一些实施例中,第一接收模块,具体用于基于预设心跳周期接收各所述执行端上报的心跳信息,所述心跳信息包括对应执行端的地址信息和当前并发任务数; 根据所述心跳信息更新各所述执行端的在线状态与当前负载;所述当前负载为基于所述执行端的当前并发任务数和最大并发任务数确定的;在目标执行端未上报心跳信息的时间大于或等于预设时长时,将所述目标执行端的在线状态标记为离线,并停止向所述目标执行端的专属任务池写入测试任务。
51、第四方面,本技术另一实施例提供了一种任务执行装置,所述装置包括:第二接收模块、判断模块、第二写入模块、执行模块;其中:
52、所述第二接收模块,用于接收所述调度端通过消息发布订阅机制广播的调度通知;
53、所述判断模块,用于响应于所述调度通知,判断所述执行端对应的专属任务池中是否存在待执行任务;所述专属任务池中的任务,由所述调度端在测试任务的主机字段指定所述执行端时写入;
54、所述第二写入模块,用于若存在待执行任务,则从所述执行端对应的专属任务池中取出任务;若不存在待执行任务,则从供各执行端共享取用的全局任务池中取出任务;所述全局任务池中的任务由所述调度端在测试任务所携带的主机字段未指定执行端时写入;
55、所述执行模块,用于执行所取出的任务。
56、在一些实施例中,所述执行模块,具体用于运行所取出的任务,并更新所述执行端的当前并发任务数。
57、在一些实施例中,所述第二接收模块,具体用于在所述执行端启动时获取所述执行端的地址信息并向所述调度端发送注册请求,所述注册请求包括本执行端的地址信息,所述地址信息用于构成所述执行端的专属任务池的池标识;在注册成功后,订阅所述调度端所使用的发布/订阅消息通道,以接收所述调度通知。
58、在一些实施例中,所述执行模块,具体用于将所述所取出的任务的执行开始时间登记至执行状态记录;根据预设检测周期读取所述执行状态记录中正在执行的各任务的执行开始时间,针对任一任务,根据所述任务的执行开始时间,确定所述任务的执行时长;在所述任务的执行时长大于预设时长阈值时,确定所述任务执行超时,并对所述任务执行超时恢复处理。
59、在一些实施例中,所述执行模块,具体用于从所述执行状态记录中删除该任务的任务信息;终止所述任务对应的进程以及该进程的全部子进程;根据所述任务所携带的所述主机字段,在所述主机字段指定执行端时,将所述任务重新写入该指定执行端对应的专属任务池,在所述任务的主机字段未指定执行端时,将所述任务重新写入所述全局任务池;通过所述消息发布订阅机制广播所述调度通知,以触发各执行端重新取出所述任务并执行。
60、第五方面,本技术另一实施例提供了一种调度端,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当所述调度端运行时,所述处理器与所述存储器之间通过总线通信,所述处理器执行所述机器可读指令,以执行如上述第一方面任一所述方法的步骤。
61、第六方面,本技术另一实施例提供了一种执行端,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当所述执行端运行时,所述处理器与所述存储器之间通过总线通信,所述处理器执行所述机器可读指令,以执行如上述第二方面任一所述方法的步骤。
62、第七方面,本技术另一实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如上述第一方面或第二方面任一所述方法的步骤。
63、本技术的有益效果是:在主机字段不为空时写入指定执行端对应的专属任务池且仅由该执行端取用,实现了测试任务与特定执行环境的精准匹配和定向路由,保障了有环境依赖的测试任务不会被其他执行端误取,提高了此类任务执行的成功率与结果可信度。在主机字段为空时写入全局任务池供各执行端共享取用,使无环境依赖的通用任务可以被任意空闲执行端取用,避免了资源闲置,提高了资源利用率。同时,通过消息发布订阅机制广播调度通知,以事件驱动方式触发各执行端取任务,在保证高实时性的同时降低了调度端负载,专属池优先读取、全局池兜底的取用顺序使执行端可以优先处理指定给自身的任务、在专属任务池为空时再取用全局任务,兼顾了定向执行需求与全局资源利用率,避免了指定任务长期滞留和空闲执行端资源浪费。并且,本技术提供的方法仅由调度端根据主机字段进行路由写入、由各执行端自主按优先级取用任务,无需调度端进行集中式任务分配决策,消除了中央调度器的分配瓶颈,使执行端数量增长时调度性能不随之下降。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com