批处理监控方法、装置及设备与流程

技术特征：
1.一种批处理监控方法，其特征在于，所述方法包括：根据作业的配置信息获取应用的计划运行的作业，生成作业运行计划表；通过作业的运行历史数据获取作业的关键运行指标，生成作业运行历史指标表；通过所述作业运行计划表，获取已经运行完成的作业以计算并展示应用完成的进度；结合所述作业运行历史指标表，展示异常情况并钻取异常作业的信息，获取应用的异常作业列表。2.根据权利要求1所述的方法，其特征在于，根据作业的配置信息获取应用的计划运行的作业，生成作业运行计划表，包括：识别场景的末端节点应用，其中一个场景对应一个末端节点应用；确定所述末端节点应用与对应场景的作业间的依赖关系；根据所述作业间的依赖关系逐级向前推算出各节点应用，获得该场景的aoe网络，从而生成实际作业列表。3.根据权利要求2所述的方法，其特征在于，识别场景的末端节点应用，包括：根据所述作业的配置信息，分类出各场景；将所述各场景关联的目标应用识别为末端节点应用。4.根据权利要求1所述的方法，其特征在于，通过作业的运行历史数据获取作业的关键运行指标包括，将所述运行历史数据的中位数作为所述作业的关键运行指标。5.根据权利要求1或4所述的方法，其特征在于，所述作业的关键运行指标包括：作业的执行时长、作业的开始运行时间节点、作业的结束运行时间节点。6.根据权利要求1所述的方法，其特征在于，该方法还包括：定时刷新所述异常作业列表，将刷新的数据保持在缓存中，以直接读取所述刷新的数据。7.根据权利要求3所述的方法，其特征在于，通过所述作业运行计划表，获取已经运行完成的作业以计算并展示各应用完成的进度，包括：根据场景中每个应用包含的作业数量，轮询所述作业的当前完成情况，其中每个应用的实时进度＝已执行成功的作业数量/场景下该应用包含的作业总数；以所述末端节点应用的进度来表征场景的整体进度。8.根据权利要求2所述的方法，其特征在于，展示异常情况并钻取异常作业的信息，获取每个应用的异常作业列表，包括：从场景的aoe网络，获取具有最大路径长度的路径，标记为关键路径；根据所述关键路径，标记所述异常情况，包括标记作业运行失败、作业运行超时和作业延迟启动。9.一种批处理监控装置，其特征在于，所述装置包括：第一模块，用于根据作业的配置信息获取应用的计划运行的作业，生成作业运行计划表；第二模块，用于通过作业的运行历史数据获取作业的关键运行指标，生成作业运行历史指标表；第三模块，用于通过所述作业运行计划表，获取已经运行完成的作业以计算并展示应用完成的进度；
第四模块，用于结合所述作业运行历史指标表，展示异常情况并钻取异常作业的信息，获取应用的异常作业列表。10.根据权利要求9所述的装置，其特征在于，所述第一模块被配置为：根据所述作业的配置信息，分类出各场景；将所述各场景关联的目标应用识别为末端节点应用；识别场景的末端节点应用，其中一个场景对应一个末端节点应用；确定所述末端节点应用与对应场景的作业间的依赖关系；根据所述作业间的依赖关系逐级向前推算出各节点应用，获得该场景的aoe网络，从而生成实际作业列表。11.根据权利要求10所述的装置，其特征在于，所述第二模块被配置为：根据场景中每个应用包含的作业数量，轮询所述作业的当前完成情况，其中每个应用的实时进度＝已执行成功的作业数量/场景下该应用包含的作业总数；以所述末端节点应用的进度表征场景的整体进度。12.根据权利要求11所述的装置，其特征在于，所述第四模块被配置为：获取异常情况分类；通过所述异常情况的分类，计算异常作业的比例；根据所述异常作业的比例，进行区分展示。13.一种批处理监控设备，该设备包括处理器和存储器，其特征在于，所述处理器被配置为执行如权利要求1-8任一项所述的方法。14.一种处理器，其特征在于，被配置成执行根据权利要求1至8中任意一项所述的批处理监控方法。15.一种机器可读存储介质，该机器可读存储介质上存储有指令，其特征在于，该指令在被处理器执行时使得所述处理器被配置成执行根据权利要求1至8中任一项所述的方法。16.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序在被处理器执行时实现根据权利要求1至8中任一项所述的方法。

技术总结
本申请实施例提供一种批处理监控方法、装置及设备。方法包括：根据作业的配置信息获取应用计划运行的作业，生成作业运行计划表；通过作业的运行历史数据获取作业的关键运行指标，生成作业运行历史指标表；通过作业运行计划表，获取已经运行完成的作业以计算并展示应用完成的进度；结合作业运行历史指标表，展示异常情况并钻取异常作业的信息，获取应用的异常作业列表。本申请的技术方案具备全局监控的能力，通过场景的维度组织整体批处理监控，可以实时把控整体加工进度，提高运维效率；通过场景中每个应用的异常作业列表，可定点进行运维；通过作业运行计划表提前锁定需要监控的作业范围，无需等待作业流完成实例化，提高监控的准确度。的准确度。的准确度。


技术研发人员：赖海滨 高伟钦 翁世清
受保护的技术使用者：中国建设银行股份有限公司
技术研发日：2021.12.07
技术公布日：2022/3/8