一种日志处理方法、装置、电子设备及存储介质与流程

技术特征：
1.一种日志处理方法，其特征在于，包括：获取目标业务应用的日志配置信息；所述日志配置信息包括日志收集配置信息，所述日志收集配置信息指示预设时间段内需要收集的目标日志数据的数量，所述目标日志数据为满足预设条件的日志数据；根据所述日志收集配置信息收集所述目标业务应用产生的日志数据，得到收集的所述目标日志数据；处理收集的所述目标日志数据。2.根据权利要求1所述的日志处理方法，其特征在于，所述日志收集配置信息包括采样比例和目标维度的第一预设信息；所述根据所述日志收集配置信息收集所述目标业务应用产生的日志数据，得到收集的所述目标日志数据，包括：获取所述目标业务应用在所述预设时间段内产生的日志数据，得到第一日志数据集合；从所述第一日志数据集合中选取与所述第一预设信息相匹配的日志数据，得到第一预设日志数据；所述第一日志数据集合中除所述第一预设日志数据之外的日志数据作为候选日志数据；根据所述采样比例对所述候选日志数据进行采样，得到采样日志数据；根据所述第一预设日志数据和所述采样日志数据，得到收集的所述目标日志数据。3.根据权利要求2所述的日志处理方法，其特征在于，所述日志收集配置信息还包括所述目标维度的第二预设信息；所述根据所述采样比例对所述候选日志数据进行采样，得到采样日志数据包括：确定所述候选日志数据中与所述第二预设信息相匹配的第二预设候选日志数据；将除所述第二预设候选日志数据之外的候选日志数据作为目标候选日志数据；根据所述采样比例对所述目标候选日志数据进行采样，得到采样日志数据。4.根据权利要求2所述的日志处理方法，其特征在于，所述日志收集配置信息还包括存储队列标识；在所述得到收集的所述目标日志数据之后，所述方法还包括：根据所述存储队列标识确定目标存储队列；将收集的所述目标日志数据写入所述目标存储队列。5.根据权利要求1～4中任一项所述的日志处理方法，其特征在于，所述日志配置信息还包括日志处理配置信息，所述日志处理配置信息指示至少一个日志处理模块；所述处理收集的所述目标日志数据包括：根据所述日志处理配置信息，确定用于处理所述目标日志数据的至少一个日志处理模块；将所述目标日志数据发送给所述至少一个日志处理模块，以使得所述至少一个日志处理模块对所述目标日志数据进行处理。6.根据权利要求1所述的日志处理方法，其特征在于，所述方法还包括：响应于所述目标业务应用的调用指令，建立与所述目标业务应用的调用关系；所述调用指令是所述目标业务应用基于对应的应用配置信息中的日志收集组件标识生成的。7.一种日志处理装置，其特征在于，包括：
日志配置获取单元，被配置为执行获取目标业务应用的日志配置信息；所述日志配置信息包括日志收集配置信息，所述日志收集配置信息指示预设时间段内需要收集的目标日志数据的数量，所述目标日志数据为满足预设条件的日志数据；日志收集单元，被配置为执行根据所述日志收集配置信息收集所述目标业务应用产生的日志数据，得到收集的所述目标日志数据；日志处理单元，被配置为执行处理收集的所述目标日志数据。8.一种电子设备，其特征在于，包括：处理器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为执行所述指令，以实现如权利要求1至6中任一项所述的日志处理方法。9.一种计算机可读存储介质，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行如权利要求1至6中任一项所述的日志处理方法。10.一种计算机程序产品，包括计算机程序/指令，其特征在于，所述计算机程序/指令被处理器执行时实现权利要求1至6中任一项所述的日志处理方法。

技术总结
本公开关于一种日志处理方法、装置、电子设备及存储介质，其中，日志处理方法包括：获取目标业务应用的日志配置信息；所述日志配置信息包括日志收集配置信息，所述日志收集配置信息指示预设时间段内需要收集的目标日志数据的数量，所述目标日志数据为满足预设条件的日志数据；根据所述日志收集配置信息收集所述目标业务应用产生的日志数据，得到收集的所述目标日志数据；处理收集的所述目标日志数据。本公开可以灵活控制日志数据收集的数量以及需要收集哪些日志数据，有效降低了对于业务应用的日志数据处理量，节省了存储资源和计算资源。源。源。


技术研发人员：舒晓晖
受保护的技术使用者：北京达佳互联信息技术有限公司
技术研发日：2021.08.31
技术公布日：2021/12/14