数据评估方法和装置与流程

摘要: 本公开实施例涉及计算机,尤其涉及数据评估方法和装置。背景技术:1、在相关技术中,数据质量评估通常采用预设的固定指标体系,将准确性、一致性等通用维度作为顶层分类,...
数据评估方法和装置与流程

本公开实施例涉及计算机,尤其涉及数据评估方法和装置。

背景技术:

1、在相关技术中,数据质量评估通常采用预设的固定指标体系,将准确性、一致性等通用维度作为顶层分类,并挂载相应的细粒度指标;系统基于固定权重对各级指标得分进行加权聚合,生成综合评分以支撑数据治理决策。该类方法适用于评估规则相对稳定的场景。

2、然而,上述方案中指标定义及权重配置通常与业务场景固化绑定,难以随行业属性动态调整;面对多行业、多模态数据时,需部署多套异构实例或频繁修改评估核心逻辑,导致系统扩展维护开销高、计算资源复用率低,且评估结果的准确性难以保障。

技术实现思路

1、本公开实施例提供一种数据评估方法、装置、计算机可读存储介质、电子设备,以至少部分地解决相关技术中存在的上述问题。

2、根据本公开的其中一方面,提供一种数据评估方法,包括:获取待评估数据以及待评估数据对应的行业属性信息;基于预设的多级评估框架,确定与行业属性信息对应的各级评估指标及其权重;其中,多级评估框架包括至少一个一级评估维度,各一级评估维度下配置有至少一个二级评估指标,且各二级评估指标与行业属性信息相关联;一级评估维度包括以下一项或多项:数据规模维度、数据质量维度、数据表征维度、数据上下文维度和数据冗余维度;根据各级评估指标,对待评估数据执行评估处理,得到对应的指标分值;基于权重对指标分值进行聚合处理,得到评估结果。

3、根据本公开的其中一方面,提供一种数据评估装置,包括:获取模块,用于获取待评估数据以及待评估数据对应的行业属性信息;确定模块,用于基于预设的多级评估框架,确定与行业属性信息对应的各级评估指标及其权重;其中,多级评估框架包括至少一个一级评估维度,各一级评估维度下配置有至少一个二级评估指标,且各二级评估指标与行业属性信息相关联;一级评估维度包括以下一项或多项:数据规模维度、数据质量维度、数据表征维度、数据上下文维度和数据冗余维度;第一评估模块,用于根据各级评估指标,对待评估数据执行评估处理,得到对应的指标分值;第二评估模块,用于基于权重对指标分值进行聚合处理,得到评估结果。

4、根据本公开的其中一方面,提供一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时,实现以上任一方法。

5、根据本公开的其中一方面,提供一种电子设备,包括处理器和存储器,存储器中存储有计算机程序,处理器执行计算机程序时实现以上任一方法。

6、本公开其中一实施例提供一种数据评估方法,包括:获取待评估数据以及待评估数据对应的行业属性信息;基于预设的多级评估框架,确定与行业属性信息对应的各级评估指标及其权重;其中,多级评估框架包括至少一个一级评估维度,各一级评估维度下配置有至少一个二级评估指标,且各二级评估指标与行业属性信息相关联;一级评估维度包括以下一项或多项:数据规模维度、数据质量维度、数据表征维度、数据上下文维度和数据冗余维度;根据各级评估指标,对待评估数据执行评估处理,得到对应的指标分值;基于权重对指标分值进行聚合处理,得到评估结果。这样,通过一级维度挂载行业差异化指标及权重,提升评估体系在多行业场景的复用性,有助于减少固定权重带来的评估偏差,并降低系统扩展维护开销。

1.一种数据评估方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述各级评估指标,对所述待评估数据执行评估处理,得到对应的指标分值,包括:

3.根据权利要求2所述的方法,其特征在于,在所述调用与所述行业属性信息对应的评估器之前,还包括:

4.根据权利要求3所述的方法,其特征在于,所述基于所述模态标识和所述行业属性信息,从预设的评估器集合中匹配对应的所述评估器,包括:

5.根据权利要求2所述的方法,其特征在于,所述通过所述评估器,对所述待评估数据进行度量处理,得到所述指标分值,包括:

6.根据权利要求5所述的方法,其特征在于,

7.根据权利要求5所述的方法,其特征在于,所述识别所述待评估数据当前的模态类型,包括:

8.根据权利要求1所述的方法,其特征在于,所述评估结果包括:

9.根据权利要求1所述的方法,其特征在于,所述基于所述权重对所述指标分值进行聚合处理,得到评估结果,包括:

10.根据权利要求9所述的方法,其特征在于,当某一所述一级评估维度下缺失全部所述二级评估指标时,将所述一级评估维度标记为不可评估状态,并不参与所述综合评估分值的计算。