一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

数据处理方法、装置、电子设备及存储介质与流程

2023-04-12 17:46:13 来源:中国专利 TAG:

技术特征:
1.一种数据处理方法,包括:获取目标数据,所述目标数据包括至少一个目标元素;基于所述目标元素的属性,得到所述目标元素的第一标签和第二标签,其中所述第一标签表征为目标元素的语义,第二标签表征为目标元素的取值特征;基于所述目标元素的第一标签和第二标签,采用人工智能方式确定所述目标元素的数据类别;基于所述目标元素的数据类别,对所述目标元素进行标准化处理,得到所述目标元素的标准化数据。2.根据权利要求1所述的方法,其中,所述基于所述目标元素的属性,得到所述目标元素的第一标签,包括:基于所述目标元素的命名信息,得到所述目标元素的第一标签;或者,基于所述目标元素所处的目标表的命名信息和所述目标元素的命名信息,得到所述目标元素的第一标签。3.根据权利要求1或2所述的方法,其中,所述基于所述目标元素的属性,得到所述目标元素的第二标签,包括:基于所述目标元素的取值信息和第一标签,得到所述目标元素的第二标签。4.根据权利要求1至3任一项所述的方法,所述目标元素为多个目标表中的元素,所述方法还包括:基于所述多个目标表中的每个目标表中的目标元素的第一标签和第二标签,采用第一预设算法从所述多个目标表中确定出具有关联关系的目标表;其中目标表之间的关联关系用于供输出。5.根据权利要求1至3任一项所述的方法,所述目标元素为目标表中的元素,所述方法还包括:基于所述目标元素的第一标签和第二标签,采用第二预设算法确定所述目标表的类型。6.根据权利要求5所述的方法,其中,所述基于所述目标元素的数据类别,对所述目标元素进行标准化处理,得到所述目标元素的标准化数据,包括:基于所述目标元素的数据类别和所述目标表的类型,对所述目标表的目标元素进行标准化处理,得到所述目标元素的标准化数据。7.根据权利要求1至4任一项所述的方法,其中,所述基于所述目标元素的数据类别,对所述目标元素进行标准化处理,得到所述目标元素的标准化数据,包括:按照所述目标元素的数据类别对应的目标处理方式,对所述目标元素进行标准化处理,得到所述目标元素的标准化数据。8.根据权利要求1至3任一项所述的方法,其中,所述目标元素为多个目标表中的元素,在获取目标数据之后,所述方法还包括:获得各个目标表中的相同目标元素的取值分布特征;在所述相同目标元素的取值分布特征满足预定分布特征的情况下,基于各个目标表中的所述相同目标元素的属性,得到各个目标表中的所述相同目标元素的第一标签和第二标
签。9.根据权利要求1或2所述的方法,还包括:输出所述目标元素的标准化数据。10.一种数据处理装置,包括:第一获取单元,用于获取目标数据,所述目标数据包括至少一个目标元素;第二获取单元,用于基于所述目标元素的属性,得到所述目标元素的第一标签和第二标签,其中所述第一标签表征为目标元素的语义,第二标签表征为目标元素的取值特征;第一确定单元,用于基于所述目标元素的第一标签和第二标签,采用人工智能方式确定所述目标元素的数据类别;第三获取单元,用于基于所述目标元素的数据类别,对所述目标元素进行标准化处理,得到所述目标元素的标准化数据。11.根据权利要求10所述的装置,其中,所述第二获取单元,用于:基于所述目标元素的命名信息,得到所述目标元素的第一标签;或者,基于所述目标元素所处的目标表的命名信息和所述目标元素的命名信息,得到所述目标元素的第一标签。12.根据权利要求10或11所述的装置,其中,所述第二获取单元,用于:基于所述目标元素的取值信息和第一标签,得到所述目标元素的第二标签。13.根据权利要求10至12任一项所述的装置,其中,所述目标元素多个为目标表中的元素,所述装置还包括:第二确定单元,用于基于所述多个目标表中的每个目标表中的目标元素的第一标签和第二标签,采用第一预设算法从所述多个目标表中确定出具有关联关系的目标表;其中目标表之间的关联关系用于供输出。14.根据权利要求10至12任一项所述的装置,其中,所述目标元素为目标表中的元素,所述装置还包括:第三确定单元,用于基于所述目标元素的第一标签和第二标签,采用第二预设算法确定所述目标表的类型。15.根据权利要求14所述的装置,其中,所述第三获取单元,用于:基于所述目标元素的数据类别和所述目标表的类型,对所述目标表的目标元素进行标准化处理,得到所述目标元素的标准化数据。16.根据权利要求10至13任一项所述的装置,其中,所述第三获取单元,用于:按照所述目标元素的数据类别对应的目标处理方式,对所述目标元素进行标准化处理,得到所述目标元素的标准化数据。17.根据权利要求10至12任一项所述的装置,其中,所述目标元素为多个目标表中的元素,所述第一获取单元还用于:在获取目标数据之后,获得各个目标表中的相同目标元素的取值分布特征;在所述相同目标元素的取值分布特征满足预定分布特征的情况下,基于各个目标表中的所述相同目标元素的属性,得到各个目标表中的所述相同目标元素的第一标签和第二标
签。18.根据权利要求10或11所述的装置,还包括输出单元,用于输出所述目标元素的标准化数据。19.一种电子设备,包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-9中任一项所述的方法。20.一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使计算机执行权利要求1-9中任一项所述的方法。21.一种计算机程序产品,包括计算机程序,该计算机程序在被处理器执行时实现根据权利要求1-9中任一项所述的方法。

技术总结
本公开提供了一种数据处理方法、装置、电子设备、存储介质及计算机程序产品,涉及人工智能、大数据、机器学习、自然语言处理等技术领域。具体实现方案为:获取目标数据,所述目标数据包括至少一个目标元素;基于所述目标元素的属性,得到所述目标元素的第一标签和第二标签,其中所述第一标签表征为目标元素的语义,第二标签表征为目标元素的取值特征;基于所述目标元素的第一标签和第二标签,采用人工智能方式确定所述目标元素的数据类别;基于所述目标元素的数据类别,对所述目标元素进行标准化处理,得到所述目标元素的标准化数据。本公开为数据从非标准化到标准化的自动处理提供了技术支持,可提高数据治理效率。可提高数据治理效率。可提高数据治理效率。


技术研发人员:白皓宇 王华伟 吴家林 代小亚
受保护的技术使用者:北京百度网讯科技有限公司
技术研发日:2022.08.11
技术公布日:2022/11/25
再多了解一些

本文用于创业者技术爱好者查询,仅供学习研究,如用于商业用途,请联系技术所有人。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表