一种数据生成方法、装置、设备及介质与流程
本发明涉及数据处理,尤其涉及一种数据生成方法、装置、设备及介质。
背景技术:
1、在金融领域与医疗领域中,随着数据分析技术的深入应用,往往需要基于业务需求生成多维度组合的统计分析数据,其中,维度建模作为数据仓库构建中的主流方法,广泛应用于各类数据分析系统中。然而,现有方案在数据生成的完整性、维度组合的覆盖率、数据一致性以及性能效率等方面存在诸多不足,使生成数据的质量较差,因此,在数据生成过程中,如何提高生成数据的质量成为亟须解决的问题。
技术实现思路
1、本发明提供一种数据生成方法、装置、设备及介质,以解决在数据生成过程中,生成数据的质量较差的问题。
2、第一方面,提供了一种数据生成方法,所述数据生成方法包括:
3、获取待生成数据对应的多个维度,为每个维度配置对应的生成函数,所述生成函数用于生成对应维度的维度数据;
4、构建多个维度的级联结构,根据所述级联结构,确定当前级维度与所述当前级维度对应的各上级维度;
5、获取各上级维度对应的一组上级维度数据组合,根据所述上级维度数据组合与所述当前级维度的生成函数,生成当前级维度数据集;
6、将下一级维度作为当前级维度,将所述当前级维度数据集中的任一当前级维度数据与所述上级维度数据组合进行合并,作为所述下一级维度的一组上级维度数据组合,重新执行根据所述上级维度数据组合与所述当前级维度的生成函数,生成当前级维度数据集的步骤,直至当前级维度为末级维度,得到末级维度的末级维度数据集与末级的上级维度数据组合;
7、将所述末级维度数据集中任一末级维度数据与所述末级的上级维度数据组合进行组合,得到对应维度数据组合;
8、根据预设的生成规则,生成所述维度数据组合对应的度量值,将维度数据组合与对应的度量值进行组合,得到目标数据。
9、第二方面,提供了一种数据生成装置,所述数据生成装置包括:
10、获取模块,用于获取待生成数据对应的多个维度,为每个维度配置对应的生成函数,所述生成函数用于生成对应维度的维度数据;
11、构建模块,用于构建多个维度的级联结构,根据所述级联结构,确定当前级维度与所述当前级维度对应的各上级维度;
12、生成模块,用于获取各上级维度对应的一组上级维度数据组合,根据所述上级维度数据组合与所述当前级维度的生成函数,生成当前级维度数据集;
13、重复执行模块,用于将下一级维度作为当前级维度,将所述当前级维度数据集中的任一当前级维度数据与所述上级维度数据组合进行合并,作为所述下一级维度的一组上级维度数据组合,重新执行根据所述上级维度数据组合与所述当前级维度的生成函数,生成当前级维度数据集的步骤,直至当前级维度为末级维度,得到末级维度的末级维度数据集与末级的上级维度数据组合;
14、组合模块,用于将所述末级维度数据集中任一末级维度数据与所述末级的上级维度数据组合进行组合,得到对应维度数据组合;
15、得到模块,用于根据预设的生成规则,生成所述维度数据组合对应的度量值,将维度数据组合与对应的度量值进行组合,得到目标数据。
16、第三方面,提供了一种计算机设备,包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述数据生成方法的步骤。
17、第四方面,提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时实现上述数据生成方法的步骤。
18、本申请与现有技术相比存在的有益效果是:
19、本申请中,通过为每个维度独立配置生成函数,能够灵活适配不同维度的数据生成逻辑,无论是离散分类维度还是连续数值维度,都可以针对性设置生成规则,避免了统一生成逻辑对不同维度数据特征的适配偏差,保障了各维度数据的准确性。同时,构建多维度的级联结构,明确了不同维度之间的层级依赖关系,生成过程严格遵循维度间的业务逻辑约束,每一级维度数据的生成都基于已确定的上级维度数据组合,能够有效生成符合实际业务关联规则的维度数据组合,避免了不符合逻辑的无效数据组合产生,大幅降低了生成数据中的逻辑错误占比。通过逐级生成、逐级合并的流程推进数据生成,每一级维度数据集的生成都依托于明确的上级输入,能够完整保留维度之间的关联特征,确保最终生成的目标数据在维度组合上具有高度的业务真实性和一致性,从而提高了目标数据的质量。
1.一种数据生成方法,其特征在于,所述数据生成方法包括:
2.如权利要求1所述的数据生成方法,其特征在于,所述构建多个维度的级联结构,包括:
3.如权利要求1所述的数据生成方法,其特征在于,所述根据所述上级维度数据组合与所述当前级维度的生成函数,生成当前级维度数据集之后,还包括:
4.如权利要求3所述的数据生成方法,其特征在于,所述重新获取各上级维度对应的上级维度数据组合,得到新的上级维度数据组合,包括:
5.如权利要求1所述的数据生成方法,其特征在于,所述将所述末级维度数据集中任一维度数据与所述末级的上级维度数据组合进行组合,得到对应维度数据组合之后,还包括:
6.如权利要求1所述的数据生成方法,其特征在于,所述根据预设的生成规则,生成所述维度数据组合对应的度量值,包括:
7.如权利要求1所述的数据生成方法,其特征在于,所述将所述维度数据组合与对应的度量值组合成一条完整的数据,得到目标数据之后,还包括:
8.一种数据生成装置,其特征在于,所述数据生成装置包括:
9.一种计算机设备,其特征在于,所述计算机设备包括处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述的数据生成方法。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的数据生成方法。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com