一种数据处理方法及装置与流程

技术特征：
1.一种数据处理方法，其特征在于，所述方法包括：获得待处理的结构化数据；以所述结构化数据的标识为节点标识、且以所述结构化数据包含的字段值为节点属性，生成每一结构化数据所对应节点的节点数据；根据预设的关系字段信息，生成各个结构化数据所对应节点间的关系数据，其中，所述预设的关系字段信息包括：所述结构化数据中存在关系的字段值、以及存在关系的字段值间的关系信息；获得包含所述节点数据以及所述关系数据的文件，并将所述文件导入至图数据库中。2.根据权利要求1所述的方法，其特征在于，所述根据预设的关系字段信息，生成各个结构化数据所对应节点间的关系数据，包括：确定所述节点属性中包括预设的关系字段信息中的所述字段值的节点；根据所述预设的关系字段信息中的所述关系信息，生成所确定节点间的关系数据。3.根据权利要求1所述的方法，其特征在于，所述获得待处理的结构化数据，包括：从预设的数据源中获得结构化数据，对所获得的结构化数据进行数据清洗；基于预设的标识映射关系，将清洗后的结构化数据中字段值对应的字段标识映射为节点属性对应的属性标识，将映射标识后的结构化数据作为待处理的结构化数据。4.根据权利要求3所述的方法，其特征在于，所述将映射标识后的结构化数据作为待处理的结构化数据，包括：按照预设的字段值格式，对映射标识后的结构化数据中的字段值进行格式调整，将调整后的结构化数据作为待处理的结构化数据。5.根据权利要求1-4中任一项所述的方法，其特征在于，所述获得包含所述节点数据以及所述关系数据的文件，包括：按照预设的文件格式需求，生成包含所述节点数据以及所述关系数据的文件，并按照预设的文件存储需求，存储所述文件。6.一种数据处理装置，其特征在于，所述装置包括：结构化数据获得模块，用于获得待处理的结构化数据；节点数据生成模块，用于以所述结构化数据的标识为节点标识、且以所述结构化数据包含的字段值为节点属性，生成每一结构化数据所对应节点的节点数据；关系数据生成模块，用于根据预设的关系字段信息，生成各个结构化数据所对应节点间的关系数据，其中，所述预设的关系字段信息包括：所述结构化数据中存在关系的字段值、以及存在关系的字段值间的关系信息；数据导入模块，用于获得包含所述节点数据以及所述关系数据的文件，并将所述文件导入至图数据库中。7.根据权利要求6所述的装置，其特征在于，所述关系数据生成模块，包括：节点确定子模块，用于确定所述节点属性中包括预设的关系字段信息中的所述字段值的节点；关系数据生成子模块，用于根据所述预设的关系字段信息中的所述关系信息，生成所确定节点间的关系数据。8.根据权利要求6所述的装置，其特征在于，所述结构化数据获得模块，包括：
数据清洗子模块，用于从预设的数据源中获得结构化数据，对所获得的结构化数据进行数据清洗；标识映射子模块，用于基于预设的标识映射关系，将清洗后的结构化数据中字段值对应的字段标识映射为节点属性对应的属性标识，将映射标识后的结构化数据作为待处理的结构化数据。9.根据权利要求8所述的装置，其特征在于，所述标识映射子模块据，具体用于基于预设的标识映射关系，将清洗后的结构化数据中字段值对应的字段标识映射为节点属性对应的属性标识，按照预设的字段值格式，对映射标识后的结构化数据中的字段值进行格式调整，将调整后的结构化数据作为待处理的结构化数据。10.根据权利要求6-9中任一项所述的装置，其特征在于，所述数据处理模块，具体用于按照预设的文件格式需求，生成包含所述节点数据以及所述关系数据的文件，并按照预设的文件存储需求，存储所述文件，将所述文件导入至图数据库中。11.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现权利要求1-5任一所述的方法步骤。12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-5任一所述的方法步骤。

技术总结
本发明实施例提供了一种数据处理方法及装置，上述方法包括：获得待处理的结构化数据；以结构化数据的标识为节点标识、且以结构化数据包含的字段值为节点属性，生成每一结构化数据所对应节点的节点数据；根据预设的关系字段信息，生成各个结构化数据所对应节点间的关系数据，其中，所述预设的关系字段信息包括：结构化数据中存在关系的字段值以及存在关系的字段值间的关系信息；获得包含节点数据以及关系数据的文件，并将文件导入至图数据库中。应用本发明实施例提供的方案进行数据处理时，提高了数据处理的效率。了数据处理的效率。了数据处理的效率。


技术研发人员：李长亮 樊骏锋 汪美玲
受保护的技术使用者：北京金山数字娱乐科技有限公司
技术研发日：2020.05.21
技术公布日：2021/11/25