基于图形化界面的数据处理方法、装置、设备及存储介质与流程

1.本发明涉及数据处理领域，尤其涉及一种基于图形化界面的数据处理方法、装置、设备及存储介质。


背景技术：

2.随着计算机技术的快速发展，数据量急剧增加，传统的关系型数据库已经不适用于大数据的处理，针对大数据的处理工作，人们提出了关系型数据库的概念，并开发了多种大数据储存工具。
3.但是现有方案因为查询语句并不相同，为方便人们使用查询语句对关系型数据库进行数据处理，部分存储工具提供了源生的查询方式，但是目前数据处理的可阅读性差，不利于用户编写，导致现有方案的数据处理效率低。


技术实现要素：

4.本发明提供了一种基于图形化界面的数据处理方法、装置、设备及存储介质，用于提高图形化界面的数据处理效率。
5.本发明第一方面提供了一种基于图形化界面的数据处理方法，所述基于图形化界面的数据处理方法包括：接收终端发送的数据处理请求，并对所述数据处理请求进行请求解析，得到所述数据处理请求对应的数据源数据；对所述数据源数据进行预处理，得到初始数据，并对所述初始数据进行数据格式设置，得到目标数据；对所述目标数据进行数据属性提取，得到目标数据属性，并根据所述目标数据属性构建所述目标数据的数据模型；根据所述目标数据属性和所述数据模型匹配语句生成规则，并根据所述语句生成规则生成所述目标数据对应的多个查询语句；分别根据所述多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件。
6.可选的，在本发明第一方面的第一种实现方式中，所述接收终端发送的数据处理请求，并对所述数据处理请求进行请求解析，得到所述数据处理请求对应的数据源数据，包括：接收终端发送的数据处理请求；对所述数据处理请求进行请求解析，得到数据获取地址；根据所述数据获取地址查询目标数据源；按照预设数据结构类型对所述目标数据源进行数据提取，得到所述数据处理请求对应的数据源数据。
7.可选的，在本发明第一方面的第二种实现方式中，所述对所述数据源数据进行预处理，得到初始数据，并对所述初始数据进行数据格式设置，得到目标数据，包括：对所述数据源数据进行数据清洗，得到数据清洗后的数据源数据；对所述数据清洗后的数据源数据进行数据转化，得到数据转化后的数据源数据；对所述数据转化后的数据源数据进行数据整合，得到初始数据；对所述初始数据进行数据类别划分，得到多个数据类别；分别根据所述多个数据类别生成每个数据类别对应的数据格式；根据每个数据类别对应的数据格式对所述初始数据进行数据格式设置，得到目标数据。
8.可选的，在本发明第一方面的第三种实现方式中，所述对所述目标数据进行数据
属性提取，得到目标数据属性，并根据所述目标数据属性构建所述目标数据的数据模型，包括：根据所述目标数据从预置数据库中获取标准属性信息及预设数据属性信息；通过所述标准属性信息对所述目标数据中的多个数据进行匹配分析，得到目标数据属性；根据所述目标数据属性构建所述目标数据的数据模型。
9.可选的，在本发明第一方面的第四种实现方式中，所述根据所述目标数据属性和所述数据模型匹配语句生成规则，并根据所述语句生成规则生成所述目标数据对应的多个查询语句，包括：根据所述目标数据属性和所述数据模型确定语句生成参数；将所述语句生成参数输入预设语句生成脚本进行命令转换，生成语句生成命令；根据所述语句生成命令对所述目标数据进行规则匹配，得到语句生成规则；根据所述语句生成规则生成所述目标数据对应的多个查询语句。
10.可选的，在本发明第一方面的第五种实现方式中，所述分别根据所述多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件，包括：分别对所述多个查询语句进行读取，得到每个查询语句对应的关联信息；根据每个查询语句对应的关联信息查找所述目标数据对应的关联数据项；根据所述关联数据项生成每个查询语句对应的关联数据；根据每个查询语句对应的关联数据生成目标数据文件。
11.可选的，在本发明第一方面的第六种实现方式中，所述基于图形化界面的数据处理方法还包括：调用预置的数据转换模型对所述目标数据文件中的多个关联数据进行数据转换，得到转换目标数据文件。
12.本发明第二方面提供了一种基于图形化界面的数据处理装置，所述基于图形化界面的数据处理装置包括：接收模块，用于接收终端发送的数据处理请求，并对所述数据处理请求进行请求解析，得到所述数据处理请求对应的数据源数据；设置模块，用于对所述数据源数据进行预处理，得到初始数据，并对所述初始数据进行数据格式设置，得到目标数据；提取模块，用于对所述目标数据进行数据属性提取，得到目标数据属性，并根据所述目标数据属性构建所述目标数据的数据模型；处理模块，用于根据所述目标数据属性和所述数据模型匹配语句生成规则，并根据所述语句生成规则生成所述目标数据对应的多个查询语句；生成模块，用于分别根据所述多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件。
13.可选的，在本发明第二方面的第一种实现方式中，所述接收模块具体用于：接收终端发送的数据处理请求；对所述数据处理请求进行请求解析，得到数据获取地址；根据所述数据获取地址查询目标数据源；按照预设数据结构类型对所述目标数据源进行数据提取，得到所述数据处理请求对应的数据源数据。
14.可选的，在本发明第二方面的第二种实现方式中，所述设置模块具体用于：对所述数据源数据进行数据清洗，得到数据清洗后的数据源数据；对所述数据清洗后的数据源数据进行数据转化，得到数据转化后的数据源数据；对所述数据转化后的数据源数据进行数据整合，得到初始数据；对所述初始数据进行数据类别划分，得到多个数据类别；分别根据所述多个数据类别生成每个数据类别对应的数据格式；根据每个数据类别对应的数据格式对所述初始数据进行数据格式设置，得到目标数据。
15.可选的，在本发明第二方面的第三种实现方式中，所述提取模块具体用于：根据所
述目标数据从预置数据库中获取标准属性信息及预设数据属性信息；通过所述标准属性信息对所述目标数据中的多个数据进行匹配分析，得到目标数据属性；根据所述目标数据属性构建所述目标数据的数据模型。
16.可选的，在本发明第二方面的第四种实现方式中，所述处理模块具体用于：根据所述目标数据属性和所述数据模型确定语句生成参数；将所述语句生成参数输入预设语句生成脚本进行命令转换，生成语句生成命令；根据所述语句生成命令对所述目标数据进行规则匹配，得到语句生成规则；根据所述语句生成规则生成所述目标数据对应的多个查询语句。
17.可选的，在本发明第二方面的第五种实现方式中，所述生成模块具体用于：分别对所述多个查询语句进行读取，得到每个查询语句对应的关联信息；根据每个查询语句对应的关联信息查找所述目标数据对应的关联数据项；根据所述关联数据项生成每个查询语句对应的关联数据；根据每个查询语句对应的关联数据生成目标数据文件。
18.可选的，在本发明第二方面的第六种实现方式中，所述基于图形化界面的数据处理装置还包括：转换模块，用于调用预置的数据转换模型对所述目标数据文件中的多个关联数据进行数据转换，得到转换目标数据文件。
19.本发明第三方面提供了一种基于图形化界面的数据处理设备，包括：存储器和至少一个处理器，所述存储器中存储有指令；所述至少一个处理器调用所述存储器中的所述指令，以使得所述基于图形化界面的数据处理设备执行上述的基于图形化界面的数据处理方法。
20.本发明的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述的基于图形化界面的数据处理方法。
21.本发明提供的技术方案中，对数据源数据进行预处理，得到初始数据，对目标数据进行数据属性提取，得到目标数据属性，并根据目标数据属性构建目标数据的数据模型，通过灵活的进行自助式数据分析；数据模型可以对目标数据进行去重，自循环列，排序，抽样，过滤，分组，汇总，关联，行列转换等；根据目标数据属性和数据模型匹配语句生成规则，并根据语句生成规则生成目标数据对应的多个查询语句，查询语句使用门槛低，计算处理性能高效，数据查询过程能根据数据存储的数据库语法规范生成性能高效的查询语句执行；分别根据多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件，计算兼容性强，对不同源的数据，或者同源但无法支持的计算都提供了内存计算算子，无需进行额外的操作或处理，进而提高了数据处理的效率。
附图说明
22.图1为本发明实施例中基于图形化界面的数据处理方法的一个实施例示意图；图2为本发明实施例中基于图形化界面的数据处理方法的另一个实施例示意图；图3为本发明实施例中基于图形化界面的数据处理装置的一个实施例示意图；图4为本发明实施例中基于图形化界面的数据处理装置的另一个实施例示意图；图5为本发明实施例中基于图形化界面的数据处理设备的一个实施例示意图。
具体实施方式
23.本发明实施例提供了一种基于图形化界面的数据处理方法、装置、设备及存储介质，用于提高图形化界面的数据处理效率。本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等（如果存在）是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”或“具有”及其任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
24.为便于理解，下面对本发明实施例的具体流程进行描述，请参阅图1，本发明实施例中基于图形化界面的数据处理方法的一个实施例包括：101、接收终端发送的数据处理请求，并对数据处理请求进行请求解析，得到数据处理请求对应的数据源数据；可以理解的是，本发明的执行主体可以为基于图形化界面的数据处理装置，还可以是终端或者服务器，具体此处不做限定。本发明实施例以服务器为执行主体为例进行说明。
25.具体的，接收终端发送的数据处理请求，根据数据处理请求确定接口路径，其中，数据处理请求中携带有用户账号和数据处理标识，根据数据管理请求用户账号、数据处理标识和接口路径生成初始权限获取指令，将初始权限获取指令发送至缓存模块，在接收到缓存池反馈的初始权限信息的情况下，解析初始权限信息，根据解析结果确定目标权限信息，获取与目标权限信息对应的数据管理处理信息并将反馈给终端。保证了终端数据处理权限与用户账号、接口路径、数据处理标识对应的权限的一致性，提高了对数据权限精准控制，最终得到得到数据处理请求对应的数据源数据，实现了对不同层级数据的权限控制。
26.102、对数据源数据进行预处理，得到初始数据，并对初始数据进行数据格式设置，得到目标数据；具体的，服务器根据数据源数据构建搜索引擎库，从搜索引擎库中检索所需的初始数据；对初始数据依次进行数据预处理和数据清洗，对数据清洗后的初始数据进行特征筛选，提取其特征值确定预置的指标变量，并基于该指标变量对上述初始数据进行格式设置，得到目标数据。
27.103、对目标数据进行数据属性提取，得到目标数据属性，并根据目标数据属性构建目标数据的数据模型；具体的，获取预置的属性数据表，对目标数据中各数据列进行码表码值匹配，对各数据列中进行正则识别，确定各数据列的列类型，提取各列的列特征向量，列特征向量包括列数据的统计特征、列名和/或列注释信息的描述特征以及列基本属性特征，对各列的列特征向量进行识别，确定各列的列标签，基于标签对各列数据进行匹配，得到目标数据属性，并根据目标数据属性构建目标数据的数据模型，在保证准确率的同时，有效降低了计算量。
28.104、根据目标数据属性和数据模型匹配语句生成规则，并根据语句生成规则生成目标数据对应的多个查询语句；具体的，服务器生成与目标数据属性和数据模型匹配的层级架构；层级架构中除
最低层级以外每一层级，均有基于目标语法规则确定的查询关键字符，确定查询请求中每个查询参数在层级架构中所属层级，利用查询参数与目标数据表的绑定关系，及每个查询参数所属类别，确定查询参数在目标数据表中对应的查询要素，从最低层级开始，按目标语法规则，将每一层级的查询语句与上一层级的查询关键字符组合，得到上一层级的查询语句，直至获得最高层级的查询语句，查询参数对应的查询要素，根据目标语法规则组合各个最高层级的查询语句，得到满足查询请求的查询语句，也即目标数据对应的多个查询语句。
29.105、分别根据多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件。
30.具体的，动态扫描预置的数据库，服务器执行每一查询语句，并将至少是部分的查询结果返回给用户，供用户预览，如果用户对预览的查询结果满意，则将全部的查询结果返回给用户。
31.本发明实施例中，对数据源数据进行预处理，得到初始数据，对目标数据进行数据属性提取，得到目标数据属性，并根据目标数据属性构建目标数据的数据模型，通过灵活的进行自助式数据分析；数据模型可以对目标数据进行去重，自循环列，排序，抽样，过滤，分组，汇总，关联，行列转换等；根据目标数据属性和数据模型匹配语句生成规则，并根据语句生成规则生成目标数据对应的多个查询语句，查询语句使用门槛低，计算处理性能高效，数据查询过程能根据数据存储的数据库语法规范生成性能高效的查询语句执行；分别根据多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件，计算兼容性强，对不同源的数据，或者同源但无法支持的计算都提供了内存计算算子，无需进行额外的操作或处理，进而提高了数据处理的效率。
32.请参阅图2，本发明实施例中基于图形化界面的数据处理方法的另一个实施例包括：201、接收终端发送的数据处理请求，并对数据处理请求进行请求解析，得到数据处理请求对应的数据源数据；具体的，接收终端发送的数据处理请求；对数据处理请求进行请求解析，得到数据获取地址；根据数据获取地址查询目标数据源；按照预设数据结构类型对目标数据源进行数据提取，得到数据处理请求对应的数据源数据。
33.其中，接收终端发送的数据处理请求，对数据处理请求进行请求解析，得到数据获取地址，其中，需要说明的是，上述数据获取地址至少包括两个数据获取地址，进而服务器根据该至少两个数据获取地址生成数据获取地址集合，根据数据获取地址集合中的数据获取地址指向的数据的占用空间，对各数据获取地址进行排序，根据校验条件分别对数据获取地址集合中的数据获取地址进行校验，并根据校验结果对数据获取地址集合中的各数据获取地址的排序结果进行调整，其中，校验条件包括格式校验条件和/或非资源内容校验条件，选择调整后的排序结果中排名最高的数据获取地址作为目标数据获取地址，进而服务器按照预设数据结构类型对目标数据源进行数据提取，得到数据处理请求对应的数据源数据，提高了获取真实数据获取地址的成功率及效率。
34.202、对数据源数据进行预处理，得到初始数据，并对初始数据进行数据格式设置，得到目标数据；具体的，对数据源数据进行数据清洗，得到数据清洗后的数据源数据；对数据清洗
后的数据源数据进行数据转化，得到数据转化后的数据源数据；对数据转化后的数据源数据进行数据整合，得到初始数据；对初始数据进行数据类别划分，得到多个数据类别；分别根据多个数据类别生成每个数据类别对应的数据格式；根据每个数据类别对应的数据格式对初始数据进行数据格式设置，得到目标数据。
35.其中，数据清洗包括，判断数据源数据是否属于预设的基于认定结果进行清洗的类型，若数据源数据属于预设的基于认定结果进行清洗的对象，则调用数据源数据对应的认定结果，并以认定结果作为数据源数据清洗后的数据，若数据源数据不属于预设的基于认定结果进行清洗的类型，则根据预设的多个数据清洗规则，依次对数据源数据进行清洗，得到数据源数据清洗后的数据，进而对数据清洗后的数据源数据进行数据转化，得到数据转化后的数据源数据，对数据转化后的数据源数据进行数据整合，得到初始数据，对初始数据进行数据类别划分，得到多个数据类别；分别根据多个数据类别生成每个数据类别对应的数据格式，根据每个数据类别对应的数据格式对初始数据进行数据格式设置，得到目标数据。
36.203、根据目标数据从预置数据库中获取标准属性信息及预设数据属性信息；204、通过标准属性信息对目标数据中的多个数据进行匹配分析，得到目标数据属性；205、根据目标数据属性构建目标数据的数据模型；具体的，服务器获取目标数据，并对异常目标数据进行自动校正，提取标准资源数据库中的标准属性数据，并建立关联关系，以目标数据为依据，与标准资源数据目标库进行精确匹配，将编号字符串t分成n个小块,将源数据库中的标准属性与每一小块的数据进行匹配，最终获取标准属性信息及预设数据属性信息，并通过预置的相似度算法对目标数据中的多个数据进行匹配分析，得到目标数据属性，并构建对应的数据模型。
37.206、根据目标数据属性和数据模型匹配语句生成规则，并根据语句生成规则生成目标数据对应的多个查询语句；具体的，根据目标数据属性和数据模型确定语句生成参数；将语句生成参数输入预设语句生成脚本进行命令转换，生成语句生成命令；根据语句生成命令对目标数据进行规则匹配，得到语句生成规则；根据语句生成规则生成目标数据对应的多个查询语句。
38.其中，根据目标数据属性和数据模型确定语句生成参数；将语句生成参数输入预设语句生成脚本进行命令转换，生成语句生成命令，获取各命令分类规则，并根据预设的分类规则库对各命令分类规则进行分析处理，以获得各命令分类规则的特征类型，根据各特征类型获取各命令分类规则对应的目标语法匹配规则，基于各命令分类规则以及各命令分类规则对应的目标语法匹配规则，得到语句生成规则，根据语句生成规则生成目标数据对应的多个查询语句，提升查询语句的生成效率。
39.207、分别根据多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件。
40.具体的，分别对多个查询语句进行读取，得到每个查询语句对应的关联信息；根据每个查询语句对应的关联信息查找目标数据对应的关联数据项；根据关联数据项生成每个查询语句对应的关联数据；根据每个查询语句对应的关联数据生成目标数据文件。
41.其中，获取查询语句，其中，查询语句包括select子句和from子句；检测select子
句和from子句是否符合预设的排列顺序，如果否，则按预设的排列顺序调整select子句和from子句，并将调整后的查询语句发送至目标数据存储空间执行，根据关联数据项生成每个查询语句对应的关联数据，根据每个查询语句对应的关联数据生成目标数据文件。
42.可选的，调用预置的数据转换模型对目标数据文件中的多个关联数据进行数据转换，得到转换目标数据文件。
43.其中，按照源路径获取目标数据文件中的多个关联数据，并确定源数据的源格式，从预设的格式转换器中调用与源格式和目的格式匹配的格式转换程序将源数据由源格式转换为目的格式，获得目的数据，格式转换器中存储有多种格式转换程序，按照目的路径存储目的数据，得到转换目标数据文件，从而提高了转换效率，也具备良好的通用性。
44.本发明实施例中，对数据源数据进行预处理，得到初始数据，对目标数据进行数据属性提取，得到目标数据属性，并根据目标数据属性构建目标数据的数据模型，通过灵活的进行自助式数据分析；数据模型可以对目标数据进行去重，自循环列，排序，抽样，过滤，分组，汇总，关联，行列转换等；根据目标数据属性和数据模型匹配语句生成规则，并根据语句生成规则生成目标数据对应的多个查询语句，查询语句使用门槛低，计算处理性能高效，数据查询过程能根据数据存储的数据库语法规范生成性能高效的查询语句执行；分别根据多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件，计算兼容性强，对不同源的数据，或者同源但无法支持的计算都提供了内存计算算子，无需进行额外的操作或处理，进而提高了数据处理的效率。
45.上面对本发明实施例中基于图形化界面的数据处理方法进行了描述，下面对本发明实施例中基于图形化界面的数据处理装置进行描述，请参阅图3，本发明实施例中基于图形化界面的数据处理装置一个实施例包括：接收模块301，用于接收终端发送的数据处理请求，并对所述数据处理请求进行请求解析，得到所述数据处理请求对应的数据源数据；设置模块302，用于对所述数据源数据进行预处理，得到初始数据，并对所述初始数据进行数据格式设置，得到目标数据；提取模块303，用于对所述目标数据进行数据属性提取，得到目标数据属性，并根据所述目标数据属性构建所述目标数据的数据模型；处理模块304，用于根据所述目标数据属性和所述数据模型匹配语句生成规则，并根据所述语句生成规则生成所述目标数据对应的多个查询语句；生成模块305，用于分别根据所述多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件。
46.本发明实施例中，对数据源数据进行预处理，得到初始数据，对目标数据进行数据属性提取，得到目标数据属性，并根据目标数据属性构建目标数据的数据模型，通过灵活的进行自助式数据分析；数据模型可以对目标数据进行去重，自循环列，排序，抽样，过滤，分组，汇总，关联，行列转换等；根据目标数据属性和数据模型匹配语句生成规则，并根据语句生成规则生成目标数据对应的多个查询语句，查询语句使用门槛低，计算处理性能高效，数据查询过程能根据数据存储的数据库语法规范生成性能高效的查询语句执行；分别根据多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件，计算兼容性强，对不同源的数据，或者同源但无法支持的计算都提供了内存
计算算子，无需进行额外的操作或处理，进而提高了数据处理的效率。
47.请参阅图4，本发明实施例中基于图形化界面的数据处理装置另一个实施例包括：接收模块301，用于接收终端发送的数据处理请求，并对所述数据处理请求进行请求解析，得到所述数据处理请求对应的数据源数据；设置模块302，用于对所述数据源数据进行预处理，得到初始数据，并对所述初始数据进行数据格式设置，得到目标数据；提取模块303，用于对所述目标数据进行数据属性提取，得到目标数据属性，并根据所述目标数据属性构建所述目标数据的数据模型；处理模块304，用于根据所述目标数据属性和所述数据模型匹配语句生成规则，并根据所述语句生成规则生成所述目标数据对应的多个查询语句；生成模块305，用于分别根据所述多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件。
48.可选的，所述接收模块301具体用于：接收终端发送的数据处理请求；对所述数据处理请求进行请求解析，得到数据获取地址；根据所述数据获取地址查询目标数据源；按照预设数据结构类型对所述目标数据源进行数据提取，得到所述数据处理请求对应的数据源数据。
49.可选的，所述设置模块302具体用于：对所述数据源数据进行数据清洗，得到数据清洗后的数据源数据；对所述数据清洗后的数据源数据进行数据转化，得到数据转化后的数据源数据；对所述数据转化后的数据源数据进行数据整合，得到初始数据；对所述初始数据进行数据类别划分，得到多个数据类别；分别根据所述多个数据类别生成每个数据类别对应的数据格式；根据每个数据类别对应的数据格式对所述初始数据进行数据格式设置，得到目标数据。
50.可选的，所述提取模块303具体用于：根据所述目标数据从预置数据库中获取标准属性信息及预设数据属性信息；通过所述标准属性信息对所述目标数据中的多个数据进行匹配分析，得到目标数据属性；根据所述目标数据属性构建所述目标数据的数据模型。
51.可选的，所述处理模块304具体用于：根据所述目标数据属性和所述数据模型确定语句生成参数；将所述语句生成参数输入预设语句生成脚本进行命令转换，生成语句生成命令；根据所述语句生成命令对所述目标数据进行规则匹配，得到语句生成规则；根据所述语句生成规则生成所述目标数据对应的多个查询语句。
52.可选的，所述生成模块305具体用于：分别对所述多个查询语句进行读取，得到每个查询语句对应的关联信息；根据每个查询语句对应的关联信息查找所述目标数据对应的关联数据项；根据所述关联数据项生成每个查询语句对应的关联数据；根据每个查询语句对应的关联数据生成目标数据文件。
53.可选的，所述基于图形化界面的数据处理装置还包括：转换模块306，用于调用预置的数据转换模型对所述目标数据文件中的多个关联数据进行数据转换，得到转换目标数据文件。
54.本发明实施例中，对数据源数据进行预处理，得到初始数据，对目标数据进行数据属性提取，得到目标数据属性，并根据目标数据属性构建目标数据的数据模型，通过灵活的进行自助式数据分析；数据模型可以对目标数据进行去重，自循环列，排序，抽样，过滤，分
组，汇总，关联，行列转换等；根据目标数据属性和数据模型匹配语句生成规则，并根据语句生成规则生成目标数据对应的多个查询语句，查询语句使用门槛低，计算处理性能高效，数据查询过程能根据数据存储的数据库语法规范生成性能高效的查询语句执行；分别根据多个查询语句生成每个查询语句对应的关联数据，并根据每个查询语句对应的关联数据生成目标数据文件，计算兼容性强，对不同源的数据，或者同源但无法支持的计算都提供了内存计算算子，无需进行额外的操作或处理，进而提高了数据处理的效率。
55.上面图3和图4从模块化功能实体的角度对本发明实施例中的基于图形化界面的数据处理装置进行详细描述，下面从硬件处理的角度对本发明实施例中基于图形化界面的数据处理设备进行详细描述。
56.图5是本发明实施例提供的一种基于图形化界面的数据处理设备的结构示意图，该基于图形化界面的数据处理设备500可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器（central processing units，cpu）510（例如，一个或一个以上处理器）和存储器520，一个或一个以上存储应用程序533或数据532的存储介质530（例如一个或一个以上海量存储设备）。其中，存储器520和存储介质530可以是短暂存储或持久存储。存储在存储介质530的程序可以包括一个或一个以上模块（图示没标出），每个模块可以包括对基于图形化界面的数据处理设备500中的一系列指令操作。更进一步地，处理器510可以设置为与存储介质530通信，在基于图形化界面的数据处理设备500上执行存储介质530中的一系列指令操作。
57.基于图形化界面的数据处理设备500还可以包括一个或一个以上电源540，一个或一个以上有线或无线网络接口550，一个或一个以上输入输出接口560，和/或，一个或一个以上操作系统531，例如windows serve，mac os x，unix，linux，freebsd等等。本领域技术人员可以理解，图5示出的基于图形化界面的数据处理设备结构并不构成对基于图形化界面的数据处理设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
58.本发明还提供一种基于图形化界面的数据处理设备，所述基于图形化界面的数据处理设备包括存储器和处理器，存储器中存储有计算机可读指令，计算机可读指令被处理器执行时，使得处理器执行上述各实施例中的所述基于图形化界面的数据处理方法的步骤。
59.本发明还提供一种计算机可读存储介质，该计算机可读存储介质可以为非易失性计算机可读存储介质，该计算机可读存储介质也可以为易失性计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在计算机上运行时，使得计算机执行所述基于图形化界面的数据处理方法的步骤。
60.进一步地，计算机可读存储介质可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等；存储数据区可存储根据区块链节点的使用所创建的数据等。
61.本发明所指区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(blockchain)，本质上是一个去中心化的数据库，是一串使用密码学方法相关联产生的数据块，每一个数据块中包含了一批次网络交易的信息，用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品
服务层以及应用服务层等。
62.所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
63.所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器（read-only memory， rom）、随机存取存储器（random access memory，ram）、磁碟或者光盘等各种可以存储程序代码的介质。
64.以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。