一种经济管理数据统计系统及其数据分析分筛方法与流程

1.本发明涉及经济学管理技术领域，具体是指一种经济管理数据统计系统及其数据分析分筛方法。


背景技术：

2.经济学是一门研究经济发展规律的学科，因此，需要进行大量的数据统计和管理，才能更好地研究经济发展的规律，且产业是区域经济的风向标，深入的产业研究是政府科学决策、精准施策、指导经济发展的重要依据。传统的产业分析方法，需要耗费大量的人力物力资源和成本，由于使用抽样调查的统计数据，以致数据样本量小、数据分析误差大、时效低、成本高、宏观性，调研信息具有主观性，且展现形式单一，这与瞬息万变的信息时代形成反差，也不能适应大数据时代背景下的政府科学决策需求。


技术实现要素：

3.本发明要解决的技术问题是现有的数据统计样本量小、数据分析结果误差大的技术问题，提供一种使用方便、数据量大、分析结果准确的经济管理数据统计系统及其数据分析分筛方法。
4.为解决上述技术问题，本发明提供一种经济管理数据统计系统，所述的系统包括数据库单元、内部管理单元及外部应用单元，所述的数据库单元与内部管理单元通过局域网连接，所述的数据库单元与外部应用单元之间通过外网连接；
5.所述的数据库单元包括数据采集模块、数据分类模块、数据库、数据库加密模块及登录模块，所述的采集模块采集网络数据信息，由数据分类模块利用聚类算法判断数据类型并分类存储在数据库中，数据库加密模块对数据库提供安全防护，数据库管理人员及用户通过登录模块登录数据库，所述的登录模块包括内部登录端口和外部登录端口；
6.所述的内部管理单元包括内部端口可视模块及数据管理模块，所述的外部应用单元包括外部端口可视模块及数据处理模块。
7.作为改进，所述的聚类算法采用k-medoids算法。
8.作为改进，所述的登录模块还包括加密验证模块，数据库管理人员及用户通过用户名及登录密码进行验证并登录。
9.作为改进，所述的登录模块还包括访客登录端口，所述的外部应用单元中还包括与访客登录端口匹配的访客端口可视模块。
10.作为改进，所述的外部登录端口和访客登录端口均包括pc端和移动端。
11.作为改进，所述的数据管理模块可对数据库中的数据信息进行删减、增补。
12.作为改进，所述的数据处理模块从数据库中获取需要的数据，由用户对获取的数据进行处理包括替换操作、删除操作、增补操作及生成图表操作，所述的数据处理模块还包括数据导出模块及打印模块。
13.作为改进，所述的网络数据信息为新闻报道信息、专利信息、发表论文信息、主要
权威网站公开数据。
14.一种经济管理数据统计系统的数据分析分筛方法，所述的方法包括以下步骤：
15.步骤一：用户或访客登录系统，用户通过用户名、密码验证后登录系统并可获取数据库中完整数据，访客则直接登录获取数据库中部分数据；
16.步骤二：获得目标数据，用户或访客根据自身需求对数据库中的数据通过可视模块进行分级筛选，筛选到需要的一级数据为止即获取目标数据；
17.步骤三：数据清理，用户或访客根据自身需要对获取的目标数据进行数据替换、删除或增补操作，剔除不需要的数据，增补需要的数据，获得最终分析数据；
18.步骤四：对最终分析数据进行分析处理，用户或访客通过数据处理模块对最终分析数据制作成图表、图形并由数据处理模块依据图表、图形形成分析结论报告；
19.步骤五：用户可对分析结论报告及最终分析数据、图表、图形进行导出或打印。
20.本发明与现有技术相比的优点在于：
21.本发明通过经济管理数据统计系统进行经济管理数据的采集、分析、分类和处理，解决了传统的产业分析方法存在的缺点，具备效率高、成本低、准确度高、节约了人力成本等多种优点，适宜推广使用，能够对经济数据进行快速、实时更新统计，提高对经济数据的统计效率，同时采集成本相对较低更加快速，收集更加完整，本发明采用的聚类方法在应付含有脏数据的数据集时有着更为稳定的性能表现，使数据分类更准确。
22.上述概述仅仅是为了说明书的目的，并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外，通过参考附图和以下的详细描述，本发明进一步的方面、实施方式和特征将会是容易明白的。
附图说明
23.为了更清楚地说明本技术实施例或现有技术中的技术方案，下面将对实施例或有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
24.图1是本发明的系统框图。
25.图2是本发明聚类算法基于不同k值的结果图。
26.图3是本发明聚类算法过程的代价函数变化情况图。
27.图4是k-means算法基于不同的k值的聚类结果图。
28.图5是k-means算法的代价函数变化情况图。
具体实施方式
29.下面详细描述本技术的实施例，实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本技术，而不能理解为对本技术的限制。
30.在本技术的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是
两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本技术中的具体含义。
31.下面结合附图对本发明做进一步的详细说明。
32.结合图1～图5，一种经济管理数据统计系统，系统包括数据库单元、内部管理单元及外部应用单元，数据库单元与内部管理单元通过局域网连接，数据库单元与外部应用单元之间通过外网连接；
33.数据库单元包括数据采集模块、数据分类模块、数据库、数据库加密模块及登录模块，采集模块采集网络数据信息，由数据分类模块利用聚类算法判断数据类型并分类存储在数据库中，网络数据信息为新闻报道信息、专利信息、发表论文信息、主要权威网站公开数据，数据库加密模块对数据库提供安全防护，数据库管理人员及用户通过登录模块登录数据库，登录模块包括内部登录端口和外部登录端口，数据库管理人员能够对用户权限进行设定，聚类算法采用k-medoids算法；k-medoids算法流程如下：
34.(1)、在总体n个样本点中任意选取k个点作为medoids；
35.(2)、按照与medoids最近的原则，将剩余的n-k个点分配到当前最佳的medoids代表的类中；
36.(3)、对于第i个类中除对应medoids点外的所有其他点，按顺序计算当其为新的medoids时，准则函数的值，遍历所有可能，选取准则函数最小时对应的点作为新的medoids；
37.(4)、重复(2)、(3)的过程，直到所有的medoids点不再发生变化或已达到设定的最大迭代次数；
38.(5)、产出最终确定的k个类。
39.对人为添加脏数据的样本数据集分别用k-medoids和k-means算法进行聚类，以各自的代价函数变化情况作为评判结果质量的标准，如图2-图4所示，可以看出，k-medoids在应付含有脏数据的数据集时较k-means算法有着更为稳定的性能表现。
40.内部管理单元包括内部端口可视模块及数据管理模块，数据管理模块可对数据库中的数据信息进行删减、增补，数据库管理人员修改的是数据库中的数据信息，外部应用单元包括外部端口可视模块及数据处理模块，数据处理模块从数据库中获取需要的数据，由用户对获取的数据进行处理包括替换操作、删除操作、增补操作及生成图表操作，用户修改的仅是自行筛选出的数据，不会对数据库中原数据产生影响，数据处理模块还包括数据导出模块及打印模块，能够导出筛选的数据并直接打印成纸质文档。
41.登录模块还包括加密验证模块，数据库管理人员及用户通过用户名及登录密码进行验证并登录，保证数据库安全。
42.登录模块还包括访客登录端口，外部应用单元中还包括与访客登录端口匹配的访客端口可视模块，外部登录端口和访客登录端口均包括pc端和移动端，移动端包括手机、平板，访客端口可视模块会有功能限制，无法使用系统全功能及全部数据。
43.一种经济管理数据统计系统的数据分析分筛方法，方法包括以下步骤：
44.步骤一：用户或访客登录系统，用户通过用户名、密码验证后登录系统并可获取数据库中完整数据，访客则直接登录获取数据库中部分数据；
45.步骤二：获得目标数据，用户或访客根据自身需求对数据库中的数据通过可视模
块进行分级筛选，筛选到需要的一级数据为止即获取目标数据；
46.步骤三：数据清理，用户或访客根据自身需要对获取的目标数据进行数据替换、删除或增补操作，剔除不需要的数据，增补需要的数据，获得最终分析数据；
47.步骤四：对最终分析数据进行分析处理，用户或访客通过数据处理模块对最终分析数据制作成图表、图形并由数据处理模块依据图表、图形形成分析结论报告；
48.步骤五：用户可对分析结论报告及最终分析数据、图表、图形进行导出或打印，访客无此功能。
49.工作原理：系统数据库单元通过网络定向连接到指定网站，并自动下载网站内容，由数据分类模块对下载数据通过聚类算法进行分类剔除重复内容并按分类存储至数据库中，数据库管理人员通过用户名与密码登录系统，对系统进行维护并可对数据库中数据进行删除、增补操作，可为用户设定授权权限，用户则通过用户名、密码登录系统，根据需要分级筛选数据，选出后删除不需要的数据并根据需要调整其余数据，通过数据处理模块对筛出的数据进行分析并形成图表及分析报告，用户可对数据及报告进行下载及打印，访客可直接登录系统，但其仅具有部分数据筛选及生成图表、分析报告的能力，不能导出及打印。
50.以上对本发明及其实施方式进行了描述，这种描述没有限制性，附图中所示的也只是本发明的实施方式之一，实际的结构并不局限于此。总而言之如果本领域的普通技术人员受其启示，在不脱离本发明创造宗旨的情况下，不经创造性的设计出与该技术方案相似的结构方式及实施例，均应属于本发明的保护范围。