一种应用于政务服务的数据质量检测实现方法及系统与流程

1.本发明涉及政务服务管理技术领域，具体地说是一种应用于政务服务的数据质量检测实现方法及系统。


背景技术：

2.目前，各地围绕政务服务开展的数据梳理、应用、考核越来越多，为了提升考核结果，各地出现了不少虚假数据，这些数据的存在大大影响了考核的公平性，而通过人工筛查这些数据中的异常数据工作量巨大，急需一种自动化的数据质量检测实现方法。


技术实现要素：

3.本发明的技术任务是针对以上不足之处，提供一种应用于政务服务的数据质量检测实现方法及系统，能够实现自动化检测异常数据，为客户提供高效、便利的手段处理系统中的异常数据，提高效率、节省时间、节约成本。
4.本发明解决其技术问题所采用的技术方案是：
5.一种应用于政务服务的数据质量检测实现方法，围绕政务服务异常进行配置，动态建立政务服务异常数据模型，并根据建立好的动态模型进行异常检测；包括
6.证照数据异常检测，根据证照检测任务设置，手动或自动执行检测任务；
7.证照共享异常检测，系统配置监察异常规则，根据监察异常规则，系统在自动监察证照共享过程中发现并处理证照共享异常；
8.证照入库异常检检测，系统配置监察异常规则，根据监察异常规则，系统在自动监察证照入库过程中发现并处理证照入库异常。
9.本方法在系统内配置相关异常检测规则，根据配置好的规则，自动化检测异常数据，为客户提供高效、便利的手段处理系统中的异常数据，提高效率、节省时间、节约成本。
10.优选的，所述证照数据异常检测，提供证照检测任务总览，全面掌握证照检测任务执行状态及检测范围。
11.进一步的，证照数据异常检测的步骤如下：
12.1)、新建检测任务，输入任务名称和任务简介来创建一个证照检测任务；
13.2)、选择检测样本，选择检测范围，其次，选择检测样本管理中导入的证照样本，最后选择是否对附件进行检测；
14.3)、选择检测规则；
15.4)、开始检测，配置完成检测样本和检测规则后，可以进行手动检测，即手动点击后开始检测，也可以选择自动检测的方式，配置好执行频率和执行时间后，系统会自动对该样本进行检测；
16.5)、证照检测任务管理，可查看当前证照检测任务概况，包括已完成、进行中以及未执行的任务，以列表的形式对证照检测任务进行展示，并可以对证照检测任务进行手动执行和删除操作；
17.6)、证照内容检测报告，检测完成后生成对应的证照内容检测报告，可以对内容检测报告进行查看的删除操作，并可以根据报告名称和检测完成时间段及其他条件对证照检测报告进行检索。
18.优选的，所述选择检测样本，可选检测范围为全省或部分地市；
19.所述证照样本主要包括样本id、样本名称、证照类型名称以及样本数量。
20.优选的，所述选择检测规则为选择检测完整性、规范性、唯一性、标准性、关联性、时效性中的一个或者多个检测规则，其中，
21.完整性用于度量数据项中必填与非必填；
22.规范性用于度量具体数据指标是否按标准进行规范定义存储；
23.唯一性用于度量哪些字段是重复的或者哪些记录是重复的；
24.标准性用于度量哪些数据和信息是不正确的；
25.关联性用于数据字段之间的逻辑关联的匹配度；
26.时效性用于度量数据由时间因素产生的价值影响。
27.优选的，系统在自动监察证照共享过程中发现下列情况，则视为证照共享异常：
28.非工作日录入系统进行共享材料，具体时间段为：工作日晚6点至次日早8点30分、周末或法定节假日；
29.共享的材料出现事项为非申请类事项，包含咨询、宣传、引导；
30.同一窗口受理人一小时办理业务超过60件的材料共享；
31.同一申请人一月办件5次以上和办相同事项3次以上的材料共享；
32.自建系统的事项，在综合受理二次录入事项材料共享；
33.同一个事项多个材料绑定同一电子证照进行材料共享。
34.优选的，系统在自动监察证照入库过程中发现下列情况，则视为证照入库异常：
35.颁发单位不正确；
36.颁发单位与发证机关不一致；
37.发证机关层级不符；
38.编号规则不符合标准；
39.证照编码与身份证号相同；
40.持证者类型不符合规定；
41.持证者身份证号重复；
42.持证者身份证号对应不同名称；
43.身份证姓名超长；
44.类型种类不在字典值范围，税种不正确；
45.发证部门行业与证照所属行业不符；
46.证照已取消；
47.照面信息有缺失，关键字段是未知、无、或为空；
48.照面项金额不能为0；
49.区划下证照数据量与人口数量不符异常；
50.证照的字段中数量无单位名称；
51.同一身份证号码在不同区划有相同类型证照。
52.本发明还要求保护一种应用于政务服务的数据质量检测系统，包括证照数据异常检测模块，证照共享异常检测模块和证照入库异常检检测模块，该系统实现上述的应用于政务服务的数据质量检测实现方法。
53.本发明还要求保护一种应用于政务服务的数据质量检测装置，包括：至少一个存储器和至少一个处理器；
54.所述至少一个存储器，用于存储机器可读程序；
55.所述至少一个处理器，用于调用所述机器可读程序，执行上述的应用于政务服务的数据质量检测实现方法。
56.本发明还要求保护计算机可读介质，所述计算机可读介质上存储有计算机指令，所述计算机指令在被处理器执行时，使所述处理器执行上述的应用于政务服务的数据质量检测实现方法。
57.本发明的一种应用于政务服务的数据质量检测实现方法及系统与现有技术相比，具有以下有益效果：
58.本方法及系统能够在客户面对大量异常数据的情况下，通过配置，快速建立异常检测模型，快速上线满足客户要求的异常检测程序，为异常检测的供需双方提高效率、节省时间、节约成本。
附图说明
59.图1是本发明实施例提供的应用于政务服务的数据质量检测实现方法的数据处理过程图；
60.图2是本发明实施例提供的应用于政务服务的数据质量检测实现方法的数据流转流程图。
具体实施方式
61.本发明实施例提供一种应用于政务服务的数据质量检测实现方法，围绕政务服务异常进行配置，动态建立政务服务异常数据模型，并根据建立好的动态模型进行异常检测；包括
62.证照数据异常检测，根据证照检测任务设置，手动或自动执行检测任务；
63.证照共享异常检测，系统配置监察异常规则，根据监察异常规则，系统在自动监察证照共享过程中发现并处理证照共享异常；
64.证照入库异常检检测，系统配置监察异常规则，根据监察异常规则，系统在自动监察证照入库过程中发现并处理证照入库异常。
65.一、证照数据异常检测：
66.根据证照检测任务设置，手动、自动执行检测任务，提供证照检测任务总览，全面掌握证照检测任务执行状态、检测范围等信息。证照数据异常检测的具体步骤如下：
67.1)、新建检测任务，
68.输入任务名称和任务简介来创建一个证照检测任务。
69.2)、选择检测样本，
70.选择检测范围，可选检测范围为全省或部分地市；
71.其次，选择检测样本管理中导入的证照样本，证照样本主要包括样本id、样本名称、证照类型名称以及样本数量等；
72.最后选择是否对附件进行检测。
73.3)、选择检测规则，
74.选择检测完整性、规范性、唯一性、标准性、关联性、时效性中的一个或者多个检测规则，其中，
75.完整性用于度量数据项中必填与非必填；
76.规范性用于度量具体数据指标是否按标准进行规范定义存储；
77.唯一性用于度量哪些字段是重复的或者哪些记录是重复的；
78.标准性用于度量哪些数据和信息是不正确的；
79.关联性用于数据字段之间的逻辑关联的匹配度；
80.时效性用于度量数据由时间因素产生的价值影响。
81.4)、开始检测，
82.配置完成检测样本和检测规则后，可以进行手动检测，即手动点击后开始检测，也可以选择自动检测的方式，配置好执行频率和执行时间后，系统会自动对该样本进行检测；
83.5)、证照检测任务管理，
84.证照检测任务管理可查看当前证照检测任务概况，主要包括已完成、进行中以及未执行的任务，以列表的形式对证照检测任务进行展示，并可以对证照检测任务进行手动执行和删除操作；
85.6)、证照内容检测报告，
86.检测完成后生成对应的证照内容检测报告，可以对内容检测报告进行查看的删除等操作，并可以根据报告名称和检测完成时间段等条件对证照检测报告进行检索。
87.二、证照共享异常规则：
88.统配置下列监察异常规则，如果系统在自动监察证照共享过程中发现下列情况，则视为证照共享异常，并触发下一步动作。
89.非工作日录入系统进行共享材料，具体时间段为：工作日晚6点至次日早8点30分、周末或法定节假日；
90.共享的材料出现事项为非申请类事项，包含咨询、宣传、引导等事项；
91.同一窗口受理人一小时办理业务超过60件的材料共享；
92.同一申请人一月办件5次以上和办相同事项3次以上的材料共享；
93.自建系统的事项，在综合受理二次录入事项材料共享；
94.同一个事项多个材料绑定同一电子证照进行材料共享。
95.三、证照入库异常规则：
96.系统配置下列监察异常规则，如果系统在自动监察证照入库过程中发现下列情况，则视为证照入库异常，并触发下一步动作。
97.颁发单位不正确；
98.颁发单位与发证机关不一致；
99.发证机关层级不符；
100.编号规则不符合标准；
101.证照编码与身份证号相同；
102.持证者类型不符合规定；
103.持证者身份证号重复；
104.持证者身份证号对应不同名称；
105.身份证姓名超长；
106.类型种类不在字典值范围，税种不正确；
107.发证部门行业与证照所属行业不符；
108.证照已取消；
109.照面信息有缺失，关键字段是未知、无、或为空；
110.照面项金额不能为0；
111.区划下证照数据量与人口数量不符异常；
112.证照的字段中数量无单位名称；
113.同一身份证号码在不同区划有相同类型证照。
114.本方法在系统内配置相关异常检测规则，根据配置好的规则，自动化检测异常数据，为客户提供高效、便利的手段处理系统中的异常数据，提高效率、节省时间、节约成本。
115.本发明实施例还提供了一种应用于政务服务的数据质量检测系统，包括证照数据异常检测模块，证照共享异常检测模块和证照入库异常检检测模块，该系统实现本发明上述实施例中所述的应用于政务服务的数据质量检测实现方法。
116.本发明实施例还提供了一种应用于政务服务的数据质量检测装置，包括：至少一个存储器和至少一个处理器；
117.所述至少一个存储器，用于存储机器可读程序；
118.所述至少一个处理器，用于调用所述机器可读程序，执行本发明上述实施例中所述的应用于政务服务的数据质量检测实现方法。
119.本发明实施例还提供了一种计算机可读介质，所述计算机可读介质上存储有计算机指令，所述计算机指令在被处理器执行时，使所述处理器执行本发明上述实施例中所述的应用于政务服务的数据质量检测实现方法。具体地，可以提供配有存储介质的系统或者装置，在该存储介质上存储着实现上述实施例中任一实施例的功能的软件程序代码，且使该系统或者装置的计算机(或cpu或mpu)读出并执行存储在存储介质中的程序代码。
120.在这种情况下，从存储介质读取的程序代码本身可实现上述实施例中任何一项实施例的功能，因此程序代码和存储程序代码的存储介质构成了本发明的一部分。
121.用于提供程序代码的存储介质实施例包括软盘、硬盘、磁光盘、光盘(如cd-rom、cd-r、cd-rw、dvd-rom、dvd-ram、dvd-rw、dvd rw)、磁带、非易失性存储卡和rom。可选择地，可以由通信网络从服务器计算机上下载程序代码。
122.此外，应该清楚的是，不仅可以通过执行计算机所读出的程序代码，而且可以通过基于程序代码的指令使计算机上操作的操作系统等来完成部分或者全部的实际操作，从而实现上述实施例中任意一项实施例的功能。
123.此外，可以理解的是，将由存储介质读出的程序代码写到插入计算机内的扩展板中所设置的存储器中或者写到与计算机相连接的扩展单元中设置的存储器中，随后基于程序代码的指令使安装在扩展板或者扩展单元上的cpu等来执行部分和全部实际操作，从而
实现上述实施例中任一实施例的功能。
124.上文通过附图和优选实施例对本发明进行了详细展示和说明，然而本发明不限于这些已揭示的实施例，基与上述多个实施例本领域技术人员可以知晓，可以组合上述不同实施例中的代码审核手段得到本发明更多的实施例，这些实施例也在本发明的保护范围之内。