一种多元数据集中管理控制系统及方法与流程

1.本发明涉及数据管理技术领域，具体为一种多元数据集中管理控制系统及方法。


背景技术：

2.电力是以电能作为动力的能源。它将自然界的一次能源通过发电动力装置转化成电力，再经输电、变电和配电将电力供应到各用户。电力行业作为一种先进的生产力和基础产业，对促进国民经济的发展和社会进步起到了重要作用，与社会经济和社会发展有着十分密切的关系。因此，需要对电力数据进行存储监控达到有效保障电力的正常运行。
3.现有技术中，电力运行过程中会产生很多的数据，将这些数据进行存储时需要消耗很大的资源。


技术实现要素：

4.本发明的目的在于提供一种多元数据集中管理控制系统及方法，以解决上述背景技术中提出的问题。
5.为了解决上述技术问题，本发明提供如下技术方案：一种多元数据集中管理控制系统，所述管理控制系统包括数据采集模块、稳定性分类模块、上传数据处理模块和数据上传控制模块，所述数据采集模块按照预设频率从电力终端处获取某次采集的电力数据，按照电力数据的种类对该次采集的的电力数据进行分类得到k种待处理数据，所述稳定性分类模块获取该次采集的各种待处理数据的特征信息，对每种待处理数据进行稳定性分类，所述上传数据处理模块在某种待处理数据的稳定性分类为第一类时，如果该次采集中该种电力数据类型所对应的电力数据存在异常，直接将该种待处理数据的原数据作为上传数据，否则，那么将该种待处理数据进行处理后作为上传数据，在某种待处理数据的稳定性分类为第二类，直接将该种待处理数据的原数据作为上传数据，所述数据上传控制模块将该次采集的电力数据的上传数据上传到电力数据库。
6.进一步的，所述稳定性分类模块包括稳定性指数计算模块和稳定性指数比较模块，所述稳定性指数计算模块计算某种待处理数据的稳定性指数其中，m为历史采集到包含该种待处理数据的电力数据的次数，n为历史采集到包含该种待处理数据的电力数据时该种待处理数据出现异常的次数，ai为历史第i次采集该种待处理数据出现异常时其他出现异常的电力数据的种类数，di为历史第i次采集该种待处理数据出现异常时所采集到的电力数据的种类数，ti为历史第i次采集该种待处理数据出现异常时所采集到的电力数据数目，所述稳定性指数比较模块将某种待处理数据的稳定性指数与稳定性阈值进行比较，如果某种待处理数据的稳定性指数大于稳定性阈值，那么该种待处理数据的稳定性分类为第一类，否则，该种待处理数据的稳定性分类为第二类。
7.进一步的，所述管理控制系统还包括修正判断模块，所述修正判断模块包括上传指数计算模块、上传指数判断模块、修改指数计算模块和修改指数排序选取模块，所述上传
指数计算模块采集该次采集的电力数据的上传指数其中，d为该次采集的电力数据中将原数据作为上传数据的电力数据的个数，c为该次采集到的电力数据的总个数，所述上传指数判断模块将上传指数与上传阈值进行比较，如果上传指数大于上传阈值，那么直接将上传数据上传到电力数据库，否则修改指数计算模块计算某个进行处理后作为上传数据的待处理数据的修改指数其中，x为最近采集的电力数据包含该种待处理数据种类的次数，v为最近采集的电力数据上传到电力数据库过程中对该种待处理数据进行处理后再上传的次数，b为该次采集到的电力数据中该种待处理数据的总个数，所述修改指数排序选取模块将各种待处理数据按照修改指数从大到小的顺序排序，按照排序的顺序依次将某一个待处理数据还原为该种待处理数据的原数据作为上传数据后该次采集的电力数据的上传指数，直到上传指数大于上传阈值。
8.进一步的，所述管理控制系统还包括静态处理模块，所述静态处理模块将某种待处理数据进行处理后作为上传数据时，将该次采集的电力数据中的该种待处理数据处理为静态数据后作为上传数据，其中，静态数据为某种待处理数据的预设数据，将该次采集的电力数据中的静态数据进行去重处理。
9.一种多元数据集中管理控制方法，所述管理控制方法包括以下步骤：
10.按照预设频率从电力终端处获取某次采集的电力数据，按照电力数据的种类对该次采集的的电力数据进行分类得到k种待处理数据；
11.获取该次采集的各种待处理数据的特征信息，对每种待处理数据进行稳定性分类，
12.如果某种待处理数据的稳定性分类为第一类，
13.如果该次采集中该种电力数据类型所对应的电力数据存在异常，直接将该种待处理数据的原数据作为上传数据，否则，那么将该种待处理数据进行处理后作为上传数据；
14.如果某种待处理数据的稳定性分类为第二类，直接将该种待处理数据的原数据作为上传数据；
15.将该次采集的电力数据的上传数据上传到电力数据库。
16.进一步的，所述对每种待处理数据进行稳定性分类包括：
17.计算某种待处理数据的稳定性指数其中，m为历史采集到包含该种待处理数据的电力数据的次数，n为历史采集到包含该种待处理数据的电力数据时该种待处理数据出现异常的次数，ai为历史第i次采集该种待处理数据出现异常时其他出现异常的电力数据的种类数，di为历史第i次采集该种待处理数据出现异常时所采集到的电力数据的种类数，ti为历史第i次采集该种待处理数据出现异常时所采集到的电力数据数目，
18.如果某种待处理数据的稳定性指数大于稳定性阈值，那么该种待处理数据的稳定性分类为第一类，
19.否则，该种待处理数据的稳定性分类为第二类。
20.进一步的，所述将该次采集的各个待处理数据的上传数据上传到电力数据库之前还包括：
21.采集该次采集的电力数据的上传指数其中，d为该次采集的电力数据中将原数据作为上传数据的电力数据的个数，c为该次采集到的电力数据的总个数，
22.如果上传指数大于上传阈值，那么直接将上传数据上传到电力数据库，
23.否则，计算某个进行处理后作为上传数据的待处理数据的修改指数其中，x为最近采集的电力数据包含该种待处理数据种类的次数，v为最近采集的电力数据上传到电力数据库过程中对该种待处理数据进行处理后再上传的次数，b为该次采集到的电力数据中该种待处理数据的总个数，
24.将各种待处理数据按照修改指数从大到小的顺序排序，按照排序的顺序依次将某一个待处理数据还原为该种待处理数据的原数据作为上传数据后该次采集的电力数据的上传指数，直到上传指数大于上传阈值。
25.进一步的，所述将该种待处理数据进行处理后作为上传数据包括：
26.将该次采集的电力数据中的该种待处理数据处理为静态数据后作为上传数据，其中，静态数据为某种待处理数据的预设数据。
27.进一步的，所述将该种待处理数据进行处理后作为上传数据包括：
28.将该次采集的电力数据中的静态数据进行去重处理。
29.与现有技术相比，本发明所达到的有益效果是：本发明通过对该次采集获取到的电力数据以及相应的历史电力数据进行分析，判断是否要将电力数据进行处理后才上传，从而达到了在上传多元种类数据过程汇总节省传输和存储电力数据所消耗的资源的技术效果，同时在节省资源时保障数据处理方式的合理性，便于后续在电力数据库内对多元种类数据进行分析和追溯。
附图说明
30.附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
31.图1是本发明一种多元数据集中管理控制系统的模块示意图。
具体实施方式
32.下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
33.请参阅图1，本发明提供技术方案：一种多元数据集中管理控制系统，所述管理控制系统包括数据采集模块、稳定性分类模块、上传数据处理模块和数据上传控制模块，所述数据采集模块按照预设频率从电力终端处获取某次采集的电力数据，按照电力数据的种类对该次采集的的电力数据进行分类得到k种待处理数据，所述稳定性分类模块获取该次采集的各种待处理数据的特征信息，对每种待处理数据进行稳定性分类，所述上传数据处理模块在某种待处理数据的稳定性分类为第一类时，如果该次采集中该种电力数据类型所对应的电力数据存在异常，直接将该种待处理数据的原数据作为上传数据，否则，那么将该种
待处理数据进行处理后作为上传数据，在某种待处理数据的稳定性分类为第二类，直接将该种待处理数据的原数据作为上传数据，所述数据上传控制模块将该次采集的电力数据的上传数据上传到电力数据库。
34.所述稳定性分类模块包括稳定性指数计算模块和稳定性指数比较模块，所述稳定性指数计算模块计算某种待处理数据的稳定性指数其中，m为历史采集到包含该种待处理数据的电力数据的次数，n为历史采集到包含该种待处理数据的电力数据时该种待处理数据出现异常的次数，ai为历史第i次采集该种待处理数据出现异常时其他出现异常的电力数据的种类数，di为历史第i次采集该种待处理数据出现异常时所采集到的电力数据的种类数，ti为历史第i次采集该种待处理数据出现异常时所采集到的电力数据数目，所述稳定性指数比较模块将某种待处理数据的稳定性指数与稳定性阈值进行比较，如果某种待处理数据的稳定性指数大于稳定性阈值，那么该种待处理数据的稳定性分类为第一类，否则，该种待处理数据的稳定性分类为第二类。
35.所述管理控制系统还包括修正判断模块，所述修正判断模块包括上传指数计算模块、上传指数判断模块、修改指数计算模块和修改指数排序选取模块，所述上传指数计算模块采集该次采集的电力数据的上传指数其中，d为该次采集的电力数据中将原数据作为上传数据的电力数据的个数，c为该次采集到的电力数据的总个数，所述上传指数判断模块将上传指数与上传阈值进行比较，如果上传指数大于上传阈值，那么直接将上传数据上传到电力数据库，否则修改指数计算模块计算某个进行处理后作为上传数据的待处理数据的修改指数其中，x为最近采集的电力数据包含该种待处理数据种类的次数，v为最近采集的电力数据上传到电力数据库过程中对该种待处理数据进行处理后再上传的次数，b为该次采集到的电力数据中该种待处理数据的总个数，所述修改指数排序选取模块将各种待处理数据按照修改指数从大到小的顺序排序，按照排序的顺序依次将某一个待处理数据还原为该种待处理数据的原数据作为上传数据后该次采集的电力数据的上传指数，直到上传指数大于上传阈值。
36.所述管理控制系统还包括静态处理模块，所述静态处理模块将某种待处理数据进行处理后作为上传数据时，将该次采集的电力数据中的该种待处理数据处理为静态数据后作为上传数据，其中，静态数据为某种待处理数据的预设数据，将该次采集的电力数据中的静态数据进行去重处理。
37.一种多元数据集中管理控制方法，所述管理控制方法包括以下步骤：
38.按照预设频率从电力终端处获取某次采集的电力数据，按照电力数据的种类对该次采集的电力数据进行分类得到k种待处理数据；不同元种类的电力数据更新频率不一样，以预设频率从电力终端获取电力数据时很可能会出现多次采集到某一种类的电力数据的情况，比如，如果在预设频率内，电力数据a更新了3次，那么采集到的电力数据中就包括了3个电力数据a；
39.获取该次采集的各种待处理数据的特征信息，对每种待处理数据进行稳定性分类，
40.所述对每种待处理数据进行稳定性分类包括：
41.计算某种待处理数据的稳定性指数其中，m为历史采集到包含该种待处理数据的电力数据的次数，n为历史采集到包含该种待处理数据的电力数据时该种待处理数据出现异常的次数，ai为历史第i次采集该种待处理数据出现异常时其他出现异常的电力数据的种类数，di为历史第i次采集该种待处理数据出现异常时所采集到的电力数据的种类数，ti为历史第i次采集该种待处理数据出现异常时所采集到的电力数据数目，当越小，说明该种待处理数据的出现异常的几率较大，数据的异常波动性相对较大，当越小时，说明该种待处理数据出现异常时，其他种类出现异常的情况的几率较小，那么在这种情况下，必须得保留原数据，便于后续对待处理数据进行追溯或者分析；同时，本技术中采用作为的权重值是考虑到在不同的种类数据更新频率不一样从而会导致预审频率内采集到的数据量不一样，将其作为权重值使得后续的判断结果更加准确；
42.当某种待处理数据的稳定性指数越高，说明该种待处理数据发生异常的次数相对较多，
43.如果某种待处理数据的稳定性指数大于稳定性阈值，那么该种待处理数据的稳定性分类为第一类，
44.否则，该种待处理数据的稳定性分类为第二类；
45.如果某种待处理数据的稳定性分类为第一类，
46.如果该次采集中该种电力数据类型所对应的电力数据存在异常，直接将该种待处理数据的原数据作为上传数据，否则，那么将该种待处理数据进行处理后作为上传数据；所述将该种待处理数据进行处理后作为上传数据包括：
47.将该次采集的电力数据中的该种待处理数据处理为静态数据后作为上传数据，其中，静态数据为某种待处理数据的预设数据，然后将该次采集的电力数据中的静态数据进行去重处理；
48.如果某种待处理数据的稳定性分类为第二类，直接将该种待处理数据的原数据作为上传数据；这里的原数据指的是原始数据，采集的是某个数据，就直接上传该个数据；
49.将该次采集的电力数据的上传数据上传到电力数据库；比如，预设频率内采集到3个电力数据a、1个电力数据b、2个电力数据c、1个电力数据e，分析后，电力数据b、电力数据c、电力数据e是直接将电力数据的原数据上传，电力数据a是进行处理后作为上传数据，那么在上传的时候，上传数据为1个电力数据b、2个电力数据c、1个电力数据e和1个电力数据a的静态数据；
50.所述将该次采集的各个待处理数据的上传数据上传到电力数据库之前还包括：
51.采集该次采集的电力数据的上传指数其中，d为该次采集的电力数据中将原数据作为上传数据的电力数据的个数，c为该次采集到的电力数据的总个数，本技术中考虑到如果对数据处理过多会影响后续对电力数据的追溯或者分析，所以本技术在上传之前计算了下上传指数，如果上传指数较小，说明进行处理后再上传的数据较多，那么有可能会出现影响后续对电力数据进行追溯或者分析的情况，因此需要对原先处理为静态数据的进
行修正，判断是否要以原数据上传；
52.如果上传指数大于上传阈值，那么直接将上传数据上传到电力数据库，
53.否则，计算某个进行处理后作为上传数据的待处理数据的修改指数其中，x为最近采集的电力数据包含该种待处理数据种类的次数，v为最近采集的电力数据上传到电力数据库过程中对该种待处理数据进行处理后再上传的次数，b为该次采集到的电力数据中该种待处理数据的总个数，本技术考虑到如果说某种数据被处理后上传的次数越多，会导致数据断层比较大，影响后续的数据分析，同时，如果某种待处理数据在该次采集到的电力数据中数据个数比较多的情况下，在上传过程中占用的资源会比较多，并且有效数据率会比较低，如果某种待处理数据在该次采集到的电力数据中数据个数比较少的情况下，在上传过程中占用的资源会比较少，数据有效率比较高
54.将各种待处理数据按照修改指数从大到小的顺序排序，按照排序的顺序依次将某一个待处理数据还原为该种待处理数据的原数据作为上传数据后该次采集的电力数据的上传指数，直到上传指数大于上传阈值。
55.需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。
56.最后应说明的是：以上所述仅为本发明的优选实施例而已，并不用于限制本发明，尽管参照前述实施例对本发明进行了详细的说明，对于本领域的技术人员来说，其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。