一种调度一体化平台数据回流与增量同步的系统和方法与流程

1.本发明涉及电力系统电网调度技术领域，尤其涉及一种调度一体化平台数据回流与增量同步的系统和方法。


背景技术：

2.调度智能指挥平台(简称dicp)是以电网调度业务为基础构建的专业化指挥平台，是基于调控一体化模式建立的贯通各级调度对象的调度指挥网络交互系统。
3.然而，在目前站内操作票执行环节中，由于依赖大量复杂重复的人工操作，不仅使得环节复杂，而且还效率低，误操作风险大；尤其对一些偏远恶劣的现场环境，到站操作也有操作成本高、难度大、人身安全风险高等缺点；另外，应对高速增长的电网规模，传统运检模式也难以适应当前电网工作的需要。
4.此外，在调度办公终端中，设备因限制并不能开端口，无法启用服务。并且内存严重不足，给调整带来数据通信的不便。


技术实现要素：

5.本发明的目的在于提供一种调度一体化平台数据回流与增量同步的系统和方法，旨在解决现有技术中调度办公终端中，设备因限制并不能开端口，无法启用服务，并且内存严重不足，给调整带来数据通信的不便等问题。
6.为实现上述目的，本发明的技术方案如下：一种调度一体化平台数据回流与增量同步的系统，包括datacrawler采集子系统以及datachannel采集子系统，
7.所述datacrawler采集子系统包括登录模块、定时采集模块以及自动转发同步模块，其中，
8.所述登录模块连接自动转发同步模块，以用于所述调度一体化平台初始登录外部客户机，完成数据搭载；
9.所述定时采集模块连接所述自动转发同步模块，用于定时获取所述调度一体化平台的数据；
10.所述自动转发同步模块在采信到所述调度一体化平台的数据后，自动同步到所述datachannel采集子系统进行数据同步服务；
11.所述datachannel采集子系统包括数据增量过滤模块、缓存池以及数据同步模块，其中，
12.所述数据增量过滤模块连接数据同步模块以用于所述自动转发同步模块在采信到所述调度一体化平台的数据时，对采集数据进行压缩加密；
13.所述缓存池连接所述数据同步模块，用于对过滤后的所述采集数据进行缓存并存储；
14.所述数据同步模块用于对所述缓存后采集数据进行数据更新。
15.进一步地，所述数据增量过滤模块在对采集数据进行压缩加密时，若，所述采集数
据已进行同步，则所述采集数据进行过滤，过滤完成后输送至所述缓存池中。
16.进一步地，所述datacrawler采集子系统通信连接所述datachannel采集子系统。
17.一种调度一体化平台数据回流与增量同步的方法，包括以下步骤：
18.步骤s1、初始化调度一体化平台并在所述调度一体化平台上启用定时调试任务；
19.步骤s2、对调度一体化平台进行登录结果判断，若输出结果为是，则调度一体化平台自动抓取数据，并自动转发到datachannel采集子系统进行数据同步服务；反之，则登录调度一体化平台的cas登录认证服务，获取token标记数据，调度一体化平台登录成功后，直接获取token标记数据并自动转发到datachannel采集子系统进行数据同步服务；
20.步骤s3、datachannel采集子系统接收数据后，对所接收的数据进行加密并进行对比缓存；
21.步骤s4、缓存完成后将所接受的数据添加到增量任务，并对增量任务进行入库；
22.步骤s5、将已入库的增量任务标记为缓存数据，完成调度一体化平台数据回流与增量同步。
23.进一步地，基于步骤s3，所述datachannel采集子系统接收数据后，对所接收的数据进行加密并与缓存池数据作比较，若所接受数据不存在缓存池时，则直接添加入增量数据队列，否则加入修改数据队列中。
24.进一步地，基于步骤s4，所述增量任务的入库具体实施方式包括：增量新增入库以及增量修改入库。
25.本发明系统取代原有调度模式，重新规范调度工作流程，将调度运行的检修单、操作票、工作票、电子令等功能进行整合，形成完整的操作闭环流程，在流程的各个环节进行安全校核，提高了调度指挥智能化水平，提升了调度运行管理效率，实现电网运行安全与效率的统一；
26.此外，本发明采用一种调度一体化平台数据回流与增量同步流程，使得在数据不流通的系统环境下操作dicp数据的中间桥梁，数据逻辑筛选过滤等大量逻辑分离，大大节约了oa机器的系统成本，而且还有效地同步dicp数据，进而有效地提高了电力数据以及中调系统的可扩展性；
27.与此同时，极大的简化了数据导出到各个环节的流程，从而不仅有效地提高了操作项目的自动化程度，而且还有效地降低了误操作及漏操作的风险。
附图说明
28.构成说明书一部分的附图描述了本发明的实施例，并且连同描述一起用于解释本发明的原理，参照附图，可以更加清楚地理解本发明：
29.图1为本发明一实施例中调度一体化平台的系统整体框图示意图；
30.图2是本发明一实施例中的整体流程示意图。
具体实施方式
31.下面结合附图和实施例对本发明的技术方案做进一步的详细说明。
32.如图1所示，本发明的一种调度一体化平台数据回流与增量同步的系统，包括：datacrawler采集子系统以及datachannel采集子系统，
33.datacrawler采集子系统包括登录模块、定时采集模块以及自动转发同步模块，其中，
34.登录模块连接自动转发同步模块，以用于调度一体化平台初始登录外部客户机，完成数据搭载；
35.定时采集模块连接自动转发同步模块，用于定时获取调度一体化平台的数据；
36.自动转发同步模块在采信到调度一体化平台的数据后，自动同步到datachannel采集子系统进行数据同步服务；
37.datachannel采集子系统包括数据增量过滤模块、缓存池以及数据同步模块，其中，
38.数据增量过滤模块连接数据同步模块以用于自动转发同步模块在采信到调度一体化平台的数据时，对采集数据进行压缩加密；
39.缓存池连接数据同步模块，用于对过滤后的采集数据进行缓存并存储；
40.数据同步模块用于对缓存后采集数据进行数据更新。
41.作为本发明的一实施例，数据增量过滤模块在对采集数据进行压缩加密时，若，采集数据已进行同步，则采集数据进行过滤，过滤完成后输送至缓存池中。
42.作为本发明的一实施例，datacrawler采集子系统通信连接datachannel采集子系统。
43.如图2所示，本发明还提供一种调度一体化平台数据回流与增量同步的方法，包括以下步骤：
44.步骤s1、初始化调度一体化平台并在调度一体化平台上启用定时调试任务；
45.步骤s2、对调度一体化平台进行登录结果判断，若输出结果为是，即，调度一体化平台已登录且登录未过期，则调度一体化平台自动抓取数据，并自动转发到datachannel采集子系统进行数据同步服务；反之，则登录调度一体化平台oauth2，即，登录调度一体化平台的cas登录认证服务，获取token标记数据，调度一体化平台登录成功后，直接获取token标记数据并自动转发到datachannel采集子系统进行数据同步服务；
46.步骤s3、datachannel采集子系统接收数据后，对所接收的数据进行加密并进行对比缓存；
47.步骤s4、缓存完成后将所接受的数据添加到增量任务，并对增量任务进行入库；
48.步骤s5、将已入库的增量任务标记为缓存数据，完成调度一体化平台数据回流与增量同步，通过采用一种调度一体化平台数据回流与增量同步流程，使得数据同步过程中，由于内网无法开通服务，内存过小的问题得到缓解，为其它系统得到更多大扩展空间，省去了数据导出同步的繁琐流程。而且还有效地省去了人力、物力及时间成本，进而有效地提高了变电站操作票的执行效率。
49.作为本发明的一实施例，基于步骤s3，datachannel采集子系统接收数据后，对所接收的数据进行加密并与缓存池数据作比较，若所接受数据不存在缓存池时，则直接添加入增量数据队列，否则加入修改数据队列中。
50.作为本发明的一实施例，基于步骤s4，增量任务的入库具体实施方式包括：增量新增入库以及增量修改入库。
51.作为本发明的一实施例，本发明系统取代原有调度模式，重新规范调度工作流程，
将调度运行的检修单、操作票、工作票、电子令等功能进行整合，形成完整的操作闭环流程，在流程的各个环节进行安全校核，提高了调度指挥智能化水平，提升了调度运行管理效率，实现电网运行安全与效率的统一，此外，本发明采用一种调度一体化平台数据回流与增量同步流程，使得在数据不流通的系统环境下操作dicp数据的中间桥梁，数据逻辑筛选过滤等大量逻辑分离，大大节约了oa机器的系统成本，而且还有效地同步dicp数据，进而有效地提高了电力数据以及中调系统的可扩展性；与此同时，极大的简化了数据导出到各个环节的流程，从而不仅有效地提高了操作项目的自动化程度，而且还有效地降低了误操作及漏操作的风险。
52.以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是，以上所述仅为本发明的具体实施方式，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应含在本发明的保护范围之内。