用于光伏并网配电网多源数据融合的接口实现方法及装置与流程
本技术涉及电力系统自动化,尤其涉及一种用于光伏并网配电网多源数据融合的接口实现方法及装置。
背景技术:
1、近年来,以光伏发电为代表的新能源发电装机规模持续快速增长,大量分布式光伏电源以分散式、多点接入的方式并网运行,使传统配电网逐步演变为含多类分布式电源、多元负荷及储能设备的有源配电网。在此背景下,光伏并网配电网的运行特性发生深刻变化,其故障特征与传统同步发电机供电系统存在显著差异,给配电网的故障检测、定位与隔离带来了新的技术挑战。实现对海量分布式光伏设备、并网节点及环境监测数据的全面、实时、精准采集与融合,是构建智能化光伏配电网故障处理系统的基础前提。然而,由于光伏并网涉及设备种类繁多、通信协议各异、数据体量庞大且实时性要求高,如何突破多源异构数据的高效融合接口技术,已成为本领域亟待解决的关键技术难题。
2、目前,现有光伏并网配电网的接口方案主要按以下方式实现:针对接入的各类光伏逆变器、智能电表及并网开关等终端设备,接口程序根据各设备所支持的通信协议类型(如iec 61850、dnp3.0、modbus tcp、dl/t 645等)和厂商提供的寄存器地址映射表,分别开发对应的协议解析驱动;通过轮询方式向各设备发送数据读取指令,接收并解析返回的原始报文,从中提取出电压、电流、功率等运行参数,随后将解析后的数据写入实时数据库,供上层监控与故障处理系统调用。然而,上述接口方案在数据接入的通用性、质量可靠性、传输实时性及操作安全性等方面均存在不足,难以满足光伏并网配电网多源异构数据高效融合接入的需求。
技术实现思路
1、本技术提供一种用于光伏并网配电网多源数据融合的接口实现方法及装置,用以改善相关技术中的接口方案在数据接入的通用性、质量可靠性、传输实时性及操作安全性等方面均存在不足,难以满足光伏并网配电网多源异构数据高效融合接入的需求的问题。
2、第一方面,本技术提供一种用于光伏并网配电网多源数据融合的接口实现方法,包括:
3、获取光伏并网配电网各端设备上传的原始数据报文;
4、基于设备标识识别原始数据报文对应的通信规约,根据识别结果从预设的协议适配器库中加载对应的协议适配器,通过协议适配器按照设备对应的数据地址映射表,将原始数据报文转换为具有统一数据格式的数据;
5、对具有统一数据格式的数据执行多层质量校验,对校验不通过的数据生成质量标签并执行自动修复;
6、采用三层缓存架构对经过质量校验和修复后的数据按实时性需求分类存储;
7、响应于客户端的数据访问请求,根据预设的角色访问控制策略校验客户端访问权限,校验通过后按照客户端支持的推送协议,按需从三层缓存架构中提取数据并推送至客户端。
8、在一种可能的实施例中,按照设备对应的数据地址映射表,将原始数据报文转换为具有统一数据格式的数据,包括:对原始数据报文进行报文解析,提取寄存器地址和寄存器数值;根据数据地址映射表,将寄存器地址映射为内部统一的数据对象标识;根据数据地址映射表中预设的量纲换算系数,将寄存器数值换算为工程单位制下的数值;按照预设的统一数据结构,将数据对象标识和工程单位制下的数值封装为具有统一数据格式的数据。
9、在一种可能的实施例中,对具有统一数据格式的数据执行多层质量校验,包括:对具有统一数据格式的数据执行范围检查,以校验具有统一数据格式的数据的数据值是否在预设的物理范围之内;对具有统一数据格式的数据执行变化率检查,以校验当前采样时刻的数据值与前一采样时刻的数据值之间的变化率是否超过预设的最大允许变化率阈值;对具有统一数据格式的数据执行一致性检查,以校验具有统一数据格式的数据的数据值与关联数据点的数据值之间的逻辑关系是否满足预设的逻辑约束条件;对具有统一数据格式的数据执行完整性检查,以校验具有统一数据格式的数据对应的数据帧结构是否完整以及必填字段是否存在缺失;根据各校验结果,生成对应的质量标签。
10、在一种可能的实施例中,对于质量校验不通过的数据,根据预设修复策略执行自动修复,包括:对于因数据值超出预设的物理范围或因变化率超过预设的最大允许变化率阈值而检查失败的数据,采用插值法生成修复数据;对于因必填字段缺失或数据帧结构不完整而检查失败的数据,采用预设的时间序列预测模型生成预测数据以填补缺失值;对于因逻辑关系不满足逻辑约束条件而检查失败的数据,根据逻辑约束条件中涉及的关联数据点之间的物理规律约束关系,由作为自变量的关联数据点推算作为因变量的关联数据点的理论值,采用理论值替换对应实测值进行修复;将修复数据或预测数据标记为预测值,并赋予低于实测值的质量评分;当检测到通信恢复或数据源恢复正常时,停止使用预测值,改用实测值作为当前数据,并记录预测值与实测值之间的偏差值,将偏差值反馈至时间序列预测模型以更新模型参数。
11、在一种可能的实施例中,采用三层缓存架构对经过质量校验和修复后的数据按实时性需求分类存储,包括:将当前采样时刻获取的实时数据写入第一缓存层,第一缓存层采用内存数据库,以供对延时要求最高的故障处理应用调用;将按分钟粒度聚合的统计数据写入第二缓存层,第二缓存层采用时序数据库,以供趋势分析和可视化展示应用调用;将数据从第二缓存层归档至第三缓存层,作为历史数据进行存储,第三缓存层采用关系型数据库,以供报表生成和深度分析应用调用;数据依次从第一缓存层归档至第二缓存层、从第二缓存层归档至第三缓存层。
12、在一种可能的实施例中,推送协议包括websocket协议、消息队列遥测传输协议(message queuing telemetry transport,简称mqtt)和超文本传输协议(hypertexttransfer protocol,简称http)流式传输协议中的至少一种;按需从三层缓存架构中提取数据并推送至客户端,包括:解析数据访问请求中携带的主题标识和过滤条件,根据主题标识从预设主题列表中匹配对应的数据主题,并根据数据主题从三层缓存架构中提取对应的数据;根据过滤条件对提取的数据进行筛选;根据客户端的订阅信息建立数据分发通道,将筛选后的数据按照客户端支持的推送协议进行封装,通过数据分发通道以设定的推送间隔发送至客户端。
13、在一种可能的实施例中,根据预设的角色访问控制策略校验客户端的访问权限,包括:对数据访问请求进行身份认证,获取客户端的用户身份信息;根据用户身份信息确定用户所属的角色,角色为电网调度员角色、光伏业主角色和运维人员角色中的任意一种;其中,电网调度员角色拥有读取全部数据、下发故障控制命令和执行恢复操作的第一权限集合;光伏业主角色拥有读取所属光伏数据、接收故障告警和控制自身光伏出力的第二权限集合;运维人员角色拥有读取设备状态和故障历史、上传巡检报告和控制巡检无人机的第三权限集合;根据角色对应的权限策略,校验数据访问请求所请求的操作是否属于角色的权限集合之内。
14、在一种可能的实施例中,用于光伏并网配电网多源数据融合的接口实现方法还包括:扩展定义光伏故障分析专用逻辑节点,光伏故障分析专用逻辑节点包括:分布式光伏逻辑节点,包含光伏系统标识数据对象、光伏系统运行状态数据对象和光伏系统健康状态数据对象;光伏逆变器逻辑节点,包含输出功率测量值数据对象、输出电压测量值数据对象、输出电流测量值数据对象、输出频率测量值数据对象和功率因数测量值数据对象;光伏功率测量逻辑节点,包含发电量累计值数据对象、可用容量数据对象和环境温度测量值数据对象;其中,分布式光伏逻辑节点、光伏逆变器逻辑节点和光伏功率测量逻辑节点分别具有统一规范的数据对象名称和引用路径;对应地,采用分布式光伏逻辑节点、光伏逆变器逻辑节点和光伏功率测量逻辑节点,对具有统一数据格式的数据进行结构化描述,生成包含数据对象名称和引用路径的光伏数据。
15、第二方面,本技术提供一种用于光伏并网配电网多源数据融合的接口实现装置,包括:
16、获取模块,用于获取光伏并网配电网各端设备上传的原始数据报文;
17、统一协议适配模块,用于基于设备标识识别原始数据报文对应的通信规约,根据识别结果从预设的协议适配器库中加载对应的协议适配器,通过协议适配器按照设备对应的数据地址映射表,将原始数据报文转换为具有统一数据格式的数据;
18、数据质量管控模块,用于对具有统一数据格式的数据执行多层质量校验,对校验不通过的数据生成质量标签并执行自动修复;
19、分层缓存模块,用于采用三层缓存架构对经过质量校验和修复后的数据按实时性需求分类存储;
20、数据推送模块,用于响应于客户端的数据访问请求,根据预设的角色访问控制策略校验客户端访问权限,校验通过后按照客户端支持的推送协议,按需从三层缓存架构中提取数据并推送至客户端。
21、第三方面,本技术提供一种电子设备,包括:处理器,以及与处理器通信连接的存储器;
22、存储器,用于存储计算机执行指令;
23、处理器,用于执行存储器存储的计算机执行指令,以实现第一方面任一项的方法。
24、第四方面,本技术提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机执行指令,计算机执行指令被执行时用于实现第一方面任一项的方法。
25、第五方面,本技术提供一种计算机程序产品,包括计算机程序,该计算机程序被执行时实现第一方面任一项的方法。
26、本技术提供的用于光伏并网配电网多源数据融合的接口实现方法及装置,获取光伏并网配电网各端设备上传的原始数据报文;基于设备标识识别原始数据报文对应的通信规约,根据识别结果从预设的协议适配器库中加载对应的协议适配器,通过协议适配器按照设备对应的数据地址映射表,将原始数据报文转换为具有统一数据格式的数据;对具有统一数据格式的数据执行多层质量校验,对校验不通过的数据生成质量标签并执行自动修复;采用三层缓存架构对经过质量校验和修复后的数据按实时性需求分类存储;响应于客户端的数据访问请求,根据预设的角色访问控制策略校验客户端访问权限,校验通过后按照客户端支持的推送协议,按需从三层缓存架构中提取数据并推送至客户端。
27、在此过程中,通过获取光伏并网配电网各端设备上传的原始数据报文,并基于设备标识识别对应通信规约、加载相应协议适配器以及按照数据地址映射表将原始数据报文转换为统一数据格式,能够降低多源异构设备接入过程中的协议差异影响并提升数据融合的统一性;通过对统一数据执行多层质量校验,对校验不通过的数据生成质量标签并执行自动修复,能够提高异常数据、缺失数据及逻辑冲突数据的识别与处理能力,从源头保障数据质量,进而提升多源数据处理的可靠性;通过采用三层缓存架构对经过质量校验和修复后的数据按实时性需求分类存储,并在响应客户端数据访问请求时基于角色访问控制策略进行权限校验后,按照客户端支持的推送协议按需提取并推送数据,能够兼顾数据访问的实时响应与安全管控,进而提高光伏并网配电网多源数据融合接口的整体服务效率与应用适配能力。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com