基于多源异构数据融合的煤炭企业碳排放核算质控方法与流程

摘要: 本发明涉及碳排放,具体涉及基于多源异构数据融合的煤炭企业碳排放核算质控方法。背景技术:1、煤炭生产企业的碳排放核算涉及大量能耗数据的采集与处理,包括柴油、煤炭、...
基于多源异构数据融合的煤炭企业碳排放核算质控方法与流程

本发明涉及碳排放,具体涉及基于多源异构数据融合的煤炭企业碳排放核算质控方法。

背景技术:

1、煤炭生产企业的碳排放核算涉及大量能耗数据的采集与处理,包括柴油、煤炭、天然气等燃料消耗数据以及各生产系统的电力消耗数据。在实际核算过程中,这些数据往往来自多个异构数据来源:能源管理系统提供部分设备的电表读数、电费结算系统提供全矿总用电量、燃料采购台账记录燃料入库量、地磅称重系统记录煤炭消耗量。这些数据来源在数据格式、采集频率、计量口径和精度等级方面均存在显著差异,导致面向同一核算指标的多源数据之间存在频繁的冲突和不一致现象。

2、现有碳排放核算数据质控方法通常在实际应用中存在如下问题:(1)现有单一数据来源依赖法,仅依赖企业指定的唯一数据来源进行核算,不对多源数据进行融合验证;(2)人工经验判定法,由核算人员根据经验判断多源数据中哪个更可信,缺乏系统化的判定依据;(3)简单规则筛选法,预设固定的优先级规则(如以电费结算单为准),无法自适应处理复杂冲突场景。这些方法在面对多源数据冲突时,以回避验证、主观判断、预设规则方式,难以满足煤炭生产企业高可靠性碳排放核算的数据质量要求。此外,对于能耗时序数据中常见的异常值和缺失值,现有方法多采用简单的移动平均或线性插值进行处理,未能充分利用时序数据的深层依赖结构和多维信息进行智能修复。

技术实现思路

1、本发明意在提供基于多源异构数据融合的煤炭企业碳排放核算质控方法,适用于煤炭企业碳排放核算应用场景,实现煤炭企业碳排放核算输入数据的自适应确定和动态质量评估。

2、本发明提供的基础方案为:基于多源异构数据融合的煤炭企业碳排放核算质控方法,包括:

3、s1,以煤炭企业碳排放核算指标为中心,按碳排放核算周期,获取当期多源异构数据;利用图注意力网络构建多源异构数据关联图谱,得到当期指标节点映射集,以表征当期指向同一核算指标的所有数据节点与该核算指标的关系;

4、s2,基于当期指标节点映射集,在预设条件下利用基于数据来源可信度动态评估的加权投票机制对每个核算指标进行多源冲突数据的自适应消解,确定每个核算指标的当期采纳值,并分别聚合相应历史核算期采纳值形成每个核算指标的采纳值序列;

5、s3,利用结合双向长短期记忆网络与生成对抗插补网络的时序数据修复算法,对每个核算指标的采纳值序列进行异常检测与缺失插补,得到每个核算指标的目标采纳值序列;

6、s4,利用基于时序因果卷积网络的数据质量动态评估模型,对每个核算指标目标采纳值序列中的采纳值进行动态质量评估;聚合关键结果生成煤炭企业碳排放核算数据质量追溯报告。

7、本发明的工作原理及优点在于:

8、本发明针对煤炭生产企业碳排放核算特性,提出了从多源数据采集、关联融合、冲突消解、时序修复到质量评估的全流程自适应质控方法,显著提升了煤炭生产企业碳排放核算数据在完整性、准确性和一致性方面的质量水平,进一步提升碳排放核算结果的可信度,为后续碳排放核算模型的准确运行提供了可靠的数据底座。核心优势在于:

9、本发明利用图注意力网络构建多源异构数据的关联图谱,通过实体对齐技术识别来自不同数据来源的同一核算指标,实现多源数据的自动匹配与融合,为后续核算数据的质控提供数据支撑,解决了煤炭生产企业碳排放核算中多源异构数据的自动融合难题,避免了人工比对的高成本和易错性。

10、本发明提出基于数据来源可信度动态评估的加权投票机制,采用基于数据来源历史准确率、数据时效性、数据完整性和数据来源稳定性四维度评价的动态可信度评估方法,结合加权投票机制,能够无需人工干预即可自适应地处理核算指标的多源数据冲突,冲突消解准确率显著高于固定优先级规则方法,避免了主观判断的随意性。

11、本发明采用结合双向长短期记忆网络(bi-lstm)与生成对抗插补网络(gain)的时序数据修复算法,针对核算指标采纳值序列,充分利用时序数据的双向依赖关系和生成对抗网络的强拟合能力,实现对异常值和缺失值的精准检测与合理插补。这种两阶段时序数据修复方法,相比传统线性插值方法,能够更准确地捕捉能耗数据的非线性变化模式和周期特征,修复精度显著提升。

12、本发明构建基于时间卷积网络的轻量化数据质量动态评分模型,对各数据来源、各指标的各期(月度)数据进行实时质量评分,实现数据质量的实时、定量化评估与可视化追溯,使核算人员能够快速定位数据质量薄弱环节,为核算结果的不确定性量化提供了数据层基础。

13、本发明在实际应用中,无需企业额外安装任何硬件设备或传感器,完全基于现有管理信息系统数据进行质控流程的智能化升级,具有推广成本低、部署周期短的优势。

1.基于多源异构数据融合的煤炭企业碳排放核算质控方法,其特征在于,包括:

2.根据权利要求1所述的基于多源异构数据融合的煤炭企业碳排放核算质控方法,其特征在于,s1中,确定煤炭企业碳排放核算指标,针对每一项核算指标,识别其潜在的数据来源,并行采集各数据来源中的原始能耗数据作为多源异构数据,每条数据记录由数值、数据来源标识、采集时间戳、原始格式信息构建初始特征向量统一存入多源数据暂存池,每条数据记录作为一个节点用于后续图注意力网络构建多源异构数据关联图谱;其中潜在的数据来源包括企业能源管理系统、电费结算系统、燃料采购台账和地磅称重系统。

3.根据权利要求1或2任一所述的基于多源异构数据融合的煤炭企业碳排放核算质控方法,其特征在于,s1中,图注意力网络构建多源异构数据关联图谱包括:将多源异构数据中每一数据记录作为一个节点,采用图注意力层进行节点之间的消息传递与权重学习;通过多头注意力机制,聚合来自包括同指关系、时序关系、源属关系在内的不同关系维度信息,最终输出每个节点的更新表示;基于更新后的节点表示,采用基于距离的聚类算法识别指向同一核算指标的所有数据节点,形成核算指标与节点集合的映射关系,构建以核算指标为中心的异构图谱结构。

4.根据权利要求1所述的基于多源异构数据融合的煤炭企业碳排放核算质控方法,其特征在于,s2中,预设条件包括当期指向同一核算指标的数据节点至少两个,当其数值偏差不满足要求时,则该核算指标存在多源冲突,启动基于数据来源可信度动态评估的加权投票机制确定采纳值;若当期指向同一核算指标的数据节点只有一个,则判定无数据冲突,不启动机制,直接以该数据节点的数值作为该核算指标的当期采纳值。

5.根据权利要求1所述的基于多源异构数据融合的煤炭企业碳排放核算质控方法,其特征在于,s2中,当核算指标存在多源冲突数据时,分别基于该核算指标各数据节点相应的历史准确率、数据时效性、数据完整性和数据来源稳定性四个维度评价指标,采用熵权法根据各维度数据的离散程度确定各维度权重,加权计算得到该核算指标各数据来源的可信度评分;以可信度评分通过加权投票机制确定该核算指标的当期采纳值。

6.根据权利要求1或5任一所述的基于多源异构数据融合的煤炭企业碳排放核算质控方法,其特征在于,s2中,当核算指标存在多源冲突数据时,通过数据来源可信度动态评估确定该核算指标各数据来源的可信度评分;以可信度评分作为加权投票机制的权重系数,计算各数据来源的加权投票得分;以加权投票得分最高者对应的数据作为该核算指标的采纳值;当最高得分与相邻位得分不满足阈值条件时,触发人工复核预警。

7.根据权利要求1所述的基于多源异构数据融合的煤炭企业碳排放核算质控方法,其特征在于,s3中,通过双向长短期记忆网络从前向和后向两个方向学习核算指标采纳值序列的长期依赖模式,对序列数据进行异常检测;生成对抗插补网络以双向长短期记忆网络异常检测存在异常点为约束条件,通过生成器和判别器的对抗训练生成符合原始序列数据分布特征的插补值以替换异常点数值,形成核算指标的目标采纳值序列。

8.根据权利要求1所述的基于多源异构数据融合的煤炭企业碳排放核算质控方法,其特征在于,s4中,针对核算指标的采纳值,时序因果卷积网络的数据质量动态评分模型,以该采纳值对应的原始值、历史均值偏差、同源一致性指标、跨源一致性指标和时序平滑度指标作为输入特征,通过时序因果卷积网络,输出该采纳值在完整性、准确性和一致性三个维度的质量评分及其综合质量等级。

9.根据权利要求8所述的基于多源异构数据融合的煤炭企业碳排放核算质控方法,其特征在于,历史均值偏差为该核算指标在去年同期至今的历史核算期所有采纳值的均值;同源一致性指标为该采纳值对应的同一数据来源邻近时间点的变异系数;跨源一致性指标为该核算指标下所有数据来源当期提供的候选值之间的标准差;时序平滑度指标为该核算指标相邻期采纳值变化的相对幅度。

10.根据权利要求1所述的基于多源异构数据融合的煤炭企业碳排放核算质控方法,其特征在于,s4中,关键结果包括通过数据来源可信度动态评估得到的核算指标数据来源的可信度评分及其变化趋势,冲突检测与消解记录、异常/缺失数据修复记录、各期采纳值质量评分、质量不合格数据项的明细列表及处理建议。