一种水文数据整编方法、系统、计算机设备与流程
本发明涉及水文数据处理,尤其涉及一种水文数据整编方法、系统、计算机设备。
背景技术:
1、水文资料整编是水文工作的基础性核心业务,其基本任务是将各水文站采集的原始监测数据,按照行业技术规范进行审查、校验、插补和订正,最终形成标准化的整编成果,为水文预报、水资源管理和防汛抗旱决策提供基础数据支撑。
2、目前,我国水文部门通常在每月10日前需完成辖区内数百个水位站、雨量站的月度资料整编工作。各站点以5分钟/条的频次持续采集数据,单站月数据量接近上万条。整编工作的首要环节是对原始数据进行全面的合理性检查,识别因设备故障、信号干扰或环境因素导致的异常值,并对缺测时段进行插补修复,确保整编成果的准确性和完整性。
3、在实际作业中,上述数据审查和修复工作主要由人工完成。整编人员逐站点、逐时段地审核数据,凭借个人经验判断数据是否合理,对疑误数据进行标记和修正。这一模式在实践中暴露出以下技术问题。
4、其一,雨量数据的异常判定与缺测修复缺乏对区域降雨态势的系统性考量。现有技术中,雨量数据异常判定通常采用单站阈值法,即预先设定固定的上、下限阈值,超出阈值范围的数值即被判定为异常。对于缺测数据,则采用空间插值法(如反距离加权法、克里金法)进行计算修复。上述方法均以孤立站点的数值特征为处理依据。然而,降雨是一种区域性的气象过程,具有显著的空间分布特征,一场降雨往往覆盖多个站点,相邻站点的雨量记录之间存在由地形、距离和气象条件决定的自然相关性。单站阈值法无法反映这一空间相关性,容易将正常降雨数据误判为异常。空间插值法在任何情况下都会计算出插补值,当区域实际无降雨时,该方法会错误地插补出伪降雨数据,破坏整编成果的真实性。
5、其二,水位数据的合理性校验采用统一的校验规则,未能区分河道水位与水库水位的不同水文特性。天然河道的水位变化受上游来水、区间汇流和河道槽蓄等因素的共同影响,上下游站点之间的水位过程在波形形态上具有高度的相似性和确定的传播时延,水位合理性检查中包含上下游水位过程线一致性校验对于判别河道站数据是否合理具有关键作用。水库则不同,其水位变化受蓄水、放水调度的人工干预,调蓄过程改变了天然的水量平衡关系,同一流域内上下游水库之间不存在天然的波形相似性。现有水位数据校验方法对所有水位站点采用统一规则,未将河道水位与水库水位加以区分。在河道站点上,由于缺乏过程线一致性校验,部分明显偏离上下游演进规律的水位变化无法被有效识别。在水库站点上,过程线一致性校验反而会造成大量无效的异常报警,增加人工复核的工作负担,降低整编效率。
6、其三,雨量审查与水位审查相互独立,数据审查流程分散。现有技术中,雨量数据的异常判定与插补修复、水位数据的合理性校验通常由整编人员分步操作、各自独立完成,未形成统一的数据导入、异常筛查、自适应处理到成果输出的标准化流程,难以满足大规模、高频次水文数据自动化整编的业务需要。
技术实现思路
1、本发明的目的在于提供一种水文数据整编方法、系统、计算机设备,旨在解决现有水文数据整编中雨量数据修复缺乏区域降雨态势感知而导致无雨时段错误插补、水位数据合理性校验未区分河道与水库的不同水文特性而导致校验规则不匹配、以及雨量审查与水位审查分散独立的问题。
2、第一方面,本发明提供一种水文数据整编方法,包括:
3、获取至少包括雨量原始数据和水位原始数据的多源水文监测数据,以及至少包括雨量站相邻关系表和河道上下游站点关联关系表的站点拓扑关联信息;
4、对所述雨量原始数据进行异常雨量站点判定,标记出数据异常的雨量站点;
5、针对标记出的异常雨量站点,调取所述异常雨量站点的相邻关系表,获取所述异常雨量站点的全部邻近站点的降雨记录,根据邻近站点中存在有效降雨记录的站点数量占比,判断当前区域是否存在普遍性降雨态势;
6、当判断为存在所述普遍性降雨态势时,从所述全部邻近站点中筛选出状态正常的相邻站点,以所述状态正常的相邻站点的同时段雨量数据,对所述异常雨量站点的缺测时段或偏差超标时段进行数据插补;
7、当判断为不存在所述普遍性降雨态势时,禁止进行所述数据插补,并将所述异常雨量站点标记为待人工复核状态;
8、识别所述水位原始数据对应的水体类型,当识别结果为河道水位时,采用包含上下游水位过程线一致性校验在内的第一校验规则集,对修复后的水位数据进行合理性校验;当识别结果为水库水位时,采用不包含所述上下游水位过程线一致性校验的第二校验规则集,对修复后的水位数据进行合理性校验;
9、输出经处理后得到的标准化水文整编数据源及异常明细报表。
10、第二方面,本发明提供一种水文数据整编系统,包括:
11、数据获取模块,用于获取至少包括雨量原始数据和水位原始数据的多源水文监测数据,以及至少包括雨量站相邻关系表和河道上下游站点关联关系表的站点拓扑关联信息;
12、雨量审查及自适应处理模块,用于对所述雨量原始数据进行异常雨量站点判定,标记出数据异常的雨量站点;
13、针对标记出的异常雨量站点,调取所述异常雨量站点的相邻关系表,获取所述异常雨量站点的全部邻近站点的降雨记录,根据邻近站点中存在有效降雨记录的站点数量占比,判断当前区域是否存在普遍性降雨态势;
14、当判断为存在所述普遍性降雨态势时,从所述全部邻近站点中筛选出状态正常的相邻站点,以所述状态正常的相邻站点的同时段雨量数据,对所述异常雨量站点的缺测时段或偏差超标时段进行数据插补;
15、当判断为不存在所述普遍性降雨态势时,禁止进行所述数据插补,并将所述异常雨量站点标记为待人工复核状态;
16、水位审查及差异化处理模块,用于识别所述水位原始数据对应的水体类型,当识别结果为河道水位时,采用包含上下游水位过程线一致性校验在内的第一校验规则集,对修复后的水位数据进行合理性校验;当识别结果为水库水位时,采用不包含所述上下游水位过程线一致性校验的第二校验规则集,对修复后的水位数据进行合理性校验;
17、结果输出模块,用于输出经处理后得到的标准化水文整编数据源及异常明细报表。
18、第三方面,本发明提供一种计算机设备,包括存储器、处理器及存储在存储器上并在所述处理器上运行的计算机程序,所述处理器执行该计算机程序时实现如第一方面所述的一种水文数据整编方法。
19、相比于现有技术,本发明的有益效果在于:
20、第一,雨量数据插补的准确性显著提高,避免了无雨时段的错误插补。本发明在雨量数据处理中,先对雨量原始数据进行异常站点判定,标记出数据异常的雨量站点。针对标记出的异常站点,调取其相邻关系表,通过统计邻近站点中有效降雨记录的占比来判断当前区域是否存在普遍性降雨态势。在此基础上,根据降雨态势的判断结果分两种情形处理:当区域存在普遍性降雨时,利用正常相邻站点的同时段雨量数据对异常站点的缺测或超标时段进行插补。当区域不存在普遍性降雨时,禁止插补并标记待人工复核。从根本上解决了现有空间插值法在无雨时段错误插补出伪降雨数据的问题。在普遍性降雨场景下,采用最近正常相邻站点同时段数据进行插补,保证了插补值与实际降雨空间分布的一致性。在无降雨场景下,主动放弃自动化插补,避免了无中生有的数据失真,从而提升了雨量整编原始数据的真实性和可靠性。
21、第二,水位合理性校验的准确率显著提升,避免了统一校验规则带来的误判和漏判。本发明在识别水位原始数据对应的水体类型后,根据不同水体类型采用差异化的校验规则集。河道水位采用包含上下游水位过程线一致性校验在内的完整第一规则集,可利用河道上下游的水力联系,对水位数据的合理性进行空间协同验证,有效识别出不符合上下游演进规律的数据异常。水库水位采用不包含过程线一致性校验的第二规则集,避免因水库调蓄特性导致的大量无效异常报警,使校验结果更加精准。两类水体分别采用与其水文特性相匹配的校验规则,既保证了河道水位校验的完整性,又避免了水库水位校验的无效干扰,整编人员只需关注真正存在问题的数据,减少了无效复核工作量。
22、第三,雨量审查与水位审查集成为统一流程,实现了水文整编数据审查的标准化和自动化。本发明通过数据导入步骤统一获取雨量原始数据和水位原始数据及站点拓扑关联信息,分别执行雨量数据的自适应处理和水位数据的差异化校验,最终输出标准化水文整编数据源及异常明细报表,形成了从数据导入、异常筛查、自适应处理到成果输出的完整闭环。整编人员无需在多个分散环节中重复操作,全流程自动化处理降低了人工干预,使水文整编工作从人工逐站逐时段审核转变为系统化、标准化、可复用的自动化流程,满足了大规模水文数据整编的业务需要。
23、综上,本发明通过区域降雨态势感知驱动的雨量插补决策、水体类型识别驱动的差异化水位校验、以及雨量审查与水位审查的流程集成,有效解决了现有水文整编数据审查中雨量插补缺乏降雨态势感知、水位校验缺乏水文特性区分的技术问题,提升了水文整编的效率和质量。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com