一种基于物理约束筛选与多污染物归一化的辐射效应估算方法

摘要: 本发明涉及大气环境遥感与地表辐射平衡监测的,尤其涉及一种污染物的辐射效应估算方法,用于精确估算多种污染物的直接辐射效应。背景技术:1、污染物直接辐射效应(pol...
一种基于物理约束筛选与多污染物归一化的辐射效应估算方法

本发明涉及大气环境遥感与地表辐射平衡监测的,尤其涉及一种污染物的辐射效应估算方法,用于精确估算多种污染物的直接辐射效应。

背景技术:

1、污染物直接辐射效应(pollutant direct radiative effect,pdre)量化污染物对地气系统短波辐射收支的影响,对气候变化与污染协同评估至关重要。但实测数据中,地表太阳总辐射同时受气溶胶(气溶胶通常是指悬浮在气体介质(通常为大气)中的固态或液态微粒所组成的气态分散系统,属于胶体分散体系的一种。从物理化学角度来看,气溶胶是以固体或液体为分散相、气体为分散介质所形成的溶胶。其粒子大小通常在0.01~10μm之间,但根据来源和形成原因,粒径范围可从几纳米到100微米不等。此处解释主要是气态污染物形成气溶胶的一种方式,不是气溶胶的全部形成方式。例如沙尘暴滞留在空气中形成沙尘气溶胶,海洋溅起的海盐颗粒扩散在大气中形成海盐气溶胶等等)、云、水汽、温度及太阳天顶角等多因素调制,且重污染常伴静稳、高湿等气象条件——后者本身亦影响辐射。各因素协同纠缠,从中分离各污染物的独立贡献,至今仍是未解的方法学难题。

2、当前,估算污染物直接辐射效应的工作主要沿三种研究范式展开:外场观测试验、模式模拟、以及基于观测数据的统计分析:

3、(1)外场观测试验通过太阳光度计、辐射计等设备直接测量气溶胶光学和辐射特性,结合辐射传输模型计算获得瞬时辐射效应。该方法具有现场性强、信息真实的优势,但受限于观测成本高、时段短、覆盖区域小,难以反映大范围连续的时空变化。此外,外场观测容易受到气象条件等外部因素干扰,不确定性较高。生物质燃烧等突发污染事件的不可预知性也限制了外场观测的适用性。(2)模式模拟是定量研究气溶胶辐射效应的有力工具,通过设计“有气溶胶”和“无气溶胶”的敏感性试验来量化辐射强迫。然而,模拟结果严重依赖模式对气溶胶组分、光学特性(如单次散射反照率、不对称因子)、垂直分布以及混合状态等参数的合理设置。大多数气候模式中气溶胶吸收性的设定仍存在较大争议。此外,模式模拟结果还受模式自身性能、输入数据分辨率和气象场准确性的制约,不同模式之间的估算差异显著。模拟结果与基于观测的估算之间缺乏充分的定量对比验证。(3)基于观测数据的统计分析通过对比污染期与清洁期的辐射观测差异,或建立气溶胶与辐射之间的回归关系来估算辐射效应。这类方法直接基于实际观测,避免了对复杂物理参数化方案的依赖。但传统统计分析方法存在根本性缺陷:首先,单一指示变量难以解析复杂污染贡献。现有方法多仅使用aod或pm2.5作为污染指示变量,而实际大气中颗粒物与气态污染物(如o3、no2等)共存,不同污染物的辐射机制(散射、吸收、前体物转化)存在显著差异。单一变量无法区分不同污染组分的独立辐射效应及协同效应,难以满足精细化评估需求。其次,未充分控制气象条件的差异。即使将云量限制在一定阈值以下,也仅能部分减轻天气干扰,且会大幅减少可用数据量。更关键的是,我们永远无法在同一时刻、同一地点同时观测到“有污染”和“无污染”两种状态下的辐射,因此难以构建严格气象同条件下的反事实基线,现有方法常采用简单的统计分位数(如第5百分位)定义“清洁背景”,但这本质上是纯数学操作,忽略了样本的物理属性。低值样本可能对应着多云、高湿或降水天气,其辐射值本身已受非气溶胶因素的严重调制,缺乏物理代表性,以此作为基线会导致估算失真。

4、例如公开号为cn113420253a的发明专利,公开了一种多波段合成的黑碳气溶胶直接辐射效应计算方法,创新点在于改进波段合成方式;公开号为cn116561487a的发明专利,公开了气溶胶瞬时短波直接辐射效应反演方法,创新点在于优化查找表构建与校正策略;公开号为cn120124279a的发明专利公开了一种面向卫星观测的气溶胶地表直接辐射效应快速计算方法,创新点在于通过公式拟合减少查找表调用次数。但上述专利文献属于基于辐射传输模型(radiative transfer model, rtm)的模拟/反演范式,核心是求解或利用辐射传输方程,通过输入气溶胶光学及微物理参数(如气溶胶光学厚度(aod)、气溶胶单次散射反照率(ssa)、不对称因子(asy)、垂直分布等)来计算辐射通量,进而得到辐射效应;存在以下问题:

5、其一、对气溶胶微观物理参数的强依赖性,导致估算结果不确定性大、业务化应用门槛高:这些方法都必须获取或设定ssa、asy、angstrom波长指数以及垂直分布参数。然而,ssa、asy等参数在全球范围内存在巨大的时空异质性,且难以通过常规地面观测网络实时获取。卫星反演存在不确定性,气候学假设又会引入系统性偏差。

6、其二、计算过程与实际观测脱节,缺乏独立观测验证,属于“模式模拟”而非“观测约束”估算:三篇专利均基于辐射传输模式模拟,属于纯理论计算,通过模型模拟“有气溶胶”和“无气溶胶”两种情景,本质上是理论推导。其结果准确性完全取决于模型假设和输入参数的正确性。然而,现实大气中气溶胶与辐射的相互作用已隐含在历史观测数据中。现有方法未能充分利用这一宝贵的“观测事实”,导致其估算结果与真实世界可能存在偏差,且难以被独立验证。

7、其三、难以有效剥离气象条件与气溶胶的共变影响,导致辐射效应估算存在系统性偏差:辐射传输模型在计算时,虽可控制输入参数,但其应用场景(如利用卫星产品)中,高污染事件往往与静稳、高湿等特定气象条件相伴发生。当使用观测到的aod等产品作为输入时,其背后的气象条件已经影响了辐射值。模型无法重现这种“观测时刻”的真实气象场及其与污染物的协同关系,因此计算出的辐射效应是“理想化气象条件下的理论值”,而非“真实大气状态下的实际效应”。

技术实现思路

1、针对现有技术存在的微观物理参数依赖、计算过程与实际观测脱节、难以有效剥离气象条件与气溶胶的共变影响以及反事实无扰基线难以构建的技术问题,本发明提出一种基于物理约束筛选与多污染物归一化的辐射效应估算方法,在不依赖气溶胶微观物理参数和辐射传输模式的前提下,仅利用常规地面观测数据,实现气象与气溶胶直接辐射效应的严格解耦,直接输出具有明确物理意义的单污染物独立直接辐射效应。

2、为了达到上述目的,本发明的技术方案是这样实现的:

3、一种基于物理约束筛选与多污染物归一化的辐射效应估算方法,包括:

4、s1:获取目标站点原始观测数据并进行预处理,得到标准化的数据集;所述标准化的数据集包括污染物特征、气象特征、时间特征及对应辐射值;

5、s2:构建辐射估算模型,用于建立从特征空间到辐射值g的非线性映射关系;利用所述标准化的数据集对所述辐射估算模型进行训练,得到训练好的辐射估算模型;

6、s3:基于可解释性分析方法对训练好的辐射估算模型进行物理一致性验证,得到验证通过的辐射估算模型;

7、s4:基于所述标准化的数据集通过多维物理约束筛选清洁背景样本并生成清洁背景向量;

8、s5:获取目标时刻的真实污染物特征及气象特征,结合所述清洁背景向量,基于验证通过的辐射估算模型进行分层次气象-污染物归一化与辐射估算,获取辐射效应估算结果。

9、进一步,所述污染物特征至少包括pm2.5、pm10、so2、no2、co、o3中的一种;

10、所述气象特征至少包括太阳天顶角余弦值、相对湿度rh、总云量tcc、低云量lcc、气压p、温度t、经向风u、纬向风v、风速ws、降水pre、边界层高度blh中的一种。

11、进一步,预处理包括:

12、采用三角函数对时间特征进行循环编码,得到编码后的时间特征;

13、根据目标站点污染物特征、气象特征及编码后的时间特征构建输入特征向量和目标变量,其中为气象特征向量;为需要扰动的污染物特征向量,为地表太阳总辐射;

14、执行三项质控规则,剔除无效样本,得到标准化的数据集;所述三项质控规则为:

15、剔除任一变量存在缺测、异常值的样本;

16、剔除地表太阳总辐射gr为负值的样本;

17、剔除地表太阳总辐射gr超过大气顶太阳辐射理论极值的样本。

18、进一步,步骤s2中,所述辐射估算模型为站点级模型;所述辐射估算模型至少采用xgboost回归模型、随机森林模型、轻量梯度提升机模型、多层感知器神经网络模型中的一种或者多种组合;

19、步骤s3中,可解释性分析方法至少采用shap方法、pdp方法、pfi方法中的一种或者多种组合;采用shap方法时,物理一致性验证规则如下:

20、随着颗粒物污染物浓度升高,对应的shap特征贡献值降低;

21、随着太阳天顶角余弦数值增大,对应的shap特征贡献值增大;

22、随着云量数值升高,对应的shap特征贡献值降低。

23、进一步,通过多维物理约束筛选清洁背景样本并生成清洁背景向量,包括:

24、s4.1、对标准化的数据集中的样本按季节和小时划分为n个时空分组;

25、s4.2、对每个时空分组中的样本分别执行低污染物浓度约束、晴空辐射验证约束、低湿度去吸湿干扰约束、强扩散条件约束以及臭氧背景特殊处理,筛选出全部满足约束条件的样本进入每个时空分组对应的清洁样本候选集;

26、s4.3、清洁样本候选集中样本数量小于样本量阈值时,通过自适应阈值放宽机制,扩充清洁样本候选集;

27、s4.4、对每个时空分组对应的清洁样本候选集中各污染物特征进行均值计算,得到每个时空分组对应清洁背景向量,清洁情境下j污染物浓度作为j污染物的清洁背景变量值。

28、进一步,低污染物浓度约束,包括:

29、;

30、其中,为第j种污染物的浓度,表示污染物浓度的初始第b百分位数,b为污染物浓度百分位阈值;

31、晴空辐射验证约束,包括:

32、利用天文公式计算理论晴空辐射,为太阳常数,为日地距离修正因子,为经验晴空大气透过率,要求实地表太阳总辐射,为晴空指数;

33、低湿度去吸湿干扰约束为:

34、要求相对湿度低于对应分组中位数:;其中,为求中位数操作;

35、强扩散条件约束为:

36、要求风速高于对应分组中位数:;

37、臭氧背景特殊处理为:对由低污染物浓度约束、晴空辐射验证约束、低湿度去吸湿干扰约束、强扩散条件约束确定的清洁样本样本集,直接计算臭氧o3浓度的算术平均值作为臭氧背景变量值。

38、进一步,自适应阈值放宽机制,包括:

39、若某时空分组经全部约束条件筛选后满足条件的样本量不足阈值nmin,逐步放宽低污染物浓度约束的污染物浓度百分位阈值b或者逐梯度降低晴空指数;每次放宽后重新执行全部约束条件的筛选,直至样本量≥nmin或达到放宽阈值,所述放宽阈值包括百分位最大阈值或晴空指数最小阈值;若放宽到达放宽阈值时,仍不足nmin个样本,则保留当前筛选结果,并标记该分组为样本量不足。

40、进一步,步骤s5中,利用验证通过的辐射估算模型进行分层次气象-污染物归一化与辐射估算,包括:污染物总体直接辐射效应计算、单污染物独立直接辐射效应计算以及污染物间的协同效应量化;

41、s5.1、污染物总体直接辐射效应计算,包括:

42、s5.11、输入目标时刻t及对应的真实气象向量和真实污染物向量,利用验证通过的站点级辐射估算模型进行真实情景预测,得到真实情景下地表太阳总辐射预测值;

43、s5.12、保持真实气象向量及时间不变,将真实污染物向量替换为输入清洁背景向量,利用验证通过的站点级辐射估算模型进行清洁情景预测,得到全污染物为清洁背景的地表太阳总辐射预测值;

44、s5.13、计算污染物总体直接辐射效应:;

45、s5.2、单污染物独立直接辐射效应计算,包括:

46、s5.21、采用清洁背景向量中目标污染物j的清洁背景变量值对真实的目标污染物j浓度进行替代,其余污染物保持真实值不变,构建部分清洁污染物向量;

47、s5.22、保持真实气象向量及时间不变,输入部分清洁污染物向量,利用验证通过的站点级辐射估算模型进行单污染预测,得到单污染物j为清洁背景的地表太阳总辐射预测值;

48、s5.23、计算单污染物独立直接辐射效应:;

49、s5.3、协同效应量化:基于非线性系统叠加原理,量化污染物间的协同效应:

50、,j为污染物总数。

51、进一步,步骤s4中替换为采用固定污染物阈值作为清洁背景变量值、以目标日期的滚动窗口内的预设百分位数作为清洁背景变量值或以全时段统一预设百分位阈值定义清洁背景变量值;

52、步骤s1中以卫星格网辐射产品替代站点观测,获取辐射值;

53、步骤s1中的数据集中增加气团轨迹特征作为辐射估算模型的输入特征:对每个站点每个日期,利用hysplit后向轨迹模型计算气团预设小时的后向轨迹,通过聚类分析将轨迹归为多种气团类别,对多种气团类别的类别编码为离散特征,作为辐射估算模型的输入特征。

54、进一步,步骤s5中以重采样方式替代单次替换,包括:

55、构建清洁样本池,从目标日期所属季节的清洁样本池中,随机抽取m次气象特征向量。将每次抽取的气象特征向量分别与部分清洁污染物向量/清洁背景向量组合,输入辐射估算模型分别得到m个单污染物j为清洁背景的地表太阳总辐射预测值/全污染物为清洁背景的地表太阳总辐射预测值,分别取其均值作为清洁背景变量替换后的地表太阳总辐射值预测值,并计算直接辐射效应:。

56、本发明的有益效果为:

57、采用站点级多变量机器学习建模替代辐射传输模型,无需气溶胶微观物理参数,大幅降低业务化门槛。模型通过数据驱动,隐式学习了由所有未知微观过程(散射、吸收、微物理特性等)综合导致的“污染物浓度→辐射”的宏观映射关系。仅需输入常规地面观测的pm2.5等质量浓度和温湿风压等气象数据,完全无需ssa、asy、垂直廓线等难以获取的参数。这使得该方法可在现有环境监测网络直接部署,计算成本低,业务化门槛极低。估算过程基于真实观测数据,结果具备固有的“观测约束”特性,可信度高。

58、提出一种基于多维物理约束筛选的清洁背景样本集构建方法。摒弃传统单一的统计分位数选取,通过引入晴空辐射验证、吸湿增长剔除及大气扩散条件判定等多重物理约束,从历史观测数据中筛选出气象条件具备明确物理代表性的清洁样本,构建反事实无扰基线,解决了传统基线包含云干扰和气象噪音的难题。

59、提出一种分层次气象-污染物归一化的辐射效应解耦框架。不依赖气溶胶微观物理参数的前提下,仅需常规地面观测的实际污染物质量浓度(pm2.5等)和气象要素,通过站点级机器学习模型建立气象-污染物-辐射的非线性映射关系,利用“固定气象条件、分层次替换污染物输入”的策略,实现污染物总体直接辐射效应(total pollutant radiativeeffect,tpre)与单污染物独立直接辐射效应(individual pollutant radiative effect,ipre)的同步估算,并量化污染物间的非线性协同辐射效应。