一种基于深度Q网络的GIS局部磁场检测自适应优化方法与流程

摘要: 本发明涉及局部磁场检测,特别涉及一种基于深度q网络的gis局部磁场检测自适应优化方法。背景技术:1、气体绝缘组合电器内部的局部放电是设备绝缘劣化的主要征兆,放电...
一种基于深度Q网络的GIS局部磁场检测自适应优化方法与流程

本发明涉及局部磁场检测,特别涉及一种基于深度q网络的gis局部磁场检测自适应优化方法。

背景技术:

1、气体绝缘组合电器内部的局部放电是设备绝缘劣化的主要征兆,放电点周围会产生微弱磁场,其幅值与放电强度相关,检测磁场的强弱与变化可判断绝缘缺陷的发展程度。由于磁场极为微弱,现场又存在工频磁场、导体电流磁场与振动等干扰,量子磁场传感器凭借较高灵敏度成为该场景下的检测手段。局部放电强度随缺陷发展而变化,检测量程需覆盖由微弱到较强的较宽范围,不同强度下对分辨率与响应速度的要求也不相同,因此要求量子磁场传感器在较宽量程内均保持稳定的检测精度。

2、现有的量子磁场检测多按预先设定的调控模型,在检测前确定一组固定的调控参数并保持不变。量子自旋系统的演化特性随待测磁场强度改变而明显不同,同一组调控参数难以在全部磁场强度下都使量子态保持在工作点附近,磁场强度较高时容易因调控量超调而使量子态偏离工作点、相干性下降,检测结果随之失真;环境干扰与磁场强度波动还会使检测误差缓慢积累,而检测过程中缺少识别与抑制误差累积趋势的手段。基于深度强化学习的调控方式多采用单一网络输出调控量,价值估计容易出现高估,泛化能力较弱,限制了量子磁场传感器在较宽量程内保持稳定检测精度的能力。

技术实现思路

1、本发明提供了一种基于深度q网络的gis局部磁场检测自适应优化方法,改善了在gis局部放电微弱磁场检测场景中,现有做法依赖预先设定的固定模型与线性调节手段对量子自旋系统输出调控量既未按待测磁场强度所处的区间分别确定调控量的取值范围,也未按量子态误差所处的收敛状态调整对调控量变化的约束,检测过程中误差的累积趋势缺少识别与抑制,导致量子态在不同磁场强度下的检测精度不一致、磁场强度较高时出现调控量超调与量子态退相干的技术问题。

2、本发明公开了如下技术方案:

3、本发明提供了一种基于深度q网络的gis局部磁场检测自适应优化方法,方法包括:

4、获取gis局部磁场传感量子自旋系统的量子态投影误差、自旋进动角误差及其一阶导数,并按当前待测磁场强度所处的弱、中、强区间,匹配对应区间的孪生深度q网络智能体;

5、根据匹配智能体确定微波脉冲相位偏移量的动作空间和采样周期;

6、在线网络选择动作价值最大的微波脉冲相位偏移量,目标网络对该动作进行价值计算;

7、根据量子态投影误差、自旋进动角误差、微波脉冲相位偏移量及其增量确定即时奖励,在当前待测磁场强度升高且根据量子态投影误差及其一阶导数判定收敛时增大动作增量惩罚,判定为超限或发散时减小动作增量惩罚;

8、根据即时奖励更新在线网络,并按设定训练步长将在线网络参数复制至目标网络,输出微波脉冲相位偏移量控制量子传感器,完成gis局部磁场自适应检测。

9、本发明中提供的一个或多个技术方案,至少具有如下技术效果或优点:

10、本发明技术方案通过提供的一种基于深度q网络的gis局部磁场检测自适应优化方法,首先,通过获取gis局部磁场传感量子自旋系统的量子态投影误差、自旋进动角误差及其一阶导数,并按当前待测磁场强度所处的弱、中、强区间匹配对应区间的孪生深度q网络智能体,实现了将待测磁场强度按所处区间与专设的智能体相对应,使量子态调控量的决策依据随磁场强度所处的区间改变,解决了同一套量子态调控策略难以适配不同磁场强度下量子态演化特性的问题,为后续按区间确定调控量的取值范围提供了决策主体。

11、进一步的,通过根据匹配智能体确定微波脉冲相位偏移量的动作空间和采样周期,实现了调控量的取值范围与采样间隔随待测磁场强度所处的区间分别确定,使弱磁场区间获得较大的取值范围以保持调节的灵活性与分辨率、强磁场区间获得较小的取值范围并缩短采样间隔以提升响应速度并抑制超调,解决了全量程内调节精度与响应速度难以兼顾的问题,为量子态调控提供了与所处区间相匹配的动作边界。

12、再进一步的,通过在线网络选择动作价值最大的微波脉冲相位偏移量、目标网络对该动作进行价值计算,实现了动作选择与价值评估由两个结构相同的网络分别承担,解决了单一网络对调控动作的价值估计容易出现高估、在不同磁场强度下决策泛化能力弱的问题,为量子态调控提供了价值估计更为稳定的决策方式。

13、更进一步的,通过根据量子态投影误差、自旋进动角误差、微波脉冲相位偏移量及其增量确定即时奖励,在当前待测磁场强度升高且根据量子态投影误差及其一阶导数判定收敛时增大动作增量惩罚,判定为超限或发散时减小动作增量惩罚,实现了对调控量变化的约束随磁场强度与误差收敛状态一同调整,解决了两类量子态误差在检测过程中缓慢积累而缺少识别与抑制手段的问题,为抑制调控量的剧烈波动、避免量子态因调控量突变而退相干提供了依据。

14、最后,通过根据即时奖励更新在线网络,并按设定训练步长将在线网络参数复制至目标网络,输出微波脉冲相位偏移量控制量子传感器,实现了量子态调控策略在检测过程中的持续优化,解决了固定调控模型难以随设备状态与环境干扰变化而自行调整的问题,为gis局部磁场在较宽量程内保持稳定的检测精度提供了调控输出。

15、由此可得,本发明通过获取量子态投影误差、自旋进动角误差及其一阶导数并按待测磁场强度所处的区间匹配孪生深度q网络智能体,按匹配智能体确定微波脉冲相位偏移量的动作空间与采样周期,由在线网络选择动作、目标网络评估价值,按两类误差与相位偏移量及其增量确定即时奖励并按磁场强度与误差收敛状态调整动作增量惩罚,再按设定训练步长更新并复制网络参数后输出相位偏移量控制量子传感器,实现了从量子态误差采集、区间智能体匹配、动作决策、奖励设计到网络更新与调控输出的完整处理,有利于在gis局部放电的较宽磁场量程内抑制调控量超调与量子态退相干,提高检测精度与响应稳定性。

1.一种基于深度q网络的gis局部磁场检测自适应优化方法,其特征在于,所述方法包括:

2.根据权利要求1所述的一种基于深度q网络的gis局部磁场检测自适应优化方法,其特征在于,步骤s1中,获取gis局部磁场传感量子自旋系统的量子态投影误差、自旋进动角误差及其一阶导数,包括:

3.根据权利要求2所述的一种基于深度q网络的gis局部磁场检测自适应优化方法,其特征在于,步骤s1.1包括:

4.根据权利要求2所述的一种基于深度q网络的gis局部磁场检测自适应优化方法,其特征在于,所述目标自旋投影分量与目标进动角的确定步骤包括:

5.根据权利要求1所述的一种基于深度q网络的gis局部磁场检测自适应优化方法,其特征在于,步骤s1中,按当前待测磁场强度所处的弱、中、强区间,匹配对应区间的孪生深度q网络智能体,包括:

6.根据权利要求1所述的一种基于深度q网络的gis局部磁场检测自适应优化方法,其特征在于,所述孪生深度q网络智能体包括结构相同的在线网络和目标网络,所述在线网络和所述目标网络的训练包括:

7.根据权利要求1所述的一种基于深度q网络的gis局部磁场检测自适应优化方法,其特征在于,步骤s2包括:

8.根据权利要求1所述的一种基于深度q网络的gis局部磁场检测自适应优化方法,其特征在于,步骤s3包括:

9.根据权利要求1所述的一种基于深度q网络的gis局部磁场检测自适应优化方法,其特征在于,步骤s4包括:

10.根据权利要求1所述的一种基于深度q网络的gis局部磁场检测自适应优化方法,其特征在于,所述设定训练步长根据所述当前待测磁场强度所处的弱、中、强区间确定,强磁场区间的设定训练步长小于中磁场区间的设定训练步长,中磁场区间的设定训练步长小于弱磁场区间的设定训练步长,所述设定训练步长与所述采样周期和所述动作空间内微波脉冲相位偏移量的离散取值数量的乘积成正比。