一种故障录波文件压缩与低轨卫星抗丢包传输方法及系统与流程
本发明涉及故障录波数据处理及卫星通信,具体涉及一种故障录波文件压缩与低轨卫星抗丢包传输方法及系统。
背景技术:
1、随着配电自动化系统的不断发展,馈线终端单元(ftu)被广泛应用于配电线路的运行状态监测和故障处理。ftu能够采集线路中的三相电压、三相电流以及开关状态等信息,并在检测到短路、接地或者其他异常工况时生成故障录波文件。故障录波文件通常采用comtrade格式,用于记录故障发生前后各模拟量通道的采样数据、开关量通道的状态变化及相关配置信息,为故障定位、故障原因分析和配电网运行维护提供数据依据。
2、comtrade故障录波文件一般包括配置文件和数据文件,涉及多个模拟量通道和开关量通道。由于模拟量采样频率较高、通道数量较多,并且需要保存一定时长的故障前后数据,因此单次故障形成的录波数据量较大。当ftu在短时间内连续检测到多个故障或者异常事件时,还可能积累多个待传输的故障录波文件。对于处理器性能、运行内存和存储容量有限的ftu,录波文件的读取、缓存、压缩和传输会占用较多的计算资源与存储资源,进而影响其他配电自动化功能的正常运行。
3、在偏远山区、海岛、高原以及其他地面通信网络覆盖不足的配电网区域,ftu与配电主站之间可能需要借助低轨卫星链路传输故障录波文件。低轨卫星与地面终端之间的相对运动速度较快,单次通信窗口的持续时间有限,并且链路质量容易受到遮挡、天气、终端姿态及无线传播环境的影响。因此,低轨卫星链路可能存在可见时间有限、误码率较高、丢包、通信中断以及传输时延波动等情况。故障录波文件数据量较大时,可能无法在一次通信窗口内完成传输;一旦传输过程中发生链路中断或者数据丢失,还可能产生较大的重传开销。
4、现有故障录波文件处理方式通常采用通用无损压缩算法,或者直接对录波数据进行差分编码、预测编码等处理。通用无损压缩算法主要将故障录波文件作为普通字节序列进行压缩,对三相电压、三相电流之间的相关性以及电力故障波形的变化特点利用不足,因而在部分录波数据上的压缩效果有限。有些压缩处理还需要预先读取或者缓存较大范围的数据,对ftu的内存容量和处理器算力提出了较高要求。
5、现有电力波形压缩方法通常采用固定的数据分段方式或者固定的编码参数。在稳态运行阶段,电压和电流波形具有较强的周期性和相关性;而在短路、接地、开关动作等故障或者暂态阶段,波形可能在短时间内发生明显变化。固定处理方式难以同时适应稳态波形和暂态波形,在波形特征发生变化时容易出现预测偏差增大、编码数据量上升或者压缩性能不稳定等问题。此外,故障录波文件中的模拟量数据与开关量数据虽然具有统一的时间基准,但现有技术中二者通常被分别处理。当开关状态发生变化或者部分数据发生丢失时,可能导致恢复后的模拟量采样点与开关量变位时刻之间出现对应偏差,从而影响故障发生时刻的判断和后续故障分析。
6、在故障录波文件的卫星传输方面,现有技术通常采用整文件传输或者普通数据包传输方式。整文件传输需要等待完整文件接收完成后才能开展解析和故障分析,当链路中断或者文件部分内容发生错误时,往往需要重新传输较大范围的数据。普通数据包传输虽然可以将文件拆分发送,但不同数据包之间通常存在较强的连续依赖关系,部分数据包缺失可能导致后续数据无法正常使用。此外,现有传输方式通常未充分区分故障关键时段数据与一般时段数据,在通信窗口较短或者链路质量下降时,可能出现故障关键数据未能及时到达主站的问题。
7、因此,现有技术仍难以同时满足ftu资源受限条件下的故障录波文件高效无损处理需求,以及低轨卫星弱链路条件下的低时延和可靠传输需求。如何降低故障录波文件处理过程对ftu计算资源和存储资源的占用,在保持模拟量、开关量及其时间对应关系准确的前提下减少待传输数据量,并在链路丢包、中断和时延波动的情况下提高故障录波数据的可用性和恢复效率,是本领域亟待解决的技术问题。
技术实现思路
1、本发明要解决的技术问题:针对现有技术的上述问题,提供一种故障录波文件压缩与低轨卫星抗丢包传输方法及系统,以提升低轨卫星弱链路环境下关键故障数据的传输可靠性、时效性和丢包恢复能力。
2、为了解决上述技术问题,本发明采用的技术方案为:
3、一种故障录波文件压缩与低轨卫星抗丢包传输方法,包括步骤:
4、s1,流式解析故障录波文件,对其中的模拟量和开关量进行解复用,生成结构化数据块;
5、s2,计算所述结构化数据块中三相电压数据或三相电流数据的特征指标,并根据特征指标及预设判据在直通模式、相间差分模式和整数可逆clarke变换模式中为数据块选择相应的去相关模式;其中所述特征指标包括三相平衡度、零序分量显著性和暂态突变强度中的一种或多种;
6、s3,以工频周期为基准,根据波形平稳性和开关量事件确定数据块的预测帧长,根据各预测帧内数据特征和ftu终端算力自适应选择预测模型并生成模拟量预测残差;
7、s4,对模拟量预测残差和开关量事件进行协同编码,根据模拟量预测残差的统计特征确定编码参数并执行编码,并利用与模拟量时间轴对齐的开关量事件控制模拟量预测模型重置或编码参数切换,得到与相应时间窗口一一对应且不依赖前一压缩帧的独立压缩帧;
8、s5,将各独立压缩帧补齐并分割为多个等长源分片,采用系统rs编码生成多个校验分片,将对应同一独立压缩帧的多个分片组成一个fec组,并将每个源分片或校验分片分别封装为一个传输分片,再根据低轨卫星链路质量和分片业务优先级调度发送;
9、s6,主站按照fec组重组接收的传输分片,将校验失败的传输分片标记为擦除;在获得同一fec组任意个有效分片时恢复并校验对应的独立压缩帧,再对所述独立压缩帧进行不依赖前一压缩帧的独立解码;当同一fec组的有效分片少于预设数量时,按照组标识和分片序号对未恢复分片进行选择性重传;将解码结果按照时间顺序拼接,逐项恢复无损对象并重建故障录波数据集。
10、进一步地,步骤s1包括:
11、顺序读取comtrade配置文件,保留配置文件的原始字节序列以及数据文件类型、字节序和记录格式作为全局配置元数据;在配置文件的工作副本中解析采样率、模拟量通道的比例因子、偏移量、单位及一次值或二次值标识和开关量通道的正常状态逻辑值,建立包括通道索引、通道类型、名称及转换参数的通道映射表;
12、根据采样率与工频周期的对应关系确定数据块缓存长度,以边读边压方式分块读取comtrade数据文件;
13、根据所述通道映射表对数据块各采样点的模拟量和开关量进行解复用,保留模拟量原始码值形成模拟量原始码值矩阵,并按照比例因子和偏移量计算仅用于特征提取和阈值判断的工程单位值工作副本;保留开关量原始码字,同时根据所述通道映射表生成用于事件检测的逻辑状态工作副本;所述工程单位值工作副本和逻辑状态工作副本均不覆盖对应的原始码值或原始码字;
14、检测并标记模拟量越限、开关量异常瞬变及通道缺失情况,生成包括全局配置元数据引用、块起始时间戳、采样点数、采样率、样点序号和时间戳序列、模拟量原始码值矩阵、开关量原始码字及逻辑状态矩阵、异常标记位图和缺失通道信息的结构化数据块;其中异常采样点的原始码值保留在所述结构化数据块中,插值结果仅作为可选分析结果而不作为无损编码对象。
15、进一步地,步骤s2中,所述三相平衡度通过三相有效值中最大值与最小值之差相对于三相有效值平均值的比值计算得到,表达式为:
16、
17、
18、其中,表示三相平衡度;表示第k相在当前数据块内的有效值;
19、所述零序分量显著性通过数据块内零序分量能量与三相总能量的比值计算得到,表达式为:
20、
21、
22、其中,表示零序分量显著性;表示第n个采样点的零序分量;分别表示a相、b相和c相在第n个采样点的电压采样值或电流采样值;
23、所述暂态突变强度通过数据块内采样点的三相一阶差分绝对值的最大值与三相一阶差分绝对值平均值的比值计算得到,表达式为:
24、
25、
26、其中,表示暂态突变强度;表示第k相在第n个采样点的一阶差分;n表示采样点序号;l表示当前结构化数据块的采样点数。
27、进一步地,步骤s2中,根据特征指标及预设判据在直通模式、相间差分模式和整数可逆clarke变换模式中为数据块选择相应的去相关模式,具体包括:
28、按照暂态突变强度优先、三相平衡度或零序分量显著性次之的多级判据选择去相关模式,其中:当暂态突变强度高于高阈值时,选择直通模式;当暂态突变强度低于高阈值且三相平衡度高于对应阈值或零序分量显著性高于对应阈值时,选择相间差分模式,采用相邻两相采样值之差作为差分分量并保留第三相作为参考相;当上述条件均不满足时,选择整数可逆clarke变换模式,采用三相采样值的定点线性组合并进行向下取整的方式将三相静止坐标系变换到两相静止坐标系及零序分量;最后将所选去相关模式的模式标识以及逆变换所需的必要参数写入数据块头部。
29、进一步地,步骤s3中,根据波形平稳性和开关量事件确定数据块的预测帧长时,具体根据当前数据窗内的波形差分方差、过零密度和开关量事件标志在短帧和长帧之间动态选择预测帧长度;其中,当波形差分方差超过对应阈值、过零密度超过对应阈值或者检测到开关量事件时选择短帧,否则选择长帧;
30、根据各预测帧内数据特征和ftu终端算力自适应选择预测模型并生成模拟量预测残差,具体包括:
31、根据当前预测帧内模拟量数据的自相关特性和ftu终端可用算力选择线性预测模型的预测阶数并求解预测系数,对所述预测系数进行定点量化并计算预测残差;其中,通过去除帧内均值后的不同延迟采样值乘积之和得到所述自相关特性,并通过求解由所述自相关特性构成的yule-walker方程得到各阶预测系数,表达式为:
32、
33、
34、其中,表示延迟阶数为k的自相关系数,k表示自相关延迟阶数,表示当前预测帧内模拟量采样值的平均值,p表示根据所述自相关特性和ftu终端可用算力确定的预测阶数表示当前预测帧内第i个模拟量采样值;表示当前预测帧内第ik个模拟量采样值;表示当前预测帧长度;表示延迟阶数为mn的自相关系数;
35、对所述预测系数进行定点量化并计算预测残差包括:将所述预测系数按照定点数的小数位宽进行缩放取整,得到定点量化预测系数,并根据所述定点量化预测系数与当前采样点之前的历史模拟量采样值计算预测值,再以实际模拟量采样值与预测值之差作为模拟量预测残差;当模拟量预测残差绝对值的滑动均值超过残差阈值,或当前预测帧的压缩收益低于前序稳态预测帧压缩收益的预设倍数时,依次将预测模型退化为二阶差分预测、一阶差分预测和原样编码;其中,二阶差分预测、一阶差分预测和原样编码分别利用前两个模拟量采样值进行线性外推、利用前一个模拟量采样值作为预测值以及将预测值置零;
36、最后,输出每一预测帧对应的模拟量预测残差序列、预测帧长度、预测模式标识、定点量化预测系数和预测重置点位置。
37、进一步地,步骤s4包括:
38、对所述模拟量预测残差进行符号映射,将有符号的模拟量预测残差转换为非负整数,并计算符号映射后模拟量预测残差的零值密集度、方差和最大幅值;其中,所述符号映射采用模拟量预测残差绝对值的倍数与二值符号标识之间的差值表示,所述零值密集度通过绝对值小于预设零值判定阈值的模拟量预测残差样本数占当前预测帧或子帧内模拟量预测残差样本总数的比例计算得到,所述方差通过模拟量预测残差相对于残差均值的平方偏差平均值计算得到,所述最大幅值采用符号映射后非负整数的最大绝对值;
39、根据所述零值密集度和方差自适应确定rice编码参数,其中,所述rice编码参数采用符号映射后非负整数绝对值期望与以2为底的对数关系确定;
40、利用所述rice编码参数将符号映射后的非负整数分解为商和余数,其中,所述商为符号映射后的非负整数除以所得结果,所述余数为符号映射后的非负整数对取模的结果;所述商采用一元码编码,所述余数采用定长位二进制码编码;
41、对于超过预设阈值t的符号映射后非负整数,采用逃逸编码,其中,逃逸编码字宽采用当前预测帧或子帧内符号映射后非负整数的最大幅值所需的最小二进制位数;
42、对开关量事件对应的开关量状态序列进行游程编码,记录开关量状态值及连续长度,并将与开关量变位时刻时间距离最小的模拟量采样点确定为对应的模拟量采样点,以将开关量变位事件与模拟量采样时间序列进行时间对齐;
43、根据开关量变位时刻与模拟量预测窗口之间的位置关系控制模拟量预测模型,其中,所述模拟量预测窗口通过当前预测处理时刻与预测历史长度确定,并在开关量变位时刻位于模拟量预测窗口内时,执行终止当前预测子帧并开始新的预测子帧、清空或重置模拟量预测模型的历史缓冲区、降低预测阶数或者增大rice编码参数中的至少一种操作;
44、将rice编码结果和逃逸编码结果形成模拟量残差码流,将开关量游程编码结果以及开关量变位时刻对应的模拟量采样点索引、边沿方向和持续时间形成开关量事件码流;将帧标识、时间窗口起点、采样点数、预测子帧边界、预测重置标志、去相关模式、预测模式、预测阶数、定点量化预测系数、rice参数、各通道初始原始码值、各码流长度和帧级crc与所述模拟量残差码流、开关量事件码流和异常标记码流共同组织为独立压缩帧,使解码该独立压缩帧时不需要引用前一压缩帧的预测状态或编码参数。
45、进一步地,所述符号映射的表达式为:
46、
47、
48、其中,表示第t个模拟量采样点的模拟量预测残差,表示第t个模拟量采样点的实际采样值,表示第t个模拟量采样点的预测值,表示对模拟量预测残差进行符号映射后得到的非负整数,表示二值符号函数;
49、所述rice编码参数的表达式为:
50、
51、其中,表示rice编码参数,表示符号映射后非负整数绝对值的期望,并根据所述模拟量预测残差方差进行估算,表示向下取整;
52、将与开关量变位时刻时间距离最小的模拟量采样点确定为对应的模拟量采样点时,具体将开关量变位时刻映射到最近的模拟量采样点索引,表达式为:
53、
54、其中,表示第i个模拟量采样点的采样时刻,表示开关量变位时刻,表示与开关量变位时刻对应的模拟量采样点索引。
55、进一步地,步骤s5包括:
56、将与各时间窗口对应的独立压缩帧分别作为一个fec组的唯一源对象;
57、针对第i个独立压缩帧cfi,在帧尾填充预定填充值后分割为ki个等长源分片,并采用系统rs(ni,ki)编码生成ni-ki个等长校验分片,使所述独立压缩帧cfi与fec组gi一一对应;
58、将每个源分片或校验分片分别封装为一个传输分片,所述传输分片的固定头部至少包括同步字、全局录波任务标识、fec组标识、独立压缩帧标识、ni、ki、组内分片序号、源分片或校验分片标识、分片长度、独立压缩帧实际长度、绝对时间戳、重传标记、分片crc和帧级crc;
59、根据信噪比、误码率和剩余可见时间的加权结果确定低轨卫星链路的链路质量因子,再根据传输分片的业务优先级、分片序号以及链路质量需求与当前链路质量因子比值的加权结果确定传输优先级,并按照所述传输优先级由高至低发送各传输分片。
60、进一步地,所述链路质量因子的计算表达式为:
61、
62、其中,为链路质量因子,为归一化信噪比,为归一化误码率,为归一化剩余可见时间,、和分别为权重系数;
63、所述传输优先级的计算表达式为:
64、
65、其中,为传输分片的传输优先级,为业务优先级,为传输分片的链路质量需求,为当前分片序号,为总传输分片数,为当前链路质量因子,、和分别为权重系数。
66、一种故障录波文件压缩与低轨卫星抗丢包传输系统,包括相互连接的微处理器和存储器,所述微处理器被编程或配置以执行故障录波文件压缩与低轨卫星抗丢包传输方法的步骤。
67、与现有技术相比,本发明的优点在于:
68、本发明通过流式解析故障录波文件并生成结构化数据块,无需完整加载文件,同时将原始配置元数据、模拟量原始码值、开关量原始状态及样点时间对应关系确定为无损对象,使工程量换算和特征计算不改变待恢复的原始数据;依据三相平衡度、零序分量显著性及暂态突变强度选择去相关模式,可适应不同故障工况并减少数据冗余;以工频周期为基准动态确定预测帧长,并结合帧内特征和终端算力选择预测模型,可兼顾压缩效率与暂态波形保真度;通过模拟量预测残差与开关量事件协同编码,并在每个独立压缩帧中写入完整的重启状态,可保持两类数据的时序一致性并避免跨帧误差扩散;通过使独立压缩帧与fec组一一对应,并在获得同组任意k个有效分片后恢复和独立解码该帧,可提高弱链路下关键数据的可靠性和流式可用性;通过按fec组进行选择性重传,可减少重复传输。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com