一种无版本二进制日志构建字典判定及解码方法与流程

摘要: 本发明涉及嵌入式设备运行数据采集与故障诊断领域,具体涉及一种在二进制日志缺少可靠固件构建标识、且记录头不含记录总长度时,从多个候选固件日志字典中自动确定适用字典...
一种无版本二进制日志构建字典判定及解码方法与流程

本发明涉及嵌入式设备运行数据采集与故障诊断领域,具体涉及一种在二进制日志缺少可靠固件构建标识、且记录头不含记录总长度时,从多个候选固件日志字典中自动确定适用字典并恢复记录边界的方法。本发明可部署于工业控制器、车载控制器、通信设备、机器人控制器、边缘网关或其离线维护终端,用于从flash、串行接口、共享内存或网络抓取的紧凑二进制日志中恢复可验证的参数值。

背景技术:

1、为减少嵌入式设备的存储和传输开销,设备端通常不写入完整格式字符串,而只写入消息号、时间或序号以及经二进制编码的实参字节;维护端依赖与固件构建对应的外部字典,把消息号还原为格式串和实参类型。

2、同一产品长期运行时可能经历多次固件升级,不同构建会复用同一消息号,并改变参数数量、整数宽度、指针宽度、对齐规则或端序。设备构建号可能未被写入日志、已损坏,或者环形flash中只保留了不完整日志片段。此时,使用错误字典不仅会解释出错误参数,还会因实参消费长度错误而把后续载荷字节误认为记录头,造成持续错位。

3、现有方案通常要求人工指定字典、依赖明确版本号、按记录总长度跳转,或者从任意同步字位置重新扫描。上述方法无法利用候选字典本身所决定的字节消费量,对候选构建进行连续、可验证的边界闭合。

技术实现思路

1、本发明拟解决的技术问题是:在不修改设备端日志格式、不依赖可靠构建号且记录头不提供记录总长度的条件下,如何利用各候选构建的实参类型和abi消费规则,确定下一记录头的唯一物理位置,并通过连续多个记录头的独立校验确认适用字典,从而避免错误字典造成的参数误解和跨记录错位传播。

2、为解决上述技术问题,本发明提供如下技术方案。

3、在所述方法中,第1项处理为:取得嵌入式设备生成的二进制日志;每一记录含固定头和实参载荷,记录头不含构建标识、字典哈希、载荷长度或记录总长度,并含同步字、消息号、32位无符号序号字段和头部crc。

4、在所述方法中,第2项处理为:针对多个候选固件构建,根据消息号对应的格式说明符序列、c可变参数默认提升规则以及该构建实际日志封装器采用的存储类别宽度、指针宽度、参数间填充、尾部对齐和端序,生成对应的有序实参消费指令序列。

5、在所述方法中,第3项处理为:从同一头校验有效位置开始,按各候选的消费指令序列消费当前记录实参,并把消费终点确定为该候选预测的下一记录头位置。

6、在所述方法中,第4项处理为:在预测位置联合验证同步字、头部crc、下一消息号属于同一候选构建字典以及下一记录序号等于当前记录序号加一后对232取模;验证通过后继续以同一候选消费下一记录,形成连续k次边界闭合链,其中k不小于4。

7、在所述方法中,第5项处理为:确认闭合窗口中存在至少一条判别记录:该记录的消息号同时存在于至少两个候选构建字典,且所述候选按各自日志封装abi计算出的实参载荷消费跨度不同;若不存在判别记录则保持未决。

8、在所述方法中,第6项处理为:将在同一闭合起点满足连续k次边界闭合的候选构建字典加入可确认候选集合;仅在验证窗口存在判别记录且可确认候选集合中候选构建字典的数量为一个时,确定该候选构建字典;在唯一候选构建字典被确定后,从所述闭合起点回溯验证所述验证窗口内各日志记录的实参消费终点、预测的下一记录头位置、同步字和头部crc,并仅对回溯验证通过的日志记录进行语义解码和参数输出。

9、在所述方法中,第7项处理为:记录损坏或闭合中断时停止沿当前偏移解码,从后续头校验有效位置重新执行候选闭合。

10、本发明还提供一种与前述方法相对应的系统,所述系统中的各功能模块按照前述处理顺序传递中间结果并共同完成所述方法。

11、所述日志读取模块被配置为:从flash页、uart原始抓取文件、共享内存或网络缓冲区取得保留物理字节顺序的二进制日志。

12、所述字典编译模块被配置为:将每个候选构建的格式说明符、默认实参提升规则和设备端日志封装器实际采用的宽度、填充、对齐及端序编译为实参消费指令序列。

13、所述候选消费模块被配置为:从同一头有效位置并行或分批执行各候选消费指令,计算下一记录头预测位置。

14、所述连续闭合模块被配置为:在每一候选预测的下一记录头位置联合验证同步字、头部crc、下一消息号存在于同一候选字典以及相邻记录的32位无符号序号按232模递增1,并沿同一候选继续形成k次闭合链。

15、所述唯一性仲裁模块被配置为:将从同一闭合起点连续形成k次闭合链的候选字典加入可确认候选集合,并确定验证窗口中是否存在至少一条判别记录;仅在存在判别记录且所述集合中候选唯一时确认字典,其余情况标记为未决。

16、所述解码与重同步模块被配置为:确认唯一字典后,从闭合起点回溯验证验证窗口内各记录的实参消费终点、预测的下一记录头位置、同步字和头部crc,仅对回溯验证通过的记录输出解码参数;记录损坏时停止沿当前偏移输出,并从后续头校验有效位置重新启动候选闭合。

17、本发明还提供一种电子设备,所述电子设备包括处理器、存储器和必要的接口,所述存储器中存储有计算机程序,所述计算机程序被所述处理器执行时实现前述方法。

18、本发明还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时实现前述方法。

19、在一种可选实施方式中,消费指令支持有界长度前缀数组、重复读取、记录尾对齐和所有乘加的整数溢出检查。

20、在一种可选实施方式中,头有效函数除同步字和头crc外还验证消息号范围、记录类型及序号编码范围。

21、在一种可选实施方式中,k取4或5。

22、在一种可选实施方式中,受控变长实参的长度前缀具有预设上界,越界候选立即退出。

23、在唯一候选构建字典被确定后,从闭合起点回溯验证验证窗口内各日志记录的实参消费终点、预测的下一记录头位置、同步字和头部crc,并仅对回溯验证通过的日志记录输出解码参数。

24、在一种可选实施方式中,多候选同时达到k次闭合时先保持对应区间为未决且不输出确定语义,再扩展闭合次数至kmax;仅在扩展后候选唯一且验证窗口仍存在判别记录时确定字典,达到kmax仍不唯一时保持未决。

25、在一种可选实施方式中,字典作用域限定为一个物理flash页、擦写单元或采集文件段。

26、在一种可选实施方式中,损坏后的同步字扫描窗口不超过一个预设物理页或最大字节数。

27、在一种可选实施方式中,当两个候选始终闭合时,可选地以记录中的调用点地址和候选固件映像中的日志调用指令作为消歧见证。

28、有益效果

29、把候选固件构建差异转化为可测量的物理字节边界差异,使字典确认不依赖人工版本信息。

30、连续多个头crc闭合显著降低载荷偶然包含同步字造成的错误字典接受风险。

31、错误字典在第一次预测头失败时即退出,避免参数长度错误向后连续传播。

32、唯一候选门和未决输出阻止系统在证据不足时强制给出错误诊断。

33、无需修改设备端既有日志格式,可部署在离线维护端或边缘网关。

34、通过物理页或采集段限定字典作用域,为环形flash和升级场景提供可实施的重同步边界。