内核多域协同诊断方法、系统、终端及存储介质与流程

摘要: 本发明涉及内核诊断,尤其涉及一种内核多域协同诊断方法、系统、终端及计算机可读存储介质。背景技术:1、硬件为多核smp系统(multi-coresymmetric...
内核多域协同诊断方法、系统、终端及存储介质与流程

本发明涉及内核诊断,尤其涉及一种内核多域协同诊断方法、系统、终端及计算机可读存储介质。

背景技术:

1、硬件为多核smp系统(multi-core symmetric multiprocessing system),可通过per-cpu变量降低采集路径中的锁竞争。技术栈包括分析器注册表调度的周期性flush_window任务、预分配内存、运行期黑匣子结构以及可由目标内核提供后端实现的pstore兼容弱接口。

2、硬件为多核smp系统,需通过per-cpu(每cpu)变量避免锁竞争,依赖smp_load_acquire(获取语义的加载操作)、smp_store_release(释放语义的存储操作)保证跨核可见性。技术栈包括内核workqueue(由分析器flush_window按约1秒周期更新黑匣子健康摘要,并在panic notifier(panic 通知器,即内核崩溃通知器)中执行最后一次更新)、pstore(黑匣子)持久化存储、预分配内存池以及时间窗口管理器(为规则提供滑动计数)。

3、然而,内核关键路径(调度、内存、块io、网络、中断)在长时间运行中,各子系统异常无法实时、自主、低开销地检测,且异常模式间存在关联(如内存压力引发调度饥饿)却缺乏跨域交叉验证的问题;同时解决系统panic(内核恐慌)时,现有日志机制(如printk,内核打印)因上下文受限无法输出完整诊断上下文,导致事后难以回溯崩溃前最后一刻各域状态的痛点。

4、因此,现有技术还有待于改进和发展。

技术实现思路

1、本发明的主要目的在于提供一种内核多域协同诊断方法、系统、终端及计算机可读存储介质,旨在解决现有技术中子系统异常无法实时、自主、低开销地检测,且异常模式间存在关联却缺乏跨域交叉验证,以及上下文受限无法输出完整诊断上下文,导致事后难以回溯崩溃前最后一刻各域状态的问题。

2、为实现上述目的,本发明提供一种内核多域协同诊断方法,所述内核多域协同诊断方法包括如下步骤:

3、针对多个观测域,将域分析器的通用基类结构置于私有结构体首字段,并将所述域分析器登记到全局分析器注册表,得到对应的唯一序号,启动各域分析器的分析流程,并通过域分析器公共状态结构记录运行状态、累计计数和健康信息;

4、当域分析器接收到标准化内核观测事件时获取对应实时指标值,根据该域配置的规则或量化阈值进行分析,若所述实时指标值满足相应异常条件,则判定分析结果命中异常模式,则构建结构化证据,并保留严重程度评分和可信度评分;

5、针对当前域分析器,通过统一只读接口获取其他域分析器的固定大小上下文副本,根据所述上下文副本的有效性和时效性修正结构化证据的置信度;

6、由分析器注册表调度panic域分析器的周期性刷新任务,并通过各域分析器的健康导出接口获取当前健康快照,构建固定大小的运行期黑匣子结构,并预定义裁决摘要槽位、证据摘要槽位和自健康快照字段,将域健康信息聚合为自健康快照,并将有效裁决摘要和证据摘要写入对应固定槽位;

7、当内核发生panic时,从运行期黑匣子读取当前快照,在预分配缓冲区中封装所述快照、域健康信息和panic上下文,计算完整性校验值,并调用pstore兼容写接口输出二进制记录。

8、可选地,所述的内核多域协同诊断方法,其中,针对多个观测域,将域分析器的通用基类结构置于私有结构体首字段,并将所述域分析器登记到全局分析器注册表,得到对应的唯一序号,启动各域分析器的分析流程,并通过域分析器公共状态结构记录运行状态、累计计数和健康信息,之后还包括:

9、针对具有规则判定能力的域分析器,根据对应观测指标配置静态阈值、动态基线或突变检测参数中的至少一种;

10、其中,所述动态基线基于历史观测数据计算,所述突变检测参数包括单次突变倍数和/或持续采样周期数。

11、可选地,所述的内核多域协同诊断方法,其中,所述当监测到内核观测事件时,由构建结构化证据,并保留严重程度评分和可信度评分,具体包括:

12、若判定分析结果命中异常模式,则将异常类型标识、严重程度评分、可信度评分、内核对象标识和检测时间戳封装到异常信号中;

13、利用证据发射器将异常信号转换为结构化证据,并保留严重程度评分和可信度评分;

14、其中,所述标准化内核观测事件为经内核探针采集并格式化后的观测事件,携带事件类型和观测对象标识;

15、所述实时指标值包括cpu指标、内存指标、i/o指标、网络指标、锁竞争指标和调度指标中的至少一种;

16、和/或,当实时指标值超过静态阈值、偏离动态基线超过设定比例或满足突变检测参数时,判定分析结果命中异常模式。

17、可选地,所述的内核多域协同诊断方法,其中,所述针对当前域分析器,通过统一只读接口获取其他域分析器的固定大小上下文副本,根据所述上下文副本的有效性和时效性修正结构化证据的置信度,具体包括:

18、针对当前的第一域分析器,获取评估所述第一域分析器的第一结构化证据的所有关键运行指标,打包所有所述关键运行指标得到第一跨域上下文快照;

19、当第二域分析器评估第二结构化证据时,根据所述第一域分析器的唯一序号从所述全局分析器注册表中查找所述第一域分析器,所述第二域分析器调用所述第一域分析器的上下文获取接口,以获取所述第一跨域上下文快照;

20、当所述第二域分析器获取所述第一跨域上下文快照时,根据所述可信度评分判断所述第一跨域上下文快照的有效结果,并根据所述检测时间戳判断所述第一跨域上下文快照的可靠结果;

21、根据所述有效结果和所述可靠结果修正第二结构化证据的置信度,并将附带所述置信度的第二结构化证据发送到数据路由层。

22、可选地,所述的内核多域协同诊断方法,其中,所述将域健康信息聚合为自健康快照,并将有效裁决摘要和证据摘要写入对应固定槽位,具体包括:

23、从各域分析器的分析结果中提取满足异常条件的裁决摘要和结构化证据摘要;

24、按照时间戳和/或严重程度评分选择有效裁决摘要和证据摘要;

25、将各域分析器的运行状态、累计计数和健康信息聚合为自健康快照;

26、将更新后的运行期黑匣子结构保存在内核静态内存中,供panic回调和现有诊断查询接口读取。

27、可选地,所述的内核多域协同诊断方法,其中,所述当内核发生panic时,从运行期黑匣子读取当前快照,具体包括:

28、当内核发生panic时,调用预先注册的panic通知回调函数,并读取运行期黑匣子中当前活动索引所指向的快照;

29、将所述快照、预缓存域健康信息、panic时间戳及panic上下文复制到预分配输出缓冲区;

30、根据输出缓冲区有效载荷计算完整性校验值,并将所述完整性校验值写入二进制记录;

31、调用pstore兼容写接口输出二进制记录;其中,所述接口允许由目标内核提供具体后端实现;

32、在未提供持久化后端实现时,所述二进制记录不保证系统重启后的数据保留或恢复。

33、可选地,所述的内核多域协同诊断方法,其中,所述在预分配缓冲区中封装所述快照、域健康信息和panic上下文,计算完整性校验值,并调用pstore兼容写接口输出二进制记录,具体包括:

34、将panic发生时刻和panic原因写入预分配输出缓冲区的对应字段;

35、将运行期黑匣子快照和预缓存域健康信息复制到预分配输出缓冲区,并计算覆盖二进制记录有效载荷的完整性校验值。

36、此外,为实现上述目的,本发明还提供一种内核多域协同诊断系统,其中,所述内核多域协同诊断系统包括:

37、动态诊断模块,用于针对多个观测域,将域分析器的通用基类结构置于私有结构体首字段,并将所述域分析器登记到全局分析器注册表,得到对应的唯一序号,启动各域分析器的分析流程,并通过域分析器公共状态结构记录运行状态、累计计数和健康信息;

38、证据构建模块,用于当域分析器接收到标准化内核观测事件时获取对应实时指标值,根据该域配置的规则或量化阈值进行分析,若所述实时指标值满足相应异常条件,则判定分析结果命中异常模式,则构建结构化证据,并保留严重程度评分和可信度评分;

39、交叉验证模块,用于针对当前域分析器,通过统一只读接口获取其他域分析器的固定大小上下文副本,根据所述上下文副本的有效性和时效性修正结构化证据的置信度;

40、黑匣子更新模块,用于由分析器注册表调度panic域分析器的周期性刷新任务,并通过各域分析器的健康导出接口获取当前健康快照,构建固定大小的运行期黑匣子结构,并预定义裁决摘要槽位、证据摘要槽位和自健康快照字段,将域健康信息聚合为自健康快照,并将有效裁决摘要和证据摘要写入对应固定槽位;

41、崩溃快照输出模块,用于当内核发生panic时,从运行期黑匣子读取当前快照,在预分配缓冲区中封装所述快照、域健康信息和panic上下文,计算完整性校验值,并调用pstore兼容写接口输出二进制记录。

42、此外,为实现上述目的,本发明还提供一种终端,其中,所述终端包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的内核多域协同诊断程序,所述内核多域协同诊断程序被所述处理器执行时实现如上所述的内核多域协同诊断方法的步骤。

43、此外,为实现上述目的,本发明还提供一种计算机可读存储介质,其中,所述计算机可读存储介质存储有内核多域协同诊断程序,所述内核多域协同诊断程序被处理器执行时实现如上所述的内核多域协同诊断方法的步骤。

44、本发明中,挂载对应的私有规则库,并为每个所述私有规则库中的所有异常模式构建多个量化标尺;基于所有所述量化标尺,当监测到内核观测事件,在所有所述私有规则库中对所述内核观测事件进行分析,若判断所述内核观测事件命中,则将所述内核观测事件封装到异常信号中,并利用证据发射器将所述异常信号转换为结构化证据;针对当前所述域分析器,根据所述结构化证据构建跨域上下文快照,并将所述跨域上下文快照与其他所述域分析器的跨域上下文快照进行对比,根据对比结果构建所述结构化证据的置信度;利用工作者线程将每个所述域分析器的当前健康快照和对应的所述结构化证据封装到二进制结构体中,并将所述二进制结构体存储到内核预定义的静态内存区域。