一种内存泄漏处理方法、系统、设备及计算机存储介质与流程

摘要: 本技术涉及计算机内存管理,更具体地说,涉及一种内存泄漏处理方法、系统、设备及计算机存储介质。背景技术:1、在服务器端长连接服务场景中,需要同时维持大量客户端连接...
一种内存泄漏处理方法、系统、设备及计算机存储介质与流程

本技术涉及计算机内存管理,更具体地说,涉及一种内存泄漏处理方法、系统、设备及计算机存储介质。

背景技术:

1、在服务器端长连接服务场景中,需要同时维持大量客户端连接,每个连接在其生命周期内会持续占用内存资源。由于业务逻辑复杂度增加或第三方组件缺陷,连接关闭后其关联的内存资源可能未能完全释放,从而产生内存泄漏。内存泄漏具有隐蔽性和累积性,随着时间推移,可用内存持续减少,最终导致服务不可用。

2、当前,针对服务器端内存泄漏的处置方案是基于全局内存监控的阈值告警方案,即设置全局内存使用率上限,当内存使用量触及告警阈值时通知运维人员介入处理。

3、然而,上述方案中,仅在内存占用触及阈值后才被动告警,告警后仅依赖人工介入导致响应滞后,无法区分内存增长的不同严重程度,且无法合理控制内存占用回落,导致服务恢复存在风险。

4、综上所述,如何提高内存恢复的准确性和稳定性是目前本领域技术人员亟待解决的问题。

技术实现思路

1、本技术的目的是提供一种内存泄漏处理方法,其能在一定程度上解决如何提高内存恢复的准确性和稳定性的技术问题。本技术还提供了。

2、为了实现上述目的,本技术提供如下技术方案:

3、一种内存泄漏处理方法,包括:

4、获取全局内存指标;

5、根据所述全局内存指标与预设的内存基准值,确定内存增长率;

6、响应于所述内存增长率大于第一阈值且持续时长大于第一时长,则在设定的候选处置阶段之间进行阶段升级,所述候选处置阶段包括正常运行阶段和熔断阶段;

7、响应于所述内存增长率小于第二阈值且持续时长大于第二时长,则在所述候选处置阶段之间进行阶段降级;

8、对内存的当前阶段进行检测,若为所述熔断阶段,则创建探测连接;

9、根据所述探测连接的存活状态以及所述全局内存指标的回落后状态,确定是否退出所述熔断阶段;

10、其中,对于同一所述候选处置阶段,所述第一阈值大于所述第二阈值,和/或,所述第一时长小于所述第二时长。

11、优选的,所述候选处置阶段还包括清理阶段,所述对内存的当前阶段进行检测之后,还包括:

12、对于内存的每个目标连接,根据目标连接的标记筛选出可疑泄漏连接;

13、响应于内存的当前阶段为所述清理阶段,则筛选出闲置连接中的可疑泄漏连接作为候选连接,按预设单次上限比例关闭候选连接;

14、响应于内存的当前阶段为所述熔断阶段,暂停接收新的连接并强制关闭所有可疑泄漏连接。

15、优选的,所述对于内存的每个目标连接,根据目标连接的标记筛选出可疑泄漏连接之前,还包括:

16、在目标连接创建时,测量目标连接的堆内内存增量与堆外内存增量,并记入目标连接的内存账单作为初始记账值;

17、在目标连接存活期间,测量目标连接关联的堆内内存与堆外内存占用,更新记录内存占用峰值作为理论释放基准;

18、在目标连接关闭时,测量目标连接关联的堆内内存与堆外内存的实际释放量;

19、生成所述理论释放基准与所述实际释放量的第一差值,根据所述第一差值占所述理论释放基准的比率生成目标连接的内存泄漏嫌疑度;

20、响应于连续设定次数内,所述内存泄漏嫌疑度超过预设嫌疑阈值,则将目标连接标记为可疑泄漏连接。

21、优选的,所述测量目标连接关联的堆内内存与堆外内存的实际释放量,包括:

22、响应于检测到目标连接的关闭事件,判断目标连接是否采用池化内存管理模式;

23、响应于目标连接未采用池化内存管理模式,则测量全局堆内内存与堆外内存的差值作为实际释放量;

24、响应于目标连接采用池化内存管理模式,则拦截目标连接的销毁动作,获取关联缓冲区的引用计数值,将引用计数未归零的缓冲区对应的池化容量累加作为未释放量,根据所述理论释放基准与所述未释放量的第二差值生成实际释放量。

25、优选的,所述根据所述全局内存指标与预设的内存基准值,确定内存增长率之前,还包括:

26、在设定的预热期,以预设高频采集全局内存数据;

27、对于全局内存数据,通过截尾均值算法剔除极值后取均值,生成内存基准值的初始值;

28、在运行期间,响应于全局内存使用率大于安全阈值且持续时长大于观察窗口,计算当前内存均值相对于初始的所述内存基准值的漂移率;

29、响应于所述漂移率小于或等于预设容忍阈值,通过带时间衰减权重的滑动平均算法平滑更新所述内存基准值的当前值;

30、响应于所述漂移率大于所述预设容忍阈值,拒绝更新所述内存基准值的当前值,锁定所述内存基准值的当前值并触发越级告警;

31、生成所述内存基准值的当前值与初始值的第三差值;

32、响应于所述第三差值大于或等于预设的基准漂移上限,则停止所述内存基准值的更新操作。

33、优选的,所述根据所述探测连接的存活状态以及所述全局内存指标的回落后状态,确定是否退出所述熔断阶段,包括:

34、以指数递增的退避时间间隔放行所述探测连接;

35、监测所述探测连接的存活状态以及所述探测连接存活期间的内存增长率;

36、响应于所述探测连接存活预设验证时长,且所述探测连接的内存增长率小于或等于预设恢复阈值,判定内存恢复,退出所述熔断阶段;

37、响应于所述探测连接未存活预设验证时长,和/或所述探测连接的内存增长率大于预设恢复阈值,则将退避时间间隔按指数倍数递增,并累计连续探测失败次数;

38、响应于所述连续探测失败次数未达到预设兜底次数,返回执行以指数递增的退避时间间隔放行所述探测连接的步骤;

39、响应于所述连续探测失败次数达到预设兜底次数,停止自动探测并发送告警通知转入人工干预。

40、优选的,所述获取全局内存指标,包括:

41、按照预设采样频率采集全局内存数据,所述全局内存数据包括堆内内存与堆外内存;

42、获取连续两次采样的内存变化方向;

43、响应于连续两次采样的内存变化方向相反,则判定为垃圾回收干扰噪声并丢弃本次采样的全局内存数据;

44、响应于连续两次采样的内存变化方向相同,则将本次采样的全局内存数据作为有效趋势数据;

45、采用滑动窗口对过去预设次数的所述有效趋势数据取均值,得到当前有效内存值;

46、将所述当前有效内存值作为全局内存指标。

47、一种内存泄漏处理系统,包括:

48、指标获取模块,用于获取全局内存指标;

49、增长率确定模块,用于根据所述全局内存指标与预设的内存基准值,确定内存增长率;

50、阶段升级模块,用于响应于所述内存增长率大于第一阈值且持续时长大于第一时长,则在设定的候选处置阶段之间进行阶段升级,所述候选处置阶段包括正常运行阶段和熔断阶段;

51、阶段降级模块,用于响应于所述内存增长率小于第二阈值且持续时长大于第二时长,则在所述候选处置阶段之间进行阶段降级;

52、阶段检测模块,用于对内存的当前阶段进行检测,若为所述熔断阶段,则创建探测连接;

53、退出判定模块,用于根据所述探测连接的存活状态以及所述全局内存指标的回落后状态,确定是否退出所述熔断阶段;

54、其中,对于同一所述候选处置阶段,所述第一阈值大于所述第二阈值,和/或,所述第一时长小于所述第二时长。

55、一种电子设备,包括:

56、存储器,用于存储计算机程序;

57、处理器,用于执行所述计算机程序时实现如上任一所述内存泄漏处理方法的步骤。

58、一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时实现如上任一所述内存泄漏处理方法的步骤。

59、本技术提供的一种内存泄漏处理方法,获取全局内存指标;根据全局内存指标与预设的内存基准值,确定内存增长率;响应于内存增长率大于第一阈值且持续时长大于第一时长,则在设定的候选处置阶段之间进行阶段升级,候选处置阶段包括正常运行阶段和熔断阶段;响应于内存增长率小于第二阈值且持续时长大于第二时长,则在候选处置阶段之间进行阶段降级;对内存的当前阶段进行检测,若为熔断阶段,则创建探测连接;根据探测连接的存活状态以及全局内存指标的回落后状态,确定是否退出熔断阶段;其中,对于同一候选处置阶段,第一阈值大于第二阈值,和/或,第一时长小于第二时长。本技术中,通过获取全局内存指标并根据全局内存指标与内存基准值确定内存增长率,实现了对内存泄漏趋势的定量感知;且通过设定包含正常运行阶段和熔断阶段的候选处置阶段,并响应于内存增长率大于第一阈值且持续时长大于第一时长进行阶段升级、响应于内存增长率小于第二阈值且持续时长大于第二时长进行阶段降级,实现了依据内存增长率的严重程度进行分阶段渐进式自动处置,避免服务突然中断;在此基础上,通过设置第一阈值大于第二阈值和/或第一时长小于第二时长的迟滞机制,使得阶段升级和阶段降级之间存在不对称阈值区间,防止在临界状态下阶段频繁切换,提高了内存的恢复稳定性;且通过对熔断阶段创建探测连接,并根据探测连接的存活状态以及全局内存指标的回落后状态确定是否退出熔断阶段,实现了在确认内存真实恢复后才退出熔断阶段,提高了内存的恢复准确性。本技术提供的一种内存泄漏处理系统、电子设备及计算机可读存储介质也解决了相应技术问题。