面向大容量QLC固态硬盘的动态SLC缓存分区调控方法和系统与流程
本发明涉及数据存储,更具体地,涉及一种面向大容量qlc固态硬盘的动态slc缓存分区调控方法和系统。
背景技术:
1、在企业级固态盘里,qlc和slc指的是nand闪存不同的存储密度模式,即每个物理存储单元(cell)里存储多少比特的数据。qlc(quad-level cell,四阶存储单元)是指每个物理单元里存储4比特数据,slc(single-level cell,单阶存储单元)是指每个物理单元里存储1比特数据。
2、随着大数据、人工智能及企业级应用对存储容量和性能需求的持续攀升,qlc闪存因其高存储密度和低成本优势,正逐步成为大容量固态硬盘的主流存储介质。然而,qlc闪存固有的写入速度慢、编程延迟高及擦写寿命短等物理特性,使其难以直接满足高性能写入场景的需求,因此,当前大容量qlc固态硬盘普遍采用将部分qlc物理块配置为slc缓存区的策略,利用slc缓存吸收突发写入流量以提升用户体验。然而,现有技术中该slc缓存区的大小通常在固态硬盘出厂时即被固定为某一预设比例,在固态硬盘的整个生命周期内始终保持不变,这种静态分区方案存在严重的适应性缺陷。
3、首先,在持续大流量顺序写入的应用场景下,固定大小的slc缓存区极易被写满,一旦缓存耗尽,后续写入操作被迫绕过缓存直接进入qlc主存储池,即陷入“缓外直写”状态,写入性能发生断崖式暴跌,严重影响了固态硬盘在高负载下的性能一致性。其次,在轻负载或空闲状态下,过大的slc缓存区仍然占据着本可用于扩展qlc存储容量的物理块,导致用户实际可用的存储空间显著减少,造成大容量存储资源的严重浪费。然后,现有的固定分区方案无法识别写入流的数据特征,无论是突发小数据包还是顺序大数据流均统一经由slc缓存处理,导致大数据流污染缓存空间,降低了缓存资源的有效利用率。最后,现有方案缺乏对缓存池占用水位的动态响应能力,无法根据实时负载压力进行分区边界的自适应调整,亦缺乏基于调整后状态的闭环修正机制,难以兼顾突发写入性能、稳态吞吐量和存储容量三者之间的平衡。
4、因此,亟需一种能够根据系统实时运行状态动态调整slc缓存分区大小的智能调控方法。
技术实现思路
1、鉴于上述问题,本发明的目的在于提供一种面向大容量qlc固态硬盘的动态slc缓存分区调控方法和系统,过依次执行采集、对比、决策、执行和修正的闭环调控流程,实现slc缓存池大小的自适应按需变化,兼顾写入性能与存储容量的动态平衡。
2、本发明第一方面提供了一种面向大容量qlc固态硬盘的动态slc缓存分区调控方法,所述方法包括:
3、按照预设比例将qlc物理块划分为动态slc缓存池和qlc主存储池,并建立初始映射表;
4、以固定时间窗口持续采集目标参数集,所述目标参数集至少包括写入请求频率、平均单次写入数据量、slc缓存池的实时占用水位以及qlc主存储池的闲置物理块数量;
5、将所述目标参数集与预设的多层阈值矩阵对比,得到请求频率状态、水位状态和写入量状态;
6、根据所述频率状态、水位状态和写入量状态的逻辑组合结果,生成对应的调控指令,所述调控指令至少包括扩容指令、缩容指令或旁路指令中的一种;
7、根据所述调控指令,执行动态分区边界调整,更新所述映射表,或将当前写入数据流直接写入所述qlc主存储池;
8、动态分区调整执行完毕后,根据调整后的新分区容量修正所述多层阈值矩阵,并返回目标参数集采集步骤。
9、本方案中,所述将所述目标参数集与预设的多层阈值矩阵对比,具体包括:
10、将所述写入请求频率与预设的轻载阈值和重载阈值进行第一层级对比;
11、当所述写入请求频率低于所述轻载阈值时,判定当前系统处于空闲态;
12、当所述写入请求频率介于所述轻载阈值与所述重载阈值之间时,判定当前系统处于均衡态;
13、当所述写入请求频率高于所述重载阈值时,判定当前系统处于高压态;
14、将所述实时占用水位与预设的扩容触发水位线和缩容触发水位线进行第二层级对比,得到水位状态;
15、将所述平均单次写入数据量与预设的直写阈值进行第三层级对比,当所述平均单次写入数据量超过所述直写阈值时,判定当前写入流为顺序大数据流,否则判定为突发小数据包。
16、本方案中,所述根据所述频率状态、水位状态和写入量状态的逻辑组合结果,生成对应的调控指令,具体包括:
17、当所述频率状态为高压态、所述水位状态为占用水位超过所述扩容触发水位线、且所述写入量状态为突发小数据包时,生成所述扩容指令;
18、当所述频率状态为空闲态、且所述水位状态为占用水位低于所述缩容触发水位线时,生成所述缩容指令;
19、当所述频率状态为均衡态、且所述写入量状态为顺序大数据流时,生成所述旁路指令。
20、本方案中,所述根据所述调控指令,执行动态分区边界调整,更新所述映射表,具体包括:
21、当所述调控指令为所述扩容指令时,从所述qlc主存储池中选取处于空闲状态的物理块;
22、将所述物理块的逻辑属性重新配置为slc缓存块,并更新所述映射表,完成所述动态slc缓存池的边界外延;
23、当所述调控指令为所述缩容指令时,将当前所述动态slc缓存池中已被占用且数据热度低于预设热度阈值的slc缓存块执行下刷操作;
24、将有效数据搬移至所述qlc主存储池,待所述slc缓存块释放后,将所述slc缓存块的逻辑属性切换为qlc存储块,并更新所述映射表。
25、本方案中,所述将当前写入数据流直接写入所述qlc主存储池,具体包括:
26、当所述调控指令为所述旁路指令时,拦截当前待写入的数据流,并查询当前所述qlc主存储池中处于空闲状态的物理块地址;
27、将所述数据流中的写入数据旁路绕过所述动态slc缓存池,直接写入所述qlc主存储池的空闲状态物理块;
28、保持所述动态slc缓存池的当前边界不变,不触发分区大小调整。
29、本方案中,所述根据调整后的新分区容量修正所述多层阈值矩阵,并返回目标参数集采集步骤,具体包括:
30、获取调整后的所述动态slc缓存池的新分区容量值;
31、根据所述新分区容量值的正相关变化方向,同步上调或下调所述扩容触发水位线的绝对值;
32、根据所述新分区容量值的正相关变化方向,同步上调或下调所述缩容触发水位线的绝对值;
33、完成阈值修正后,重置固定时间窗口的计时器,返回所述目标参数集采集步骤,执行下一轮对比调控循环。
34、本发明第二方面提供了一种面向大容量qlc固态硬盘的动态slc缓存分区调控系统,包括一种面向大容量qlc固态硬盘的动态slc缓存分区调控方法程序,所述面向大容量qlc固态硬盘的动态slc缓存分区调控方法程序被所述处理器执行时实现如下步骤:
35、按照预设比例将qlc物理块划分为动态slc缓存池和qlc主存储池,并建立初始映射表;
36、以固定时间窗口持续采集目标参数集,所述目标参数集至少包括写入请求频率、平均单次写入数据量、slc缓存池的实时占用水位以及qlc主存储池的闲置物理块数量;
37、将所述目标参数集与预设的多层阈值矩阵对比,得到请求频率状态、水位状态和写入量状态;
38、根据所述频率状态、水位状态和写入量状态的逻辑组合结果,生成对应的调控指令,所述调控指令至少包括扩容指令、缩容指令或旁路指令中的一种;
39、根据所述调控指令,执行动态分区边界调整,更新所述映射表,或将当前写入数据流直接写入所述qlc主存储池;
40、动态分区调整执行完毕后,根据调整后的新分区容量修正所述多层阈值矩阵,并返回目标参数集采集步骤。
41、本发明第三方面提供了一种计算机可读存储介质,所述计算机可读存储介质中包括一种面向大容量qlc固态硬盘的动态slc缓存分区调控方法程序,所述面向大容量qlc固态硬盘的动态slc缓存分区调控方法程序被处理器执行时,实现如上述任一项所述的面向大容量qlc固态硬盘的动态slc缓存分区调控方法的步骤。
42、本发明提供了一种面向大容量qlc固态硬盘的动态slc缓存分区调控方法和系统,由固态硬盘主控执行,通过将qlc物理块初始划分为动态slc缓存池和qlc主存储池并建立映射表,在运行过程中以固定时间窗口持续采集目标参数集,将所述参数集与预设的多层阈值矩阵对比以获取请求频率状态、水位状态和写入量状态,并根据三者逻辑组合生成扩容、缩容或旁路调控指令,进而执行分区边界调整并更新映射表或将数据流直写主存储池,最后依据新分区容量修正阈值矩阵并返回循环。本发明实现了slc缓存区大小的自适应按需调节,平衡写入加速性能与避免缓存污染;并通过闭环阈值修正机制保障固态硬盘全生命周期内调控策略的持续有效性。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com