基于分布式存储的服务器RAID卡缓存写模式优化方法与流程

本发明涉及分布式存储，具体为基于分布式存储的服务器raid卡缓存写模式优化方法。

背景技术：

1、在分布式存储系统中，每个存储节点配置的raid卡其缓存写模式通常包括写通模式和写回模式，写模式的选择直接影响节点写入性能与数据安全性。现有技术中，raid卡写模式的调整通常依赖于人工静态配置或基于单个节点本地负载的简单阈值判断。人工配置方式无法感知分布式系统中多节点间i/o行为的相互影响，随着前端业务负载变化，原先设定的写模式容易偏离最优状态。基于本地阈值的自动切换方法仅利用节点自身读写请求密度或缓存脏数据比例等指标，当本节点负载升高时将raid卡切换为写回模式以降低写时延，负载降低时恢复为写通模式以保证数据持久性。然而在分布式存储场景下，各存储节点并非孤立运行，它们共同服务于大量客户端，并且通过数据副本同步机制产生后端流量，任一节点写模式的切换会改变其对共享i/o路径的占用程度，进而干扰邻居节点的写入时延感受，形成写模式选择上的耦合关系。本地决策方法忽略这种节点间写时延关联，容易引发多个节点同时或交替进行不必要的写模式切换，造成系统整体写性能的振荡，无法实现全局i/o性能的均衡。针对上述问题，需要解决两方面难题。一是如何准确量化分布式存储节点之间因共享客户端访问和数据副本同步而形成的写模式影响程度，从而构建能够表征节点间写时延耦合关系的拓扑结构。二是如何在获得该拓扑结构的基础上，设计一种分布式协同机制，使各节点能够根据彼此的实际写时延反馈，自动调整自身写模式倾向，逐步收敛到使节点间写时延梯度最小化的目标写模式组合。

技术实现思路

1、本发明的目的在于提供一种基于分布式存储的服务器raid卡缓存写模式优化方法，该方法通过构建分布式写模式影响拓扑图来刻画存储节点间的写时延耦合关系，并通过基于节点间写时延梯度下降的分布式共识迭代，使各存储节点自主协调raid卡写模式，在无中心集中调度的情况下达到系统级写性能均衡，避免因节点间不相协同的模式切换引发整体i/o性能振荡。

2、为了实现上述目的，本发明提供如下技术方案：本发明提供一种基于分布式存储的服务器raid卡缓存写模式优化方法，包括：获取分布式存储系统中每个存储节点上raid卡的历史写模式配置序列与对应的历史i/o性能指标；根据所述历史写模式配置序列与历史i/o性能指标，构建分布式写模式影响拓扑图；基于所述分布式写模式影响拓扑图，执行基于节点间写时延梯度下降的分布式共识迭代，确定每个存储节点上raid卡的目标写模式；根据所述目标写模式，生成并执行每个raid卡的缓存写模式切换指令。

3、本发明的方法通过将各存储节点的写模式决策纳入统一拓扑图并实施分布式共识，能够使得raid卡写模式在写通模式与写回模式之间的切换充分考虑到节点间的相互影响，避免单节点独立切换引起的全局性能振荡，实现整个分布式存储集群写时延的梯度下降和负载均衡。

4、在构建分布式写模式影响拓扑图时，优选的，将每个存储节点定义为拓扑图的一个图节点，并采集每两个图节点之间的共享i/o路径权重作为有向边的初始权重值；该共享i/o路径权重由两个存储节点共同服务的前端客户端数量与后端数据副本同步流量共同决定，并按照预设的衰减因子对历史采集时刻进行加权求和，使得越靠近当前时刻的共享i/o路径权重占比越大，能够更准确地反映当前节点间i/o路径的关联强度。进一步地，根据每个图节点对应的历史写模式配置序列中的模式切换时刻，分析两个图节点在相同时间窗口内发生模式切换的关联频次，依据该关联频次动态修正初始权重值，得到影响强度值，将全部图节点及其携带影响强度值的有向边组合为所述分布式写模式影响拓扑图。通过上述方式构建的拓扑图，不仅刻画了存储节点之间的静态i/o路径依存关系，还融入了写模式切换行为的动态关联，使得拓扑图中边的影响强度能够真实反映一个节点写模式变化对另一节点写性能的影响程度，为后续分布式共识迭代提供可靠依据。

5、作为本发明的一种优选技术方案，获取历史写模式配置序列与历史i/o性能指标的过程为：在每个存储节点的raid卡固件层，建立一个固定长度的循环日志缓冲区，采用先进先出队列管理，缓冲区容量至少能够存储一个数据同步周期内的所有记录。以预设的第一采集周期持续记录raid卡当前生效的写模式状态，生成时间戳标记的模式状态记录并组成历史写模式配置序列；以预设的第二采集周期同步记录raid卡处理i/o请求时的平均写时延与写输入输出操作数，生成与所述模式状态记录时间戳对齐的性能指标记录并组成历史i/o性能指标，且第一采集周期与第二采集周期保持整数倍关系。上述采集方式可在raid卡固件层实现轻量级、无感知的数据记录，确保模式状态与性能指标严格对齐，为拓扑图构建及梯度计算提供精确的历史数据。

6、在执行基于节点间写时延梯度下降的分布式共识迭代时，优选的，每个图节点初始化一个本地写模式偏好值，该偏好值用于指示对应raid卡当前倾向于写通模式或写回模式。初始化的具体方式可以是：获取对应raid卡最近一个采集周期内的写输入输出操作数与平均写时延，计算当前写负载压力系数；当写负载压力系数大于或等于预设的本地压力阈值时，将本地写模式偏好值初始化为偏向写回模式的第一数值，当小于本地压力阈值时初始化为偏向写通模式的第二数值。这使得初始偏好值即能够贴合各节点的实际负载压力，加速后续迭代收敛。

7、每个图节点通过有向边向所有邻居图节点广播自身的本地写模式偏好值及当前的本地平均写时延，并接收所有邻居图节点广播的邻居写模式偏好值与邻居平均写时延。每个图节点根据接收到的邻居平均写时延计算自身的写时延梯度值：优选的，计算自身当前的平均写时延得到本地写时延，计算所有邻居平均写时延的算术平均值得到邻居平均写时延，求取本地写时延与邻居平均写时延的差值得到原始时延差；从分布式写模式影响拓扑图中获取指向自身的所有入边的权重总和作为入边权重和，将原始时延差乘以该入边权重和，乘积结果即为该图节点的写时延梯度值。该写时延梯度值不仅表征了自身写时延与邻居写时延的差异程度，还通过入边权重和反映了该节点受其他节点影响的总体规模，使得梯度信息更加精准。

8、每个图节点根据写时延梯度值，沿着分布式写模式影响拓扑图中影响强度值最大的有向边方向，调整自身的本地写模式偏好值，完成一轮共识迭代。调整时，优选的，判断写时延梯度值是否大于预设的梯度变化阈值；当大于该阈值时，将自身的本地写模式偏好值向接收到的邻居写模式偏好值中的众数方向调整一个预设的步长值，得到更新后的偏好值；当小于或等于该阈值时，维持自身的本地写模式偏好值不变。该调整策略使得仅当自身写时延明显劣于邻居平均水平时才发生偏好迁移，且迁移方向与邻域主流趋势一致，能够实现各节点写模式偏好的平滑演化，避免震荡。

9、重复执行上述基于节点间写时延梯度下降的分布式共识迭代，直至满足预设的迭代终止条件。迭代终止后，每个图节点获取自身最终的本地写模式偏好值，并将其与预设的模式判决阈值进行比较；若该偏好值大于或等于模式判决阈值，则将该图节点对应raid卡的目标写模式确定为写回模式，否则确定为写通模式。此过程以完全分布式的方式达成全局一致性较高的写模式配置方案，各节点只需与邻居交换有限信息即可自主决策，具有良好的可扩展性。

10、在确定目标写模式后，生成并执行缓存写模式切换指令时，优选的，将每个存储节点上确定的目标写模式与对应raid卡的当前写模式进行比对；对于目标写模式与当前写模式不一致的raid卡，生成一个原子切换指令并通过raid卡的固件接口下发至控制寄存器。该raid卡在接收到原子切换指令后，先暂停处理所有新的写入请求，并等待当前正在处理的写入请求对应的脏数据完全落盘；待脏数据落盘完成后，修改控制寄存器的值以完成写通模式与写回模式的切换；控制寄存器修改成功后，恢复处理新的写入请求，并向分布式存储系统的控制节点返回切换成功状态。这种原子切换方式保证了写模式变更过程中数据的一致性与安全性，杜绝了因模式切换而导致的数据丢失风险，同时切换过程对上层业务的影响被控制在极短的时间窗口内。

11、进一步优选的，分析两个图节点在相同时间窗口内发生模式切换的关联频次时，从历史写模式配置序列中为每个图节点提取所有写模式发生状态翻转的切换时刻点；针对每对图节点，定义一个滑动时间窗口，遍历第一个图节点的每个切换时刻点，检查在该滑动时间窗口内第二个图节点是否存在至少一个切换时刻点，统计满足条件的次数得到原始关联频次；根据滑动时间窗口的宽度对原始关联频次进行归一化处理，得到归一化后的关联频次。该关联频次能够客观量化两节点模式切换行为在时间上的耦合程度，进而使拓扑图中边的影响强度值更加切合实际系统中的相互影响关系。

12、本发明通过上述各技术方案的协同配合，在分布式存储环境下实现了raid卡缓存写模式的动态协同优化。利用分布式写模式影响拓扑图精确建模节点间写模式关联，配合基于写时延梯度下降的分布式共识迭代，使得各raid卡能够在无需全局集中控制器干预的条件下，依靠局部信息交换逐步趋向全局最优的写模式分布，从而在保障数据可靠性的前提下显著降低整个集群的写入时延，提升分布式存储系统的整体i/o性能。

13、在上述技术方案中，本发明提供的技术效果和优点：

14、通过采集每两个存储节点之间由共同服务的前端客户端数量与后端数据副本同步流量决定的共享i/o路径权重，并依据历史写模式配置序列中相同时间窗口内发生模式切换的关联频次，对权重进行动态修正，得到带影响强度值的有向边，从而形成分布式写模式影响拓扑图。该拓扑图能够定量反映节点间因共享i/o路径和同步行为造成的写模式相互影响的程度，解决了传统方法无法刻画节点间写时延耦合关系的缺陷，使得后续分布式决策过程建立在真实的系统互影响结构之上，避免脱离实际关联的盲目调优。在此基础上，每个图节点利用从邻居节点接收的邻居平均写时延计算自身的写时延梯度值，该梯度值表征了本节点写时延与邻居写时延的差异程度，并沿着影响强度值最大的有向边方向调整本地写模式偏好值。这种节点间写时延梯度下降的分布式共识迭代方式，使各存储节点能够根据直接关联节点的实际写时延反馈进行自适应调整，逐步收敛至写时延在拓扑邻域内趋于均衡的目标写模式组合，从而消除因节点间无协同切换造成的i/o性能振荡，在保持各节点数据安全约束的前提下提升分布式存储系统整体写入性能的平稳性。