用于分布式存储系统的控制方法及系统与流程

技术特征：
1.一种用于分布式存储系统的控制方法，其特征在于，所述方法包括：客户端从第一数据节点组获取第一字节流的多个未同步数据版本，所述第一数据节点组用于存储所述第一字节流的当前写入的数据，所述第一数据节点组中包括多个数据节点，所述未同步数据版本为所述第一数据节点组存储的未同步的数据版本；元数据节点从所述客户端接收所述多个未同步数据版本；所述元数据节点根据预设规则，从所述多个未同步数据版本中选择目标未同步数据版本；所述元数据节点确定最新未同步数据版本，所述最新未同步数据版本是所述目标未同步数据版本和所述元数据节点当前维护的未同步数据版本中写入长度更长的版本。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：所述客户端从所述元数据节点接收所述最新未同步数据版本；所述客户端从所述元数据节点接收当前维护的所述第一字节流的已同步数据版本；所述客户端确定所述第一字节流的最新数据版本，所述第一字节流的最新数据版本包括所述已同步数据版本和所述最新未同步数据版本。3.根据权利要求2所述的方法，其特征在于，所述客户端确定所述第一字节流的最新数据版本，包括：所述客户端在所述最新未同步数据版本不会导致所述客户端本地保存的未同步版本产生回退的情况下，确定获取所述第一字节流的最新数据版本成功；所述方法还包括：所述客户端在所述最新未同步数据版本将导致所述客户端本地保存的未同步版本产生回退的情况下，确定重新获取所述第一字节流的最新数据版本，或者确定获取所述第一字节流的最新数据版本失败。4.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：所述客户端向所述元数据节点发送请求信息，所述请求信息用于请求获取所述第一字节流的最新数据版本或者请求同步所述第一字节流的数据；所述客户端从所述元数据节点接收指示信息，所述指示信息用于指示所述第一数据节点组的位置。5.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：所述元数据节点将所述最新未同步数据版本同步为已同步版本；所述元数据节点为所述第一字节流分配第二数据节点组，所述第二数据节点组用于继续存储所述第一字节流的写入的数据。6.一种分布式存储系统，其特征在于，包括：第一数据节点组，包括多个数据节点，用于存储第一字节流的当前写入的数据；客户端，用于从所述第一数据节点组获取所述第一字节流的多个未同步数据版本，所述未同步数据版本为所述第一数据节点组存储的未同步的数据版本；元数据节点，用于根据预设规则，从所述多个未同步数据版本中选择目标未同步数据版本；以及确定最新未同步数据版本，所述最新未同步数据版本是所述目标未同步数据版本和所述元数据节点当前维护的未同步数据版本中写入长度更长的版本。7.根据权利要求6所述的系统，其特征在于，所述客户端还用于：
从所述元数据节点接收所述最新未同步数据版本；从所述元数据节点接收当前维护的所述第一字节流的已同步数据版本；确定所述第一字节流的最新数据版本，所述第一字节流的最新数据版本包括所述已同步数据版本和所述最新未同步数据版本。8.根据权利要求7所述的系统，其特征在于，在确定所述第一字节流的最新数据版本方面，所述客户端具体用于：在所述最新未同步数据版本不会导致所述客户端本地保存的未同步版本产生回退的情况下，确定获取所述第一字节流的最新数据版本成功；所述客户端还用于：在所述最新未同步数据版本将导致所述客户端本地保存的未同步版本产生回退的情况下，确定重新获取所述第一字节流的最新数据版本，或者确定获取所述第一字节流的最新数据版本失败。9.根据权利要求6或7所述的系统，其特征在于，所述客户端还用于：向所述元数据节点发送请求信息，所述请求信息用于请求获取所述第一字节流的最新数据版本或者请求同步所述第一字节流的数据；从所述元数据节点接收指示信息，所述指示信息用于指示所述第一数据节点组的位置信息。10.根据权利要求6或7所述的系统，其特征在于，所述元数据节点还用于：将所述最新未同步数据版本同步为已同步版本；为所述第一字节流分配第二数据节点组，所述第二数据节点组用于继续存储所述第一字节流的写入的数据。11.一种电子设备，其特征在于，所述电子设备包括处理器，所述处理器用于从存储器调用计算机程序，当所述计算机程序被执行时，所述处理器用于执行如权利要求1至5中任一项中由所述元数据节点执行的方法，或者，用于执行如权利要求1至5中任一项中由所述数据节点执行的方法，或者，用于执行如权利要求1至5中任一项中由所述客户端执行的方法。12.一种计算机可读存储介质，其特征在于，用于存储计算机程序，所述计算机程序包括用于执行如权利要求1至5中任一项中由所述元数据节点执行的方法的代码，或者，包括用于执行如权利要求1至5中任一项中由所述数据节点执行的方法的代码，或者，包括用于执行如权利要求1至5中任一项中由所述客户端执行的方法的代码。

技术总结
一种用于分布式存储系统的控制方法及系统，该方法包括：客户端从第一数据节点组获取第一字节流的多个未同步数据版本，并发送至元数据节点；元数据节点根据预设规则，从多个未同步数据版本中选择目标未同步数据版本；元数据节点确定最新未同步数据版本，最新未同步数据版本是目标未同步数据版本和元数据节点当前维护的未同步数据版本中写入长度更长的版本。通过客户端协同获取数据版本，中心化的元数据节点决策最新未同步数据版本的方案，避免了元数据节点发送大量请求到数据节点，从而减轻了元数据节点的信令开销和负担，并且还能改善出现版本分歧和版本回退的问题，保证了系统的强一致性，提高了系统的管理效率。提高了系统的管理效率。提高了系统的管理效率。


技术研发人员：王竹凡 庄灿伟 董元元
受保护的技术使用者：阿里巴巴（中国）有限公司
技术研发日：2022.03.17
技术公布日：2022/6/7