一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

基于分布式存储系统的数据同步方法、装置、设备及介质与流程

2022-04-06 20:40:41 来源:中国专利 TAG:


1.本发明涉及数据同步技术领域,尤其涉及一种基于分布式存储系统的数据同步方法、装置、设备及介质。


背景技术:

2.分布式存储系统是由一组通过网络进行通信、为了完成共同的任务而协调工作的计算机节点组成的系统。
3.在分布式存储系统中,每一个节点都被用来计算或者存储数据,并且在分布式存储系统中可能需要在节点之间进行数据同步的操作。然而,在目前的分布式存储系统中,节点之间进行数据同步操作通常存在数据同步效率较低的问题。


技术实现要素:

4.本发明提供一种基于分布式存储系统的数据同步方法、装置、设备及介质,以提高数据同步效率。
5.第一方面,本发明提供了一种基于分布式存储系统的数据同步方法,包括如下步骤:
6.当监测到分布式存储系统中的目标节点存储有目标数据时,获取与所述目标节点直接连接的各个相邻节点的历史同步数据;
7.根据各个相邻节点的所述历史同步数据计算各个所述相邻节点的评估值;其中,所述评估值用于评估所述目标节点在历史同步过程中将数据同步至所述相邻节点的效率;
8.从所有相邻节点中筛选出评估值大于预设评估阈值的相邻节点,得到多个第一相邻节点;
9.遍历每个所述第一相邻节点的剩余存储容量,根据所述剩余存储容量由大到小的顺序对每个所述第一相邻节点进行排序,从所述多个第一相邻节点中筛选出剩余存储容量排在第一位的第一相邻节点,得到目标相邻节点;
10.将所述目标节点中的目标数据同步至所述目标相邻节点。
11.优选地,所述根据各个相邻节点的所述历史同步数据计算各个所述相邻节点的评估值的步骤,包括:
12.获取影响所述目标节点的同步效率的所有维度;
13.根据各个维度对所述历史同步数据进行分类,将属于相同维度的历史同步数据划分在同一个数据集中,得到各个维度下的分历史同步数据;
14.获取预先为各个维度设置的权重;
15.将各个维度下的所述分历史同步数据乘以对应的权重并进行累加后,得到所述评估值。
16.优选地,所述监测到分布式存储系统中的目标节点存储有目标数据的步骤,包括:
17.获取各类型数据的历史访问频率;
18.当监测到分布式存储系统中的目标节点存储有历史访问频率大于预设访问频率的数据时,则表示监测到分布式存储系统中的目标节点存储有目标数据。
19.优选地,所述将所述目标节点中的目标数据同步至所述目标相邻节点的步骤,包括:
20.实时监测所述目标数据同步至所述目标相邻节点的耗时;
21.判断所述耗时是否大于预设耗时;
22.当判定所述耗时大于预设耗时,则从所述多个第一相邻节点中筛选出剩余存储容量排在第二位的第一相邻节点,将所述目标节点中的目标数据同步至所述剩余存储容量排在第二位的第一相邻节点。
23.优选地,所述历史同步数据包括所述目标节点与所述相邻节点在历史同步数据过程中的出错次数,所述根据各个相邻节点的所述历史同步数据计算各个所述相邻节点的评估值的步骤,包括:
24.设定各个所述相邻节点的基准评估值;
25.将各个所述相邻节点的出错次数及基准评估值配置至预设的衰减算法中,计算得到各个所述相邻节点的评估值。
26.在一实施例中,所述将各个所述相邻节点的出错次数及基准评估值配置至预设的衰减算法中,计算得到各个所述相邻节点的评估值的步骤,包括如下公式:
27.y=y*e-ωt

28.其中,所述y为某个相邻节点的评估值,所述y为某个相邻节点的基准评估值,所述e和t为常数,所述ω为某个相邻节点的出错次数。
29.优选地,所述将所述目标节点中的目标数据同步至所述目标相邻节点的步骤,包括:
30.接收所述目标相邻节点发起针对所述目标数据的同步请求,根据所述同步请求向所述目标相邻节点发送所述目标数据;
31.在将所述目标节点中的目标数据同步至所述目标相邻节点的过程中,若对所述目标数据同步失败,则记录所述目标节点与所述目标相邻节点之间进行数据同步的出错次数。
32.第二方面,本发明提供的一种基于分布式存储系统的数据同步装置,包括:
33.获取模块,用于当监测到分布式存储系统中的目标节点存储有目标数据时,获取与所述目标节点直接连接的各个相邻节点的历史同步数据;
34.计算模块,用于根据各个相邻节点的所述历史同步数据计算各个所述相邻节点的评估值;其中,所述评估值用于评估所述目标节点在历史同步过程中将数据同步至所述相邻节点的效率;
35.筛选模块,用于从所有相邻节点中筛选出评估值大于预设评估阈值的相邻节点,得到多个第一相邻节点;
36.排序模块,用于遍历每个所述第一相邻节点的剩余存储容量,根据所述剩余存储容量由大到小的顺序对每个所述第一相邻节点进行排序,从所述多个第一相邻节点中筛选出剩余存储容量排在第一位的第一相邻节点,得到目标相邻节点;
37.同步模块,用于将所述目标节点中的目标数据同步至所述目标相邻节点。
38.第三方面,本发明提供了一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机可读指令,所述计算机可读指令被所述处理器执行时,使得所述处理器执行如上任一项所述的基于分布式存储系统的数据同步方法的步骤。
39.第四方面,本发明提供的一种存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时,实现如上任一项所述的基于分布式存储系统的数据同步方法。
40.相对于现有技术,本发明的技术方案至少具备如下优点:
41.本发明提供的基于分布式存储系统的数据同步方法、装置、设备及介质,当监测到分布式存储系统中的目标节点存储有目标数据时,获取与目标节点直接连接的各个相邻节点的历史同步数据;根据各个相邻节点的历史同步数据计算各个相邻节点的评估值;从所有相邻节点中筛选出评估值大于预设评估阈值的相邻节点,得到多个第一相邻节点;遍历每个第一相邻节点的剩余存储容量,根据剩余存储容量由大到小的顺序对每个第一相邻节点进行排序,从多个第一相邻节点中筛选出剩余存储容量排在第一位的第一相邻节点,得到目标相邻节点,将目标节点中的目标数据同步至目标相邻节点,从而科学、合理地选择目标相邻节点,该目标相邻节点具有剩余存储容量较大且同步效率较高的特点,从而能够缩短分布式存储系统的数据同步的时间,提高分布式存储系统的数据同步效率。
附图说明
42.图1为本发明基于分布式存储系统的数据同步方法一种实施例流程框图;
43.图2为本发明基于分布式存储系统的数据同步装置一种实施例模块框图;
44.图3为本发明一个实施例中计算机设备的内部结构框图。
45.本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
46.为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
47.在本发明的说明书和权利要求书及上述附图中的描述的一些流程中,包含了按照特定顺序出现的多个操作,但是应该清楚了解,这些操作可以不按照其在本文中出现的顺序来执行或并行执行,操作的序号如s11、s12等,仅仅是用于区分开各个不同的操作,序号本身不代表任何的执行顺序。另外,这些流程可以包括更多或更少的操作,并且这些操作可以按顺序执行或并行执行。需要说明的是,本文中的“第一”、“第二”等描述,是用于区分不同的消息、设备、模块等,不代表先后顺序,也不限定“第一”和“第二”是不同的类型。
48.本领域普通技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时,它可以直接连接或耦接到其他元件,或者也可以存在中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
49.本领域普通技术人员可以理解,除非另外定义,这里使用的所有术语(包括技术术
语和科学术语),具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。
50.下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
51.请参阅图1,本发明所提供的一种基于分布式存储系统的数据同步方法,以计算机设备为执行主体,用于解决目前的分布式存储系统中,节点之间进行数据同步操作通常存在数据同步效率较低的技术问题。在一种实施方式中,该基于分布式存储系统的数据同步方法包括如下步骤:
52.s11、当监测到分布式存储系统中的目标节点存储有目标数据时,获取与所述目标节点直接连接的各个相邻节点的历史同步数据;
53.s12、根据各个相邻节点的所述历史同步数据计算各个所述相邻节点的评估值;其中,所述评估值用于评估所述目标节点在历史同步过程中将数据同步至所述相邻节点的效率;
54.s13、从所有相邻节点中筛选出评估值大于预设评估阈值的相邻节点,得到多个第一相邻节点;
55.s14、遍历每个所述第一相邻节点的剩余存储容量,根据所述剩余存储容量由大到小的顺序对每个所述第一相邻节点进行排序,从所述多个第一相邻节点中筛选出剩余存储容量排在第一位的第一相邻节点,得到目标相邻节点;
56.s15、将所述目标节点中的目标数据同步至所述目标相邻节点。
57.分布式存储系统,是将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据,存储服务器成为系统性能的瓶颈,也是可靠性和安全性的焦点,不能满足大规模存储应用的需要。分布式存储系统采用可扩展的系统结构,利用多台存储服务器分担存储负荷,利用位置服务器定位存储信息,它不但提高了系统的可靠性、可用性和存取效率,还易于扩展。
58.分布式存储系统中包括多个节点,每个节点可以当成一台独立的计算机设备,本实施例可以任意指定一个节点作为目标节点,并设置定时时间,在到达定时时间后,对目标节点进行一次监测,判断目标节点是否存储有目标数据,该目标数据可以自定义指定,如将用户数据作为目标数据,具体可以是用户的身份证号码、手机号码、姓名等等信息;或将用户访问频率最高的数据作为目标数据。
59.此外,本实施例还可响应于用户发起的数据同步请求,数据同步请求中携带有需要同步目标数据的目标节点的标识,计算机设备提取数据同步请求中的标识,基于该标识查询得到相应的目标节点,监测所述目标节点是否存储有目标数据;若是,则获取与目标节点直接连接的各个相邻节点的历史同步数据,该历史同步数据为表征目标节点与相邻节点的数据同步效率的数据,如同步时间、同步数据的数据量、出错次数、目标节点或相邻节点
的计算机参数等具体数据。
60.然后根据各个相邻节点的历史同步数据计算各个相邻节点的评估值,其中,评估值用于评估目标节点在历史同步过程中将数据同步至相邻节点的效率。例如,当相邻节点a的历史同步数据中含有出错次数时,该相邻节点a的出错次数为10次,则相邻节点a计算得到的评估值为评估值越低,则表示目标节点在历史同步过程中将数据同步至相邻节点的效率越低。
61.本实施例从所有相邻节点中筛选出评估值大于预设评估阈值的相邻节点,将评估值大于预设评估阈值的相邻节点作为第一相邻节点,得到多个第一相邻节点,其中,该预设评估阈值可自定义设置,如设置为90。
62.最后遍历每个第一相邻节点的剩余存储容量,根据剩余存储容量由大到小的顺序对每个第一相邻节点进行排序,从多个第一相邻节点中筛选出剩余存储容量排在第一位的第一相邻节点,将剩余存储容量排在第一位的第一相邻节点作为目标相邻节点,以得到剩余存储容量最大的第一相邻节点,将目标节点中的目标数据同步至目标相邻节点。例如,当第一相邻节点为三个时,分别为第一相邻节点a、b、c,分别对应的剩余存储容量为100g、90g、99g,则从中筛选出剩余存储容量最大的第一相邻节点a作为目标相邻节点,将目标节点中的目标数据同步至目标相邻节点。
63.其中,存储容量是指存储器可以容纳的二进制信息量,用存储器中存储地址寄存器mar的编址数与存储字位数的乘积表示。
64.本发明提供的基于分布式存储系统的数据同步方法,当监测到分布式存储系统中的目标节点存储有目标数据时,获取与目标节点直接连接的各个相邻节点的历史同步数据;根据各个相邻节点的历史同步数据计算各个相邻节点的评估值;从所有相邻节点中筛选出评估值大于预设评估阈值的相邻节点,得到多个第一相邻节点;遍历每个第一相邻节点的剩余存储容量,根据剩余存储容量由大到小的顺序对每个第一相邻节点进行排序,从多个第一相邻节点中筛选出剩余存储容量排在第一位的第一相邻节点,得到目标相邻节点,将目标节点中的目标数据同步至目标相邻节点,从而科学、合理地选择目标相邻节点,该目标相邻节点具有剩余存储容量较大且同步效率较高的特点,从而能够缩短分布式存储系统的数据同步的时间,提高分布式存储系统的数据同步效率。
65.在一实施例中,所述根据各个相邻节点的所述历史同步数据计算各个所述相邻节点的评估值的步骤,可具体包括:
66.获取影响所述目标节点的同步效率的所有维度;
67.根据各个维度对所述历史同步数据进行分类,将属于相同维度的历史同步数据划分在同一个数据集中,得到各个维度下的分历史同步数据;
68.获取预先为各个维度设置的权重;
69.将各个维度下的所述分历史同步数据乘以对应的权重并进行累加后,得到所述评估值。
70.本实施例可收集影响目标节点的同步效率的所有维度,每个维度用于评估目标节点一个角度的效率,如同步时间、同步数据的数据量、出错次数、目标节点或相邻节点的计算机参数,根据各个维度对历史同步数据进行分类,将属于相同维度的历史同步数据划分
在同一个数据集中,得到各个维度下的分历史同步数据,并获取预先为各个维度设置的权重,将各个维度下的分历史同步数据乘以对应的权重并进行累加后,得到第一评估值,对所述第一评估值进行转换后,得到所述评估值。
71.例如,对于任一个相邻节点a,当影响目标节点的同步效率的所有维度为同步时间及出错次数时,将相邻节点a的历史同步数据中属于同步时间的具体数据划分在一个数据集中,将历史同步数据中属于出错次数的具体数据划分在另一个数据集中,得到各个维度下的分历史同步数据,假设为同步时间这一维度设置的权重为0.9,为出错次数这一维度设置的权重为0.8,同步时间为10分钟,出错次数为10次,则计算得到的第一评估值为0.9*10 0.8*10=17,则经过转换后的评估值可以表示为
72.在一实施例中,所述监测到分布式存储系统中的目标节点存储有目标数据的步骤,可具体包括:
73.获取各类型数据的历史访问频率;
74.当监测到分布式存储系统中的目标节点存储有历史访问频率大于预设访问频率的数据时,则表示监测到分布式存储系统中的目标节点存储有目标数据。
75.本实施例获取各类型数据在历史周期内被访问的历史访问频率,遍历分布式存储系统中目标节点存储的所有数据及每种类型的数据的历史访问频率,当监测到分布式存储系统中的目标节点存储有历史访问频率大于预设访问频率的数据时,则表示监测到分布式存储系统中的目标节点存储有目标数据,即本实施例的目标数据为历史访问频率大于预设访问频率的数据,以对访问频率较高的数据进行同步,以便后续用户访问时,用户可直接访问目标相邻节点,通过目标相邻节点提取目标数据,将目标数据发送给用户,无需通过目标节点返回目标数据,从而减轻目标节点的负载。
76.在一实施例中,所述将所述目标节点中的目标数据同步至所述目标相邻节点的步骤,可具体包括:
77.实时监测所述目标数据同步至所述目标相邻节点的耗时;
78.判断所述耗时是否大于预设耗时;
79.当判定所述耗时大于预设耗时,则从所述多个第一相邻节点中筛选出剩余存储容量排在第二位的第一相邻节点,将所述目标节点中的目标数据同步至所述剩余存储容量排在第二位的第一相邻节点。
80.本实施例可在计算机设备中设置一个计时器,该计时器用于实时监测目标数据同步至目标相邻节点的耗时,判断耗时是否大于预设耗时,该预设耗时可自定义设置,如设置为1小时,当判定所述耗时大于预设耗时,则从多个第一相邻节点中筛选出剩余存储容量排在第二位的第一相邻节点,将目标节点中的目标数据同步至剩余存储容量排在第二位的第一相邻节点,从而及时切换目标相邻节点,确保数据同步的正常进行。
81.例如,当判定目标数据同步至目标相邻节点的耗时大于1小时时,则切换至剩余存储容量排在第二位的第一相邻节点,将目标数据重新同步至剩余存储容量排在第二位的第一相邻节点。
82.在一实施例中,所述历史同步数据包括所述目标节点与所述相邻节点在历史同步数据过程中的出错次数,所述根据各个相邻节点的所述历史同步数据计算各个所述相邻节
点的评估值的步骤,可具体包括:
83.设定各个所述相邻节点的基准评估值;
84.将各个所述相邻节点的出错次数及基准评估值配置至预设的衰减算法中,计算得到各个所述相邻节点的评估值。
85.在本实施例中,基准评估值可自定义设置,如将基准评估值设置为80,此外,各个所述相邻节点的基准评估值可设置为相同,也可设置为不同,在此不做具体限定。如可获取各个相邻节点的处理性能,根据各个相邻节点的处理性能设置各个相邻节点的基准评估值;其中,各个相邻节点的基准评估值与对应的处理性能成正比。所述处理性能包括运算效率、存储容量等等。
86.本实施例获取目标节点与每个相邻节点在历史同步数据过程中的出错次数,将各个相邻节点的出错次数及基准评估值配置至预设的衰减算法中,计算得到各个相邻节点的评估值,从而精准地计算各个相邻节点的评估值。
87.在一实施例中,所述将各个所述相邻节点的出错次数及基准评估值配置至预设的衰减算法中,计算得到各个所述相邻节点的评估值的步骤,可包括如下公式:
88.y=y*e-ωt

89.其中,所述y为某个相邻节点的评估值,所述y为某个相邻节点的基准评估值,所述e和t为常数,所述ω为某个相邻节点的出错次数。
90.在一实施例中,所述将所述目标节点中的目标数据同步至所述目标相邻节点的步骤,可具体包括:
91.接收所述目标相邻节点发起针对所述目标数据的同步请求,根据所述同步请求向所述目标相邻节点发送所述目标数据;
92.在将所述目标节点中的目标数据同步至所述目标相邻节点的过程中,若对所述目标数据同步失败,则记录所述目标节点与所述目标相邻节点之间进行数据同步的出错次数。
93.本实施例实时接收目标相邻节点发起针对目标数据的同步请求,根据同步请求向目标相邻节点发送目标数据,并在将目标节点中的目标数据同步至目标相邻节点的过程中,若目标节点对目标数据同步失败,则记录目标节点与目标相邻节点之间进行数据同步的出错次数,以更新历史同步数据中的出错次数。
94.请参考图2,本发明的实施例还提供一种基于分布式存储系统的数据同步装置,一种本实施例中,包括获取模块11、计算模块12、筛选模块13、排序模块14及同步模块15。其中,
95.获取模块11,用于当监测到分布式存储系统中的目标节点存储有目标数据时,获取与所述目标节点直接连接的各个相邻节点的历史同步数据;
96.计算模块12,用于根据各个相邻节点的所述历史同步数据计算各个所述相邻节点的评估值;其中,所述评估值用于评估所述目标节点在历史同步过程中将数据同步至所述相邻节点的效率;
97.筛选模块13,用于从所有相邻节点中筛选出评估值大于预设评估阈值的相邻节点,得到多个第一相邻节点;
98.排序模块14,用于遍历每个所述第一相邻节点的剩余存储容量,根据所述剩余存
储容量由大到小的顺序对每个所述第一相邻节点进行排序,从所述多个第一相邻节点中筛选出剩余存储容量排在第一位的第一相邻节点,得到目标相邻节点;
99.同步模块15,用于将所述目标节点中的目标数据同步至所述目标相邻节点。
100.分布式存储系统,是将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据,存储服务器成为系统性能的瓶颈,也是可靠性和安全性的焦点,不能满足大规模存储应用的需要。分布式存储系统采用可扩展的系统结构,利用多台存储服务器分担存储负荷,利用位置服务器定位存储信息,它不但提高了系统的可靠性、可用性和存取效率,还易于扩展。
101.分布式存储系统中包括多个节点,每个节点可以当成一台独立的计算机设备,本实施例可以任意指定一个节点作为目标节点,并设置定时时间,在到达定时时间后,对目标节点进行一次监测,判断目标节点是否存储有目标数据,该目标数据可以自定义指定,如将用户数据作为目标数据,具体可以是用户的身份证号码、手机号码、姓名等等信息;或将用户访问频率最高的数据作为目标数据。
102.此外,本实施例还可响应于用户发起的数据同步请求,数据同步请求中携带有需要同步目标数据的目标节点的标识,计算机设备提取数据同步请求中的标识,基于该标识查询得到相应的目标节点,监测所述目标节点是否存储有目标数据;若是,则获取与目标节点直接连接的各个相邻节点的历史同步数据,该历史同步数据为表征目标节点与相邻节点的数据同步效率的数据,如同步时间、同步数据的数据量、出错次数、目标节点或相邻节点的计算机参数等具体数据。
103.然后根据各个相邻节点的历史同步数据计算各个相邻节点的评估值,其中,评估值用于评估目标节点在历史同步过程中将数据同步至相邻节点的效率。例如,当相邻节点a的历史同步数据中含有出错次数时,该相邻节点a的出错次数为10次,则相邻节点a计算得到的评估值为评估值越低,则表示目标节点在历史同步过程中将数据同步至相邻节点的效率越低。
104.本实施例从所有相邻节点中筛选出评估值大于预设评估阈值的相邻节点,将评估值大于预设评估阈值的相邻节点作为第一相邻节点,得到多个第一相邻节点,其中,该预设评估阈值可自定义设置,如设置为90。
105.最后遍历每个第一相邻节点的剩余存储容量,根据剩余存储容量由大到小的顺序对每个第一相邻节点进行排序,从多个第一相邻节点中筛选出剩余存储容量排在第一位的第一相邻节点,将剩余存储容量排在第一位的第一相邻节点作为目标相邻节点,以得到剩余存储容量最大的第一相邻节点,将目标节点中的目标数据同步至目标相邻节点。例如,当第一相邻节点为三个时,分别为第一相邻节点a、b、c,分别对应的剩余存储容量为100g、90g、99g,则从中筛选出剩余存储容量最大的第一相邻节点a作为目标相邻节点,将目标节点中的目标数据同步至目标相邻节点。
106.其中,存储容量是指存储器可以容纳的二进制信息量,用存储器中存储地址寄存器mar的编址数与存储字位数的乘积表示。
107.关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
108.本发明提供的一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机可读指令,所述计算机可读指令被所述处理器执行时,使得所述处理器执行如上任一项所述的基于分布式存储系统的数据同步方法的步骤。
109.在一实施例中,如图3所示。本实施例所述的计算机设备可以是服务器、个人计算机以及网络设备等设备。所述计算机设备包括处理器302、存储器303、摄像头、输入单元304以及显示单元305等器件。本领域技术人员可以理解,图3示出的设备结构器件并不构成对所有设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件。例如,在大多数情况下,计算机设备无需配备显示单元305。存储器303可用于存储计算机程序301以及各功能模块,处理器302运行存储在存储器303的计算机程序301,从而执行设备的各种功能应用以及数据处理。存储器可以是内存储器或外存储器,或者包括内存储器和外存储器两者。内存储器可以包括只读存储器(rom)、可编程rom(prom)、电可编程rom(eprom)、电可擦写可编程rom(eeprom)、快闪存储器、或者随机存储器。外存储器可以包括硬盘、软盘、zip盘、u盘、磁带等。本发明所公开的存储器包括但不限于这些类型的存储器。本发明所公开的存储器只作为例子而非作为限定。
110.输入单元304用于接收信号的输入,以及接收用户输入的关键字。输入单元304可包括触控面板以及其它输入设备。触控面板可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板上或在触控面板附近的操作),并根据预先设定的程序驱动相应的连接装置;其它输入设备可以包括但不限于物理键盘、功能键(比如播放控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。显示单元305可用于显示用户输入的信息或提供给用户的信息及计算机设备的各种菜单。显示单元305可采用液晶显示器、有机发光二极管等形式。处理器302是计算机设备的控制中心,利用各种接口和线路连接整个电脑的各个部分,通过运行或执行存储在存储器302内的软件程序和/或模块,以及调用存储在存储器内的数据,执行各种功能和处理数据。
111.作为一个实施例,所述计算机设备包括:一个或多个处理器302,存储器303,一个或多个计算机程序301,其中所述一个或多个计算机程序301被存储在存储器303中并被配置为由所述一个或多个处理器302执行,所述一个或多个计算机程序301配置用于执行以上实施例所述的基于分布式存储系统的数据同步方法。
112.在一个实施例中,本发明还提出了一种存储有计算机可读指令的存储介质,该计算机可读指令被一个或多个处理器执行时,使得一个或多个处理器执行上述基于分布式存储系统的数据同步方法。例如,所述存储介质可以是rom、随机存取存储器(ram)、cd-rom、磁带、软盘和光数据存储设备等。
113.本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,该计算机程序可存储于一存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,前述的存储介质可为磁碟、光盘、只读存储记忆体(read-only memory,rom)等非易失性存储介质,或随机存储记忆体(random access memory,ram)等。
114.综合上述实施例可知,本发明最大的有益效果在于:
115.本发明提供的基于分布式存储系统的数据同步方法、装置、设备及介质,当监测到分布式存储系统中的目标节点存储有目标数据时,获取与目标节点直接连接的各个相邻节
点的历史同步数据;根据各个相邻节点的历史同步数据计算各个相邻节点的评估值;从所有相邻节点中筛选出评估值大于预设评估阈值的相邻节点,得到多个第一相邻节点;遍历每个第一相邻节点的剩余存储容量,根据剩余存储容量由大到小的顺序对每个第一相邻节点进行排序,从多个第一相邻节点中筛选出剩余存储容量排在第一位的第一相邻节点,得到目标相邻节点,将目标节点中的目标数据同步至目标相邻节点,从而科学、合理地选择目标相邻节点,该目标相邻节点具有剩余存储容量较大且同步效率较高的特点,从而能够缩短分布式存储系统的数据同步的时间,提高分布式存储系统的数据同步效率。
116.以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
117.以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献