一种基于区块链大数据的存储系统的制作方法

1.本发明涉及区块链大数据存储技术领域，具体为一种基于区块链大数据的存储系统。


背景技术：

2.区块链，就是一个又一个区块组成的链条。每一个区块中保存了一定的信息，它们按照各自产生的时间顺序连接成链条。这个链条被保存在所有的服务器中，只要整个系统中有一台服务器可以工作，整条区块链就是安全的。这些服务器在区块链系统中被称为节点，它们为整个区块链系统提供存储空间和算力支持。
3.在大数据环境下，在分布式网络存储系统中存在多个服务器分节点同时发送待同步数据，但是每个服务器节点只能知道自己的事务操作是否成功，而无法知道系统中其他服务器节点的事务操作是否成功，因此就可能会造成分布式网络存储系统中的各服务器分节点的数据出现不一致，从而无法保证分布式网络存储系统中的各服务器分节点数据的一致性。


技术实现要素：

4.本发明的目的在于提供一种基于区块链大数据的存储系统，以解决上述背景技术中提出的问题。
5.为了解决上述技术问题，本发明提供如下技术方案：
6.一种基于区块链大数据的存储系统，所述系统包括：
7.所述系统包括节点数据接收模块、待同步数据标记模块、计算模型构建分析模块、自动同步校验模块和报警提醒模块；
8.所述节点数据接收模块用于接收所有服务器分节点发送的待同步数据，对所有服务器分节点发送的待同步数据进行完整性判断；
9.所述待同步数据标记模块用于构建待同步数据表，将同一时刻接收到的所有服务器分节点发送的待同步数据标记为同时刻待同步数据，并分组存入待同步数据表中；
10.所述计算模型构建分析模块用于构建待同步数据一致性计算模型，基于各组待同步数据之间的相似度和运行环境，计算待同步数据表中各组待同步数据一致性的概率；
11.所述自动同步校验模块用于设置待同步数据一致性的概率阈值，当待同步数据一致性的概率超出阈值时，对待同步数据进行自动同步，等待自动同步完成后进行二次同步校验；
12.所述报警提醒模块用于当检测到待同步数据一致性的概率再次超出阈值，向管理人员发出报警提醒；
13.所述节点数据接收模块的输出端与所述待同步数据标记模块的输入端相连接；所述待同步数据标记模块的输出端与所述计算模型构建分析模块的输入端相连接；所述计算模型构建分析模块的输出端与所述自动同步校验模块的输入端相连接；所述自动同步校验
模块的输出端与所述报警提醒模块的输入端相连接。
14.进一步地，所述节点数据接收模块包括服务器分节点数目获取单元、服务器分节点数据接收单元、加密算法调用单元、完整性校验码对比判断单元和数据重发请求单元；
15.所述服务器分节点数据获取单元用于获取存储系统所有服务器分节点的数目，记为n；
16.所述服务器分节点数据接收单元用于获取各服务器分节点发送的待同步数据以及各待同步数据对应的md5码；
17.所述加密算法调用单元用于调用md5加密算法对接收到的各待同步数据的md5码进行计算；
18.所述完整性检验码对比判断单元用于将各服务器分节点发送的各待同步数据对应的md5码与调用md5加密算法计算得到的各待同步数据的md5码进行对比并对各服务器分节点发送的待同步数据的完整性进行判断；
19.所述数据重发请求单元用于当判定某个服务器分节点发送的待同步数据是不完整时，向存储系统发出重发请求，直到该服务器分节点发送的待同步数据是完整的为止；
20.所述服务器分节点数据获取单元的输出端与所述服务器分节点数据接收单元的输入端相连接；所述服务器分节点数据接收单元的输出端与所述加密算法调用单元的输入端相连接；所述加密算法调用单元的输出端与所述完整性检验码对比判断单元的输入端相连接；所述完整性检验码对比判断单元的输出端与所述数据重发请求单元的输入端相连接。
21.进一步地，所述服务器分节点数据接收单元包括待同步数据接收子单元和校验码接收子单元；
22.所述待同步数据接收子单元用于获取各服务器分节点发送的待同步数据；
23.所述校验码接收子单元用于获取各服务器分节点发送的各待同步数据对应的md5码；
24.所述待同步数据接收子单元得输出端与所述校验码接收子单元的输入端相连接；所述校验码接收子单元的输出端与所述加密算法调用单元的输入端相连接。
25.进一步地，所述完整性检验码对比判断单元包括完整性检验码对比子单元和待同步数据完整性判断子单元；
26.所述完整性检验码对比子单元用于将各服务器分节点发送的各待同步数据对应的md5码与调用md5加密算法计算得到的各待同步数据的md5码进行对比；
27.所述待同步数据完整性判断子单元用于对各服务器分节点发送的待同步数据的完整性进行判断；
28.所述完整性检验码对比子单元的输出端与所述待同步数据完整性判断子单元的输入端相连接；所述待同步数据完整性判断子单元的输出端与所述数据重发请求单元的输入端相连接；
29.所述对各服务器分节点发送的待同步数据的完整性进行判断的方法为：
30.若各服务器分节点发送的各待同步数据对应的md5码与调用md5加密算法计算得到的各待同步数据的md5码相同，则判定各服务器分节点发送的待同步数据是完整的；
31.若第i个服务器分节点发送的待同步数据对应的md5码与调用md5加密算法计算得
到的待同步数据的md5码不相同，则判定第i个服务器分节点发送的待同步数据是不完整的。
32.进一步地，所述待同步数据标记模块包括待同步数据表构建单元、数据接收时刻获取单元和待同步数据标记单元；
33.所述待同步数据表构建单元用于构建待同步数据表；
34.所述数据接收时刻获取单元用于获取接收各服务器分节点发送操作数据的时刻；
35.所述待同步数据标记单元用于将同一时刻接收到的各服务器分节点发送的操作数据标记为同时刻待同步数据，按照接收各服务器分节点发送操作数据的时刻从先到后分m组存入待同步数据表中；
36.所述待同步数据表构建单元的输出端与所述数据接收时刻获取单元的输入端相连接；所述数据接收时刻获取单元的输出端与所述待同步数据标记单元的输入端相连接；所述待同步数据标记单元的输出端与所述计算模型构建分析模块相连接。
37.进一步地，所述计算模型构建分析模块包括计算模型构建单元和计算模型分析单元；
38.所述计算模型构建单元用于构建待同步数据一致性计算模型；
39.所述计算模型分析单元用于基于各组待同步数据之间的相似度和运行环境，计算待同步数据表中各组待同步数据一致性的概率。
40.进一步地，所述构建待同步数据一致性计算模型包括：
41.获取第j组的n个待同步数据将第j组的n个待同步数据分别转换成对应的n个二进制码对应的n个二进制码的总位数对应的n个二进制码的总位数
42.分别将任意两个二进制码按位进行比较，计算任意两个待同步数据之间的相似度；
43.根据公式：
[0044][0045]
其中，表示第u个待同步数据与第v个待同步数据之间的相似度；表示第u个二进制码与第v个二进制码之间相同位数的个数；表示第u个二进制码与第v个二进制码进行比较的总位数；
[0046]
根据上述公式得到个相似度；
[0047]
第j组的n个待同步数据的相似度均值为：
[0048][0049]
其中，dj表示第j组的n个待同步数据的相似度均值；表示第u个待同步数据与第v个待同步数据之间的相似度；
[0050]
在上述技术方案中，首先，每一个待同步数据的都可以利用二进制转换法转换成对应的二进制码，利用二进制码对n个待同步数据进行两两对比，能够快速地完成相似度的对比，并计算出任意两个待同步数据的相似度，提高存储系统运行的效率；其次，计算第j组的n个待同步数据的相似度均值能够提高对待同步数据相似度计算的精度，为待同步数据的一致性计算提供基础。
[0051]
获取第j组的n个待同步数据的运行环境；
[0052]
所述运行环境包括linux系统和windows系统；
[0053]
构建运行环境影响系数，记为e；
[0054]
若运行环境为linux系统，则运行环境影响系数e＝e1；
[0055]
若运行环境为windows系统，则运行环境影响系数e＝e2；
[0056]
根据公式：
[0057]
pj＝dj*e
[0058]
其中，pj表示第j组待同步数据一致的概率；dj表示第j组的n个待同步数据的相似度均值；e表示第j组的n个待同步数据的运行环境影响系数。
[0059]
在上述技术方案中，linux系统和windows系统是两个不同的运行环境，linux系统是开源操作系统，有权访问源代码并根据用户需要更改代码，运行速度快于windows系统，比windows系统更可靠，具有很高的安全性；windows系统是商业操作系统，虽然无权访问源代码，但是可以收集所有引起隐私保护的用户详细信息，具有庞大的用户群，在硬件和驱动程序支持方面与linux系统具有相同的优先级；因此，一般情况下，windows系统的运行环境影响系数会略高于linux系统。
[0060]
进一步地，所述自动同步校验模块包括自动同步单元和二次同步校验单元；
[0061]
所述自动同步校验单元用于设置待同步数据一致性的概率阈值，当待同步数据一致性的概率超出阈值时，对待同步数据进行自动同步；
[0062]
所述二次同步校验单元用于等待自动同步完成后进行二次同步校验；
[0063]
所述自动同步校验单元的输出端与所述二次同步校验单元的输入端相连接；所述二次同步校验单元的输出端与所述报警提醒模块的输入端相连接。
[0064]
与现有技术相比，本发明所达到的有益效果是：本发明能够接收各服务器分节点的待同步数据，对各服务器分节点的待同步数据的一致性进行判断，进一步提高系统的可用性，防止因单节点数据不一致引起的系统的不可用，能够提高系统的整体性能，确保系统为用户提供可靠服务。
附图说明
[0065]
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
[0066]
图1是本发明一种基于区块链大数据的存储系统的结构示意图。
具体实施方式
[0067]
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于
本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
[0068]
请参阅图1，本发明提供技术方案：
[0069]
一种基于区块链大数据的存储系统，所述系统包括：
[0070]
所述系统包括节点数据接收模块、待同步数据标记模块、计算模型构建分析模块、自动同步校验模块和报警提醒模块；
[0071]
所述节点数据接收模块用于接收所有服务器分节点发送的待同步数据，对所有服务器分节点发送的待同步数据进行完整性判断；
[0072]
所述待同步数据标记模块用于构建待同步数据表，将同一时刻接收到的所有服务器分节点发送的待同步数据标记为同时刻待同步数据，并分组存入待同步数据表中；
[0073]
所述计算模型构建分析模块用于构建待同步数据一致性计算模型，基于各组待同步数据之间的相似度和运行环境，计算待同步数据表中各组待同步数据一致性的概率；
[0074]
所述自动同步校验模块用于设置待同步数据一致性的概率阈值，当待同步数据一致性的概率超出阈值时，对待同步数据进行自动同步，等待自动同步完成后进行二次同步校验；
[0075]
所述报警提醒模块用于当检测到待同步数据一致性的概率再次超出阈值，向管理人员发出报警提醒；
[0076]
所述节点数据接收模块的输出端与所述待同步数据标记模块的输入端相连接；所述待同步数据标记模块的输出端与所述计算模型构建分析模块的输入端相连接；所述计算模型构建分析模块的输出端与所述自动同步校验模块的输入端相连接；所述自动同步校验模块的输出端与所述报警提醒模块的输入端相连接。
[0077]
进一步地，所述节点数据接收模块包括服务器分节点数目获取单元、服务器分节点数据接收单元、加密算法调用单元、完整性校验码对比判断单元和数据重发请求单元；
[0078]
所述服务器分节点数据获取单元用于获取存储系统所有服务器分节点的数目，记为n；
[0079]
所述服务器分节点数据接收单元用于获取各服务器分节点发送的待同步数据以及各待同步数据对应的md5码；
[0080]
所述加密算法调用单元用于调用md5加密算法对接收到的各待同步数据的md5码进行计算；
[0081]
所述完整性检验码对比判断单元用于将各服务器分节点发送的各待同步数据对应的md5码与调用md5加密算法计算得到的各待同步数据的md5码进行对比并对各服务器分节点发送的待同步数据的完整性进行判断；
[0082]
所述数据重发请求单元用于当判定某个服务器分节点发送的待同步数据是不完整时，向存储系统发出重发请求，直到该服务器分节点发送的待同步数据是完整的为止；
[0083]
所述服务器分节点数据获取单元的输出端与所述服务器分节点数据接收单元的输入端相连接；所述服务器分节点数据接收单元的输出端与所述加密算法调用单元的输入端相连接；所述加密算法调用单元的输出端与所述完整性检验码对比判断单元的输入端相连接；所述完整性检验码对比判断单元的输出端与所述数据重发请求单元的输入端相连接。
[0084]
进一步地，所述服务器分节点数据接收单元包括待同步数据接收子单元和校验码接收子单元；
[0085]
所述待同步数据接收子单元用于获取各服务器分节点发送的待同步数据；
[0086]
所述校验码接收子单元用于获取各服务器分节点发送的各待同步数据对应的md5码；
[0087]
所述待同步数据接收子单元得输出端与所述校验码接收子单元的输入端相连接；所述校验码接收子单元的输出端与所述加密算法调用单元的输入端相连接。
[0088]
进一步地，所述完整性检验码对比判断单元包括完整性检验码对比子单元和待同步数据完整性判断子单元；
[0089]
所述完整性检验码对比子单元用于将各服务器分节点发送的各待同步数据对应的md5码与调用md5加密算法计算得到的各待同步数据的md5码进行对比；
[0090]
所述待同步数据完整性判断子单元用于对各服务器分节点发送的待同步数据的完整性进行判断；
[0091]
所述完整性检验码对比子单元的输出端与所述待同步数据完整性判断子单元的输入端相连接；所述待同步数据完整性判断子单元的输出端与所述数据重发请求单元的输入端相连接；
[0092]
所述对各服务器分节点发送的待同步数据的完整性进行判断的方法为：
[0093]
若各服务器分节点发送的各待同步数据对应的md5码与调用md5加密算法计算得到的各待同步数据的md5码相同，则判定各服务器分节点发送的待同步数据是完整的；
[0094]
若第i个服务器分节点发送的待同步数据对应的md5码与调用md5加密算法计算得到的待同步数据的md5码不相同，则判定第i个服务器分节点发送的待同步数据是不完整的。
[0095]
在上述技术方案中，对各服务器节点发送的待同步数据进行传输时，会对待同步的数据进行加密处理，以保证待同步数据的传输安全，那么就会在待同步数据发送前就会在各服务器节点生成对应的md5码，在接收到待同步数据后调用加密算法进行完整性检验码对比以保证数据传输过程的正确无误以及数据传输的完整。
[0096]
进一步地，所述待同步数据标记模块包括待同步数据表构建单元、数据接收时刻获取单元和待同步数据标记单元；
[0097]
所述待同步数据表构建单元用于构建待同步数据表；
[0098]
所述数据接收时刻获取单元用于获取接收各服务器分节点发送操作数据的时刻；
[0099]
所述待同步数据标记单元用于将同一时刻接收到的各服务器分节点发送的操作数据标记为同时刻待同步数据，按照接收各服务器分节点发送操作数据的时刻从先到后分m组存入待同步数据表中；
[0100]
所述待同步数据表构建单元的输出端与所述数据接收时刻获取单元的输入端相连接；所述数据接收时刻获取单元的输出端与所述待同步数据标记单元的输入端相连接；所述待同步数据标记单元的输出端与所述计算模型构建分析模块相连接。
[0101]
进一步地，所述计算模型构建分析模块包括计算模型构建单元和计算模型分析单元；
[0102]
所述计算模型构建单元用于构建待同步数据一致性计算模型；
[0103]
所述计算模型分析单元用于基于各组待同步数据之间的相似度和运行环境，计算待同步数据表中各组待同步数据一致性的概率。
[0104]
进一步地，所述构建待同步数据一致性计算模型包括：
[0105]
获取第j组的n个待同步数据将第j组的n个待同步数据分别转换成对应的n个二进制码对应的n个二进制码的总位数对应的n个二进制码的总位数
[0106]
分别将任意两个二进制码按位进行比较，计算任意两个待同步数据之间的相似度；
[0107]
根据公式：
[0108][0109]
其中，表示第u个待同步数据与第v个待同步数据之间的相似度；表示第u个二进制码与第v个二进制码之间相同位数的个数；表示第u个二进制码与第v个二进制码进行比较的总位数；
[0110]
根据上述公式得到个相似度；
[0111]
第j组的n个待同步数据的相似度均值为：
[0112][0113]
其中，dj表示第j组的n个待同步数据的相似度均值；表示第u个待同步数据与第v个待同步数据之间的相似度；
[0114]
获取第j组的n个待同步数据的运行环境；
[0115]
所述运行环境包括linux系统和windows系统；
[0116]
构建运行环境影响系数，记为e；
[0117]
若运行环境为linux系统，则运行环境影响系数e＝e1；
[0118]
若运行环境为windows系统，则运行环境影响系数e＝e2；
[0119]
根据公式：
[0120]
pj＝dj*e
[0121]
其中，pj表示第j组待同步数据一致的概率；dj表示第j组的n个待同步数据的相似度均值；e表示第j组的n个待同步数据的运行环境影响系数。
[0122]
进一步地，所述自动同步校验模块包括自动同步单元和二次同步校验单元；
[0123]
所述自动同步校验单元用于设置待同步数据一致性的概率阈值，当待同步数据一致性的概率超出阈值时，对待同步数据进行自动同步；
[0124]
所述二次同步校验单元用于等待自动同步完成后进行二次同步校验；
[0125]
所述自动同步校验单元的输出端与所述二次同步校验单元的输入端相连接；所述
二次同步校验单元的输出端与所述报警提醒模块的输入端相连接。
[0126]
在本实施例中：
[0127]
获取存储系统所有服务器分节点的数目n＝5；
[0128]
获取各服务器分节点发送的待同步数据以及各待同步数据对应的md5码；
[0129]
调用md5加密算法对接收到的各待同步数据的md5码进行计算；将各服务器分节点发送的各待同步数据对应的md5码与调用md5加密算法计算得到的各待同步数据的md5码进行对比并对各服务器分节点发送的待同步数据的完整性进行判断；
[0130]
构建待同步数据表；获取接收各服务器分节点发送操作数据的时刻；将同一时刻接收到的各服务器分节点发送的操作数据标记为同时刻待同步数据，按照接收各服务器分节点发送操作数据的时刻从先到后分6组存入待同步数据表中；
[0131]
获取第3组的5个待同步数据将第j组的n个待同步数据分别转换成对应的n个二进制码对应的n个二进制码的总位数对应的n个二进制码的总位数
[0132]
分别将任意两个二进制码按位进行比较，计算任意两个待同步数据之间的相似度；
[0133]
根据公式：
[0134][0135]
其中，表示第2个待同步数据与第3个待同步数据之间的相似度；表示第2个二进制码与第3个二进制码之间相同位数的个数；表示第2个二进制码与第3个二进制码进行比较的总位数；
[0136]
根据上述公式得到个相似度；
[0137]
第3组的5个待同步数据的相似度均值为：
[0138][0139]
其中，d3表示第3组的5个待同步数据的相似度均值；表示第u个待同步数据与第v个待同步数据之间的相似度；
[0140]
获取第3组的5个待同步数据的运行环境；
[0141]
当前各服务器节点发送待同步数据的运行环境是linux系统；
[0142]
因此运行环境影响系数e＝e2；
[0143]
根据公式：
[0144]
p3＝d3*e2[0145]
其中，p3表示第3组待同步数据一致的概率；d3表示第3组的5个待同步数据的相似度均值；e2表示第3组的5个待同步数据的运行环境影响系数。
[0146]
设置待同步数据一致性的概率阈值p0；当检测到待同步数据一致性的概率超出阈值时，
[0147]
对待同步数据进行自动同步，等待自动同步完成后进行二次同步校验。
[0148]
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。
[0149]
最后应说明的是：以上所述仅为本发明的优选实施例而已，并不用于限制本发明，尽管参照前述实施例对本发明进行了详细的说明，对于本领域的技术人员来说，其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。