一种去中心化社区的数据同步方法、系统、设备及存储介质与流程

摘要: 本发明涉及数据处理,尤其涉及一种去中心化社区的数据同步方法、系统、设备及存储介质。背景技术:1、传统的网络社区采用中心服务器架构,用户通过客户端(app端)发布...
一种去中心化社区的数据同步方法、系统、设备及存储介质与流程

本发明涉及数据处理,尤其涉及一种去中心化社区的数据同步方法、系统、设备及存储介质。

背景技术:

1、传统的网络社区采用中心服务器架构,用户通过客户端(app端)发布数据,数据上传至平台公司的服务器进行存储和计算,用户并不真正拥有自己的数据,且在内容审核、流量分配等方面受制于平台方的算法规则。

2、为应对中心化平台对数据资产和流量的集中掌控,去中心化社交平台应运而生。现有的去中心化社区主要基于若干去中心化社交协议实现,例如lens protocol和nostr等。但这些方案各自存在以下技术缺陷:

3、(一)lens protocol的gas费问题

4、lens protocol基于区块链实现社交数据的存储。用户在该协议上执行的每一个社交操作(如发帖、点赞、评论、关注)所产生的数据均需写入公链,每一次写入均需从用户钱包中支付相应的gas费用。由于gas费用随网络拥堵状况波动且总体成本较高,lensprotocol运营方目前选择为用户代缴gas费以维持用户规模。根据相关测算,若lensprotocol的日活跃用户数达到传统主流社交平台的水平,其每周需承担的gas费总额将达到数百万美元级别,该成本对于项目运营方而言难以长期承担;而若将gas费转嫁由用户承担,又会导致用户大量流失。此外,由于数据一经上链即难以删除,用户无法真正自主控制其已发布内容的存留。

5、(二)nostr协议的功能受限问题

6、nostr协议采用中继(relay)服务器架构,用户数据存储于relay层,多个用户订阅同一relay服务器。受限于该架构下的网络通信开销,nostr协议规定不支持图片上传,仅支持纯文字内容发布,无法满足用户在社交场景中对多模态内容(图片、视频等)的发布需求。

7、(三)去中心化环境下的内容审核困难

8、在缺乏中心化服务器的p2p网络环境中,不存在统一的中心节点对发布内容进行审核过滤,使得不良信息的屏蔽在去中心化架构下难以有效实现。需要解释说明的是,p2p网络(peer-to-peer,对等网络)是一种去中心化的分布式网络架构,其中每个节点(peer)既充当客户端也充当服务器,直接相互通信和共享资源,无需依赖专用中心服务器

9、(四)去中心化网络中的数据检索延迟

10、在传统的p2p网络中,数据请求的典型处理方式为:请求方将查询请求发送至网络中的某一节点,若该节点未存储目标数据,则按照dht(分布式哈希表)、洪泛或gossip等算法将请求转发至下一节点,直至获取足够数据或达到预设的最大跳数限制。该多跳转发机制导致查询延迟随网络规模增大而显著增加,影响用户体验。

技术实现思路

1、本申请旨在至少解决现有技术中存在的技术问题,提供一种去中心化社区的数据同步方法、系统、设备及存储介质。

2、第一方面,本发明提供的一种去中心化社区的数据同步方法,应用于第一节点,所述第一节点为部署于用户侧的边缘计算存储设备,所述第一节点已加入一p2p网络,所述p2p网络中包括至少一个第二节点,第二节点用于表示p2p网络中除第一节点之外的任意其他用户侧边缘计算存储设备,所述方法包括:

3、接收用户侧对应的终端设备发送的用户操作内容数据,将所述用户操作内容数据存储于第一节点,第一节点对应的边缘计算存储设备将用户操作内容数据默认设置为未广播状态;

4、第一节点以预设时间周期扫描用户操作内容数据的广播状态,当识别到用户操作内容数据为未广播状态时,触发广播操作流程;

5、广播操作流程包括:

6、从节点池中选取至少一个所述第二节点;

7、建立与所述第二节点之间的点对点数据通道,并将处于所述未广播状态的所述用户操作内容数据发送至所述第二节点,以使所述第二节点在本地存储所述用户操作内容数据的副本;

8、将完成广播操作流程的所述用户操作内容数据标记为已广播状态。

9、第二方面,本发明提供一种去中心化社区的数据同步系统,所述系统包括:

10、接收模块,用于接收用户侧对应的终端设备发送的用户操作内容数据,将所述用户操作内容数据存储于第一节点,第一节点对应的边缘计算存储设备将用户操作内容数据默认设置为未广播状态;

11、广播模块,用于第一节点以预设时间周期扫描用户操作内容数据的广播状态,当识别到用户操作内容数据为未广播状态时,触发广播操作流程;

12、广播操作流程包括:

13、从节点池中选取至少一个所述第二节点;

14、建立与所述第二节点之间的点对点数据通道,并将处于所述未广播状态的所述用户操作内容数据发送至所述第二节点,以使所述第二节点在本地存储所述用户操作内容数据的副本;

15、将完成广播操作流程的所述用户操作内容数据标记为已广播状态。

16、第三方面,本发明提供一种电子设备,所述电子设备包括:

17、至少一个处理器;以及,

18、与所述至少一个处理器通信连接的存储器;其中,

19、所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述所述的去中心化社区的数据同步方法。

20、第四方面,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一个计算机程序,所述至少一个计算机程序被电子设备中的处理器执行以实现上述所述的去中心化社区的数据同步方法。

21、综上所述,本申请包括以下有益技术效果:

22、本申请通过将用户操作内容数据存储于用户侧部署的边缘计算存储设备(第一节点),并利用p2p网络将数据副本分发至其他节点(第二节点),避免了将数据存储于高成本的区块链网络或中心化服务器上,显著降低了数据存储和同步的运营成本;同时,本申请利用预设时间周期扫描,使得第一节点能够自动、高效地识别并触发尚未同步的数据进行广播,优化了数据同步的启动策略;此外,通过从节点池中选取目标节点,而非向p2p网络中所有节点进行广播,能够有针对性地选择健康、可靠的第二节点进行数据同步,避免了无效的网络连接和数据传输,提升了对网络和处理器资源的利用率;进一步地,通过将用户操作内容数据预先同步至p2p网络中的多个第二节点并存储副本,使得后续用户在发起数据查询请求时,其关联的节点能够在本地存储的数据中直接响应,无需经过p2p网络的多级转发,从而显著降低了数据访问延迟,提升了用户体验,并增强了系统的容错能力和数据可靠性,保障了去中心化社区数据的持续可用性。

1.一种去中心化社区的数据同步方法,应用于第一节点,所述第一节点为部署于用户侧的边缘计算存储设备,所述第一节点已加入一p2p网络,所述p2p网络中包括至少一个第二节点,第二节点用于表示p2p网络中除第一节点之外的任意其他用户侧边缘计算存储设备,其特征在于,所述方法包括:

2.如权利要求1所述的去中心化社区的数据同步方法,其特征在于,所述用户操作内容数据包括:帖子发布数据、评论数据、点赞数据中的至少一种。

3.如权利要求1所述的去中心化社区的数据同步方法,其特征在于,所述节点池为由所述第一节点维护的、用于记录所述p2p网络中至少一个候选第二节点的节点信息的数据库;所述节点信息包括能够反映所述第二节点网络属性与稳定性的特征参数;

4.如权利要求3所述的去中心化社区的数据同步方法,其特征在于,节点池动态更新的步骤包括:

5.如权利要求4所述的去中心化社区的数据同步方法,其特征在于,节点得分的计算公式为

6.如权利要求1所述的去中心化社区的数据同步方法,其特征在于,所述延迟等级得分由所述第一节点根据对各候选节点进行网络延迟测量的结果确定,所述历史在线得分由所述第一节点根据各候选节点在预设周期内的在线记录确定,所述网络地址转换类型得分由所述第一节点根据各候选节点的网络地址转换类型确定,所述带宽等级得分由所述第一节点根据对各候选节点进行带宽探测的结果确定;候选节点为p2p网络中的第二节点。

7.如权利要求1所述的去中心化社区的数据同步方法,其特征在于,所述方法还包括:

8.一种去中心化社区的数据同步系统,用于实现权利要求1至7任一项所述的去中心化社区的数据同步方法,其特征在于,包括:

9.一种电子设备,其特征在于,所述电子设备包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序;所述计算机程序被处理器执行时实现如权利要求1至7任意一项所述的去中心化社区的数据同步方法。