一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

数据文件分配方法及装置、智能设备和计算机存储介质与流程

2021-10-19 23:54:00 来源:中国专利 TAG:装置 分配 智能 计算机 文件

技术特征:
1.一种数据文件分配方法,其特征在于,所述方法包括:按照各个数据文件的访问频率对数据文件进行排序,所述排序方式包括升序或者降序;按照排序后的顺序将所述数据文件分割为至少两个数据块,其中,各个数据块的数据文件的数量相等;对每个数据块中的数据文件进行两两合并以更新所述数据文件;返回执行所述按照各个数据文件的访问频率对数据文件进行排序的步骤,直至所述数据文件的数量达到分布式节点的数量;将所述数据文件放置至对应的分布式节点。2.如权利要求1所述的数据文件分配方法,其特征在于,所述按照排序后的顺序将所述数据文件分割为至少两个数据块的步骤包括:根据所述数据文件的数量以及所述分布式节点的数量确定目标数量;按照排序后的顺序将所述数据文件分割为所述目标数量的数据块。3.如权利要求2所述数据文件分配方法,其特征在于,所述根据所述数据文件的数量以及所述分布式节点的数量确定目标数量的步骤包括:获取所述数据文件的数量与所述分布式节点的数量的倍数之间的第一比值;将所述第一比值作为所述目标数量。4.如权利要求1所述的数据文件分配方法,其特征在于,所述按照各个数据文件的访问频率对数据文件进行排序的步骤之前,还包括:获取所述数据文件的数量与所述分布式节点的数量之间的第二比值;在所述第二比值为非整数时,生成虚拟文件作为所述数据文件,并将生成的所述数据文件的访问频率设置为零。5.如权利要求1所述数据文件分配方法,其特征在于,所述对每个数据块中的数据文件进行两两合并以更新所述数据文件的步骤包括:将所述数据块中由数据文件组成的数据列中的第一目标文件和第二目标文件合并以得到更新后的所述数据文件,在首次合并时,所述第一目标文件为所述数据列首位的数据文件,所述第二目标文件为所述数据列末尾的数据文件;将所述数据列中当前的所述第一目标文件中的下一数据文件更新为所述第一目标文件,将所述数据列中当前的所述第二目标文件中的前一数据文件更新为所述第二目标文件;返回执行所述将所述数据块中由数据文件组成的数据列中的第一目标文件和第二目标文件合并以得到更新后的所述数据文件,直至合并完所述数据块中的所有所述数据文件。6.如权利要求1所述数据文件分配方法,其特征在于,合并得到的新的所述数据文件的访问频率为合并前的两个数据文件的访问频率之和。7.如权利要求5所述数据文件分配方法,其特征在于,所述将所述数据文件放置至对应的分布式节点的步骤包括:将所述数据块中由数据文件组成的数据列中的第一目标文件和第二目标文件放置至第一分布式节点;
将所述数据列中当前的所述第一目标文件中的下一数据文件以及所述数据列中当前的所述第二目标文件中的前一数据文件放置至第二分布式节点,直至放置完所有数据块中的所有所述数据文件。8.一种数据文件分配装置,其特征在于,所述装置包括:排序模块,用于按照各个数据文件的访问频率对数据文件进行排序,所述排序方式包括升序或者降序;划分模块,用于按照排序后的顺序将所述数据文件分割为至少两个数据块,其中,各个数据块的数据文件的数量相等;合并模块,用于对每个数据块中的数据文件进行两两合并得到以更新所述数据文件;放置模块,用于将所述数据文件放置至对应的分布式节点。9.一种智能设备,其特征在于,所述智能设备包括存储器、处理器以及存储在所述存储器并可在所述处理器上运行的数据文件分配程序,所述数据文件分配程序被所述处理器执行时实现如权利要求1

7任一项所述的数据文件分配方法的各个步骤。10.一种计算机存储介质,其特征在于,所述计算机存储介质存储有数据文件分配程序,所述数据文件分配程序被处理器执行时实现如权利要求1

7任一项所述的数据文件分配方法的各个步骤。

技术总结
本发明公开了一种数据文件分配方法及装置、智能设备和计算机存储介质,所述方法包括以下步骤:按照各个数据文件的访问频率对数据文件进行排序,所述排序方式包括升序或者降序;按照排序后的顺序将所述数据文件分割为至少两个数据块,其中,各个数据块的数据文件的数量相等;对每个数据块中的数据文件进行两两合并以更新所述数据文件;返回执行所述按照各个数据文件的访问频率对数据文件进行排序的步骤,直至所述数据文件的数量达到分布式节点的数量;将所述数据文件放置至对应的分布式节点,解决现有技术中数据文件分配不均衡导致分布式系统不稳定的问题,提高分布式系统的稳定性。性。性。


技术研发人员:张继连 翁健 吴永东 耿光刚
受保护的技术使用者:暨南大学
技术研发日:2021.04.14
技术公布日:2021/10/18
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献

  • 日榜
  • 周榜
  • 月榜