基于云存储地址的数据访问方法、装置、计算机设备及介质与流程

1.本发明涉及数据处理领域，尤其涉及一种基于云存储地址的数据访问方法、装置、计算机设备及介质。


背景技术：

2.随着计算机技术的快速发展，越来越多的事务通过网络进行处理，访问互联网络来获取信息，成为日常生活中的一种很常见的事情，通过网络进行数据访问，主要是通过客户端访问指定域名或者ip地址，进而从指定域名或者ip地址对应的存储服务器中获取对应的数据资源，来获取相应的信息。目前用于进行访问的协议较多，不同的云存储服务应用商往往会根据自己的实际需求进行选择，现有方式需要针对每一个供应商进行配置地址转换，使得访问云存储资源的效率较低。


技术实现要素：

3.本发明实施例提供一种基于云存储的数据访问方法、装置、计算机设备和存储介质，以提高基于云存储的数据访问的效率。
4.为了解决上述技术问题，本技术实施例提供一种基于云存储地址的数据访问方法，包括：
5.在接收到客户端的访问请求时，获取所述访问请求中包含的初始地址；
6.对所述初始地址进行解析，得到所述初始地址对应的地址类型，其中，所述地址类型包括物理路径地址和虚拟主机地址；
7.基于所述地址类型，按照预设的地址转化方式，对所述初始地址进行转化，得到转化地址；
8.从存储的云端存储服务器地址列表中，获取与所述转化地址匹配的地址，作为目标地址，并基于所述目标地址进行云端存储数据的访问。
9.可选地，所述对所述初始地址进行解析，得到所述初始地址对应的地址类型包括：
10.基于简单存储服务s3协议，对所述初始地址进行解析，得到所述初始地址中的http host header包头；
11.通过动态全局主机解析，确定所述http host header包头中的存储段名称；
12.根据所存储段名称和预设的类型判断条件，确定所述初始地址对应的地址类型。
13.可选地，所述地址类型为物理路径地址，所述基于所述地址类型，按照预设的地址转化方式，对所述初始地址进行转化，得到转化地址包括：
14.从所述存储段名称对应的存储段中获取访问对象名；
15.采用所述初始地址对应的域名名称、存储段名称和所述访问对象名的顺序进行组合，生成所述转化地址。
16.可选地，所述地址类型为虚拟主机地址，所述基于所述地址类型，按照预设的地址转化方式，对所述初始地址进行转化，得到转化地址包括：
17.从所述存储段名称对应的存储段中获取访问对象名；
18.采用存储段名称、所述初始地址对应的域名名称和所述访问对象名的顺序进行组合，生成所述转化地址。
19.可选地，所述从存储的云端存储服务器地址列表中，获取与所述转化地址匹配的地址，作为目标地址包括：
20.对所述转化地址进行哈希计算，得到哈希结果；
21.获取预设的哈希映射表，并基于所述哈希结果和所述预设的映射关系表，确定所述哈希结果的地址，作为所述目标地址。
22.为了解决上述技术问题，本技术实施例还提供一种基于云存储地址的数据访问装置，包括：
23.请求接收模块，用于在接收到客户端的访问请求时，获取所述访问请求中包含的初始地址；
24.类型解析模块，用于对所述初始地址进行解析，得到所述初始地址对应的地址类型，其中，所述地址类型包括物理路径地址和虚拟主机地址；
25.地址转化模块，用于基于所述地址类型，按照预设的地址转化方式，对所述初始地址进行转化，得到转化地址；
26.地址匹配模块，用于从存储的云端存储服务器地址列表中，获取与所述转化地址匹配的地址，作为目标地址，并基于所述目标地址进行云端存储数据的访问。
27.可选地，所述类型解析模块包括：
28.地址解析单元，用于基于简单存储服务s3协议，对所述初始地址进行解析，得到所述初始地址中的http host header包头；
29.字段识别单元，用于通过动态全局主机解析，确定所述http host header包头中的存储段名称；
30.类型判断单元，用于根据所存储段名称和预设的类型判断条件，确定所述初始地址对应的地址类型。
31.可选地，所述地址类型为物理路径地址，所述地址转化模块包括：
32.第一读取单元，用于从所述存储段名称对应的存储段中获取访问对象名；
33.第一组合单元，用于采用所述初始地址对应的域名名称、存储段名称和所述访问对象名的顺序进行组合，生成所述转化地址。
34.可选地，所述地址类型为虚拟主机地址，所述地址转化模块包括：
35.第二读取单元，用于从所述存储段名称对应的存储段中获取访问对象名；
36.第二组合单元，用于采用存储段名称、所述初始地址对应的域名名称和所述访问对象名的顺序进行组合，生成所述转化地址。
37.可选地，所述地址匹配模块包括：
38.哈希计算单元，用于对所述转化地址进行哈希计算，得到哈希结果；
39.地址匹配单元，用于获取预设的哈希映射表，并基于所述哈希结果和所述预设的映射关系表，确定所述哈希结果的地址，作为所述目标地址。
40.为了解决上述技术问题，本技术实施例还提供一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述
计算机程序时实现上述基于云存储地址的数据访问方法的步骤。
41.为了解决上述技术问题，本技术实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述基于云存储地址的数据访问方法的步骤。
42.本发明实施例提供的基于云存储地址的数据访问方法、装置、计算机设备及存储介质，在接收到客户端的访问请求时，获取访问请求中包含的初始地址，对初始地址进行解析，得到初始地址对应的地址类型，基于地址类型，按照预设的地址转化方式，对初始地址进行转化，得到转化地址，从存储的云端存储服务器地址列表中，获取与转化地址匹配的地址，作为目标地址，并基于目标地址进行云端存储数据的访问，实现对不同类型的云存储地址的访问请求进行快速响应，提高了数据访问效率。
附图说明
43.为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
44.图1是本技术的应用环境示意图；
45.图2是本技术的基于云存储地址的数据访问方法的一个实施例的流程图；
46.图3是根据本技术的基于云存储地址的数据访问装置的一个实施例的结构示意图；
47.图4是根据本技术的计算机设备的一个实施例的结构示意图。
具体实施方式
48.除非另有定义，本文所使用的所有的技术和科学术语与属于本技术的技术领域的技术人员通常理解的含义相同；本文中在申请的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本技术；本技术的说明书和权利要求书及上述附图说明中的术语“包括”和“具有”以及它们的任何变形，意图在于覆盖不排他的包含。本技术的说明书和权利要求书或上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。
49.在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本技术的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
50.下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
51.请参阅图1，如图1所示，系统架构100可以包括终端设备101、102、103，网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。
网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。
52.用户可以使用终端设备101、102、103通过网络104与服务器105交互，以接收或发送消息等。
53.终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、电子书阅读器、mp3播放器(moving picture eperts group audio layer iii，动态影像专家压缩标准音频层面3)、mp4(moving picture eperts group audio layer iv，动态影像专家压缩标准音频层面4)播放器、膝上型便携计算机和台式计算机等等。
54.服务器105可以是提供各种服务的服务器，例如对终端设备101、102、103上显示的页面提供支持的后台服务器。
55.需要说明的是，本技术实施例所提供的基于云存储地址的数据访问方法由服务器执行，相应地，基于云存储地址的数据访问装置设置于服务器中。
56.应该理解，图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器，本技术实施例中的终端设备101、102、103具体可以对应的是实际生产中的应用系统。
57.请参阅图2，图2示出本发明实施例提供的一种基于云存储地址的数据访问方法，详述如下：
58.s201：在接收到客户端的访问请求时，获取访问请求中包含的初始地址。
59.s202：对初始地址进行解析，得到初始地址对应的地址类型，其中，地址类型包括物理路径地址和虚拟主机地址。
60.在一具体可选实施方式中，也即步骤s202中，对初始地址进行解析，得到初始地址对应的地址类型包括：
61.基于简单存储服务s3协议，对初始地址进行解析，得到初始地址中的http host header包头；
62.通过动态全局主机解析，确定http host header包头中的存储段名称；
63.根据所存储段名称和预设的类型判断条件，确定初始地址对应的地址类型。
64.其中，简单存储服务(simple storage service)s3协议理论上是一个全球存储区域网络(san)协议，它表现为一个超大的硬盘，可以在其中存储和检索数字资产，通过s3存储和检索的资产被称为对象。对象存储在存储段(bucket)中。您可以用硬盘进行类比：对象就像是文件，存储段就像是文件夹(或目录)。与硬盘一样，对象和存储段也可以通过统一资源标识符(uniform resource identifier，uri)查找。
65.s203：基于地址类型，按照预设的地址转化方式，对初始地址进行转化，得到转化地址。
66.在一具体可选实施方式中，地址类型为物理路径地址，基于地址类型，按照预设的地址转化方式，对初始地址进行转化，得到转化地址包括：
67.从存储段名称对应的存储段中获取访问对象名；
68.采用初始地址对应的域名名称、存储段名称和访问对象名的顺序进行组合，生成转化地址。
69.在一具体可选实施方式中，地址类型为虚拟主机地址，基于地址类型，按照预设的
地址转化方式，对初始地址进行转化，得到转化地址包括：
70.从存储段名称对应的存储段中获取访问对象名；
71.采用存储段名称、初始地址对应的域名名称和访问对象名的顺序进行组合，生成转化地址。
72.s204：从存储的云端存储服务器地址列表中，获取与转化地址匹配的地址，作为目标地址，并基于目标地址进行云端存储数据的访问。
73.具体地，从存储的云端存储服务器地址列表中，获取与转化地址匹配的地址，作为目标地址包括：
74.对转化地址进行哈希计算，得到哈希结果；
75.获取预设的哈希映射表，并基于哈希结果和预设的映射关系表，确定哈希结果的地址，作为目标地址。
76.其中，哈希映射表就是一种以键-值(key-indexed)存储数据的结构，通过输入待查找的值即key，即可查找到其对应的值，本实施例中，提前预设好每个云端存储服务器地址对应的哈希映射表，在得到哈希结果后，根据哈希结果的值，即可确定对应的云端存储服务器地址，作为目标地址。
77.进一步地，在目标地址为ipv4时，可根据实际需要，对目标地址进行ipv6地址的转化，具体包括：
78.将目标地址进行十六进制转换，得到中间地址，中间地址包括四个分组；
79.将中间地址的第一组和第二组进行合并，作为更新后的第一组，将中间地址的第三组和第四组进行合并，得到更新后的第二组，并将更新后的第一组和更新后的第二组依序组合，得到更新后的中间地址；
80.在更新后的中间地址前96位进行补零处理，得到ipv6地址。
81.在一具体示例中，一目标地址的地址类型为ipv4类型，具体为135.75.43.52，对该目标地址进行十六进制转换，得到转换地址为87.4b.2b.34，得到的该转化地址87.4b.2b.34串地址一组还是8位，所以需要两组合成，将转换地址的第一组和第二组进行合并，得到874b，将转换地址的第三组和第四组进行合并，得到2b34，并依序组合，得到更新后的转换地址874b.2b34，进而进行前96位补零处理，得到0000:0000:0000:0000:0000:0000:874b:2b34或者::874b:2b34。
82.需要说明的是，通过对目标地址进行ipv4向ipv6的转化，有利于提高数据访问的兼容性。
83.本实施例中，在接收到客户端的访问请求时，获取访问请求中包含的初始地址，对初始地址进行解析，得到初始地址对应的地址类型，基于地址类型，按照预设的地址转化方式，对初始地址进行转化，得到转化地址，从存储的云端存储服务器地址列表中，获取与转化地址匹配的地址，作为目标地址，并基于目标地址进行云端存储数据的访问，实现对不同类型的云存储地址的访问请求进行快速响应，提高了数据访问效率。
84.应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
85.图3示出与上述实施例基于云存储地址的数据访问方法一一对应的基于云存储地
址的数据访问装置的原理框图。如图3所示，该基于云存储地址的数据访问装置包括节点状态确定模块31、有效节点获取模块32、性能分值计算模块33、目标节点确定模块34和数据分发处理模块35。各功能模块详细说明如下：
86.请求接收模块31，用于在接收到客户端的访问请求时，获取访问请求中包含的初始地址；
87.类型解析模块32，用于对初始地址进行解析，得到初始地址对应的地址类型，其中，地址类型包括物理路径地址和虚拟主机地址；
88.地址转化模块33，用于基于地址类型，按照预设的地址转化方式，对初始地址进行转化，得到转化地址；
89.地址匹配模块34，用于从存储的云端存储服务器地址列表中，获取与转化地址匹配的地址，作为目标地址，并基于目标地址进行云端存储数据的访问。
90.可选地，类型解析模块32包括：
91.地址解析单元，用于基于简单存储服务s3协议，对初始地址进行解析，得到初始地址中的http host header包头；
92.字段识别单元，用于通过动态全局主机解析，确定http host header包头中的存储段名称；
93.类型判断单元，用于根据所存储段名称和预设的类型判断条件，确定初始地址对应的地址类型。
94.可选地，地址类型为物理路径地址，地址转化模块33包括：
95.第一读取单元，用于从存储段名称对应的存储段中获取访问对象名；
96.第一组合单元，用于采用初始地址对应的域名名称、存储段名称和访问对象名的顺序进行组合，生成转化地址。
97.可选地，地址类型为虚拟主机地址，地址转化模块33还包括：
98.第二读取单元，用于从存储段名称对应的存储段中获取访问对象名；
99.第二组合单元，用于采用存储段名称、初始地址对应的域名名称和访问对象名的顺序进行组合，生成转化地址。
100.可选地，地址匹配模块35包括：
101.哈希计算单元，用于对转化地址进行哈希计算，得到哈希结果；
102.地址匹配单元，用于获取预设的哈希映射表，并基于哈希结果和预设的映射关系表，确定哈希结果的地址，作为目标地址。
103.关于基于云存储地址的数据访问装置的具体限定可以参见上文中对于基于云存储地址的数据访问方法的限定，在此不再赘述。上述基于云存储地址的数据访问装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
104.为解决上述技术问题，本技术实施例还提供计算机设备。具体请参阅图4，图4为本实施例计算机设备基本结构框图。
105.所述计算机设备4包括通过系统总线相互通信连接存储器41、处理器42、网络接口43。需要指出的是，图中仅示出了具有组件连接存储器41、处理器42、网络接口43的计算机
设备4，但是应理解的是，并不要求实施所有示出的组件，可以替代的实施更多或者更少的组件。其中，本技术领域技术人员可以理解，这里的计算机设备是一种能够按照事先设定或存储的指令，自动进行数值计算和/或信息处理的设备，其硬件包括但不限于微处理器、专用集成电路(application specific integrated circuit，asic)、可编程门阵列(field－programmable gate array，fpga)、数字处理器(digital signal processor，dsp)、嵌入式设备等。
106.所述计算机设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述计算机设备可以与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互。
107.所述存储器41至少包括一种类型的可读存储介质，所述可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如，sd或d界面显示存储器等)、随机访问存储器(ram)、静态随机访问存储器(sram)、只读存储器(rom)、电可擦除可编程只读存储器(eeprom)、可编程只读存储器(prom)、磁性存储器、磁盘、光盘等。在一些实施例中，所述存储器41可以是所述计算机设备4的内部存储单元，例如该计算机设备4的硬盘或内存。在另一些实施例中，所述存储器41也可以是所述计算机设备4的外部存储设备，例如该计算机设备4上配备的插接式硬盘，智能存储卡(smart media card,smc)，安全数字(secure digital,sd)卡，闪存卡(flash card)等。当然，所述存储器41还可以既包括所述计算机设备4的内部存储单元也包括其外部存储设备。本实施例中，所述存储器41通常用于存储安装于所述计算机设备4的操作系统和各类应用软件，例如电子文件的控制的程序代码等。此外，所述存储器41还可以用于暂时地存储已经输出或者将要输出的各类数据。
108.所述处理器42在一些实施例中可以是中央处理器(central processing unit，cpu)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器42通常用于控制所述计算机设备4的总体操作。本实施例中，所述处理器42用于运行所述存储器41中存储的程序代码或者处理数据，例如运行数据访问的程序代码。
109.所述网络接口43可包括无线网络接口或有线网络接口，该网络接口43通常用于在所述计算机设备4与其他电子设备之间建立通信连接。
110.本技术还提供了另一种实施方式，即提供一种计算机可读存储介质，所述计算机可读存储介质存储有数据访问程序，所述数据访问程序可被至少一个处理器执行，以使所述至少一个处理器执行如上述的基于云存储地址的数据访问方法的步骤。
111.通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本技术各个实施例所述的方法。
112.通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质
(如rom/ram、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本技术各个实施例所述的方法。
113.通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本技术各个实施例所述的方法。
114.显然，以上所描述的实施例仅仅是本技术一部分实施例，而不是全部的实施例，附图中给出了本技术的较佳实施例，但并不限制本技术的专利范围。本技术可以以许多不同的形式来实现，相反地，提供这些实施例的目的是使对本技术的公开内容的理解更加透彻全面。尽管参照前述实施例对本技术进行了详细的说明，对于本领域的技术人员来而言，其依然可以对前述各具体实施方式所记载的技术方案进行修改，或者对其中部分技术特征进行等效替换。凡是利用本技术说明书及附图内容所做的等效结构，直接或间接运用在其他相关的技术领域，均同理在本技术专利保护范围之内。