一种AI平台的多用户存储对接方法和AI平台与流程

一种ai平台的多用户存储对接方法和ai平台
技术领域
1.本发明涉及人工智能技术领域，尤其涉及一种ai平台的多用户存储对接方法和ai平台。


背景技术：

2.人工智能ai平台是用于为ai产品提供一个产品设计和优化的工作平台。为了实现ai平台的上述功能，需要对接用户存储系统，然而目前市场存在多种用户存储系统，且每种用户存储系统都有着独有的优势和弊端。
3.因为多种用户存储系统之间是相互独立的，所以ai平台在对接用户存储系统之前就需要确定需要对接的存储系统类型，并完成相关部署。这样就导致用户在使用过程时都不得不选择其中一种作为主要研发的存储系统，并且不能够切换，以免出现用户信息和业务信息丢失的情况。这样就限制了ai平台对不同用户存储系统的兼容性，降低了ai平台的工作和使用效率。


技术实现要素：

4.本发明提供了一种ai平台的多用户存储对接方法和ai平台，旨在解决现有技术中ai平台需要提前确定需要对接的用户存储系统，降低ai平台对不同用户存储系统的兼容性，降低ai平台的工作和使用效率的问题。
5.根据本发明的第一方面，本发明提供了一种ai平台的多用户存储对接方法，该ai平台的多用户存储对接方法用于ai平台，ai平台包括识别存储块；多用户存储对接方法包括：
6.当获取到ai平台切换用户存储系统的切换指令时，使用识别存储块判断待切换的用户存储系统是否可用；
7.若判定待切换的用户存储系统可用，则备份当前用户存储系统的数据信息至ai平台的数据库；
8.将待切换的用户存储系统的数据信息同步至ai平台的数据库；
9.当数据信息同步完成时，将同步结果反馈至ai平台的服务层。
10.优选地，所述使用识别存储块判断待切换的用户存储系统是否可用的步骤，包括：
11.识别存储块访问待切换的用户存储系统；
12.当识别存储块访问用户存储系统成功时，判定用户存储系统可用。
13.优选地，所述多用户存储对接方法，还包括：
14.使用识别存储块识别用户存储系统的存储产品类并发送至ai平台的服务层；
15.ai平台的服务层根据存储产品类，从数据库中调取对应的通信协议；
16.识别存储块使用通信协议，将用户存储系统与ai平台对接；
17.当用户存储系统与ai平台对接成功时，执行判断待切换的用户存储系统是否可用的步骤。
18.优选地，所述将待切换的用户存储系统的数据信息同步至ai平台的数据库的步骤，包括：
19.将用户存储系统的用户信息进行标记，并同步至数据库中；
20.根据ai平台的服务层指令，将用户存储系统的业务信息同步至数据库，并反馈至ai平台的服务层。
21.优选地，所述多用户存储对接方法，还包括：
22.若判定用户存储系统不可用，则回滚至数据库中备份的当前用户存储系统的数据信息，并提示切换失败原因。
23.根据本发明的第二方面，本发明还提供了一种ai平台，包括：
24.ai平台包括服务层、数据库和识别存储块；其中，
25.识别存储块，用于当获取到ai平台切换用户存储系统的切换指令时，使用识别存储块判断待切换的用户存储系统是否可用；
26.识别存储块，还用于若判定待切换的用户存储系统可用时，备份当前用户存储系统的数据信息至ai平台的数据库；
27.识别存储块，还用于将待切换的用户存储系统的数据信息同步至ai平台的数据库；
28.识别存储块，还用于当数据信息同步完成时，将同步结果反馈至ai平台的服务层。
29.优选地，所述识别存储块，具体用于访问待切换的用户存储系统；当识别存储块访问用户存储系统成功时，判定用户存储系统可用。
30.优选地，所述识别存储块，还用于识别用户存储系统的存储产品类并发送至ai平台的服务层；
31.ai平台的服务层，用于根据存储产品类，从数据库中调取对应的通信协议；
32.识别存储块，还用于使用通信协议，将用户存储系统与ai平台对接；
33.识别存储块，还用于当用户存储系统与ai平台对接成功时，执行判断待切换的用户存储系统是否可用的步骤。
34.优选地，所述识别存储块，具体还用于将用户存储系统的用户信息进行标记，并同步至数据库中；
35.识别存储块，具体还用于根据ai平台的服务层指令，将用户存储系统的业务信息同步至数据库，并反馈至ai平台的服务层。
36.优选地，所述ai平台中，识别存储块，还用于若判定用户存储系统不可用时，回滚至数据库中备份的当前用户存储系统的数据信息，并提示切换失败原因。
37.本技术提供的ai平台的多用户存储对接方法和ai平台，通过设置识别存储块，在识别存储块获得ai平台切换用户存储系统的切换指令时，判断待切换的用户存储系统是否可用，在判定可用时备份当前用户存储系统的数据信息至ai平台的数据库，这样就能够留取当前用户存储系统的数据信息，然后将待切换用户存储系统的数据信息同步至该数据库，再反馈至ai平台的服务层，实现两种用户存储系统的实时和无缝切换，同时保证原有的用户存储系统的数据信息保存而不丢失，从而实现ai平台对不同用户存储系统的兼容，无需提前确定需要对接的用户存储系统，提高了ai平台的工作和使用效率。
附图说明
38.为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图示出的结构获得其他的附图。
39.图1是本发明实施例提供的第一种ai平台的多用户存储对接方法的流程示意图；
40.图2是图1所示实施例提供的一种用户存储系统可用性的判断方法的流程示意图；
41.图3是图1所示实施例提供的一种数据信息的同步方法的流程示意图；
42.图4是本发明实施例提供的第二种ai平台的多用户存储对接方法的流程示意图；
43.图5是本发明实施例提供的一种ai平台的多用户存储对接系统的结构示意图；
44.图6是本发明实施例提供的一种识别存储块的结构示意图。
45.本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
46.应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
47.本发明实施例的主要技术问题如下：
48.现有技术中因为多种用户存储系统之间是相互独立的，所以ai平台在对接用户存储系统之前就需要确定需要对接的存储系统类型，并完成相关部署。这样就导致用户在使用过程时都不得不选择其中一种作为主要研发的存储系统，并且不能够切换，以免出现用户信息和业务信息丢失的情况。这样就限制了ai平台对不同用户存储系统的兼容性，降低了ai平台的工作和使用效率。
49.为解决上述问题，本技术下述实施例提供的ai平台的多用户存储对接方案，在ai平台中设置识别存储块，如图5和图6所示，该识别存储块的功能主要如下：
50.(1)识别下游对接存储产品类，并反馈至ai页面，页面显示所有被识别到的存储系统信息。
51.(2)获取下游对接存储的用户信息，交互与ai平台的数据库，并按照对接存储划分不同存储用户。
52.(3)获取下游对接存储系统中的训练数据信息，反馈至ai平台的前端页面，展示正确无误的信息。
53.(4)负责切换对接下游存储，并作为桥梁可以选择从存储1拷贝数据至存储2下，例如从用户存储系统存储至ai平台本地的数据库中。
54.为了解决上述问题，具体参见图1，图1为本发明实施例提供的一种ai平台的多用户存储对接方法的流程示意图。具体如图1所示，该多用户存储对接方法包括：
55.s110：当获取到ai平台切换用户存储系统的切换指令时，使用识别存储块判断待切换的用户存储系统是否可用。例如用户在ai平台的显示界面发送从网络文件系统nfs切换到分布式文件系统ceph的切换指令，ai平台将该指令发送至识别存储块，通过识别存储块根据该切换指令判断切换的用户存储系统是否可用，从而进行文件系统的切换。
56.具体作为一种优选的实施例，如图2所示，该使用识别存储块判断待切换的用户存储系统是否可用的步骤具体包括：
57.s111：识别存储块访问待切换的用户存储系统；
58.s112：当识别存储块访问用户存储系统成功时，判定用户存储系统可用。
59.本技术实施例提供的技术方案，识别存储块在接收到上述切换指令时，会访问待切换的用户存储系统，如果数据访问成功则说明该用户存储系统可用，这样就能够将该用户存储系统切换到ai平台。因此识别存储块能够作为桥梁将用户存储系统交互与数据库，按照对接存储划分不同的存储用户。
60.在使用识别存储块判断待切换的用户存储系统是否可用后，图1提供的ai平台的多用户存储对接方法还包括以下步骤：
61.s120：若判定待切换的用户存储系统可用，则备份当前用户存储系统的数据信息至ai平台的数据库。通过备份当前用户存储系统的数据信息至ai平台的数据库，能够使得ai平台获取当前用户存储系统的基本信息，在下次切换到该当前用户存储系统时，使用该基本信息再次对接该用户存储系统，从而提高切换效率，另外在切换失败时可从ai平台的数据库中回滚上述备份的数据信息，从而使得ai平台正常工作。
62.在备份当前用户存储系统的数据信息后，图1提供的ai平台的多用户存储对接方法还包括以下步骤：
63.s130：将待切换的用户存储系统的数据信息同步至ai平台的数据库。通过将待切换的用户存储系统的数据信息同步至ai平台的数据库，例如用户信息和训练数据信息，这样就能够使得ai平台根据数据库中的数据信息对用户存储系统进行相应处理。
64.具体作为一种优选的实施例，如图3所示，该将待切换的用户存储系统的数据信息同步至ai平台的数据库的步骤包括：
65.s131：将用户存储系统的用户信息进行标记，并同步至数据库中。通过对用户信息进行标记然后同步至数据库相应信息，就能够完成用户存储系统中信息的载入，从而使得用户存储系统切换成功。
66.s132：根据ai平台的服务层指令，将用户存储系统的业务信息同步至数据库，并反馈至ai平台的服务层。根据该ai平的服务层指令将用户业务信息同步至数据库，能够使得ai平台识别该用户存储系统对应的用户并根据业务信息进行相应处理。
67.s140：当数据信息同步完成时，将同步结果反馈至ai平台的服务层。
68.通过将同步结果反馈至ai平台的服务层，能够通知ai平台的服务层，用户存储系统的数据信息已同步完成，此时该服务层可从本地数据库中调取用户存储系统的用户信息和业务信息，从而完成相应数据的操作。
69.作为一种优选的实施例，如图1所示，该多用户存储对接方法还包括：
70.s150：若判定用户存储系统不可用，则回滚至数据库中备份的当前用户存储系统的数据信息，并提示切换失败原因。
71.若不同存储切换过程中若失败则自动执行回滚操作，这样不用备份待切换的用户存储系统的数据(若存在部分备份的文件则直接删除)，读取原有用户存储系统的备份文件并生成用户信息交互至ai服务层和数据库，回滚完毕返回页面切换失败原因，从而保护ai平台。
72.本技术实施例提供的ai平台的多用户存储对接方法，通过设置识别存储块，在识别存储块获得ai平台切换用户存储系统的切换指令时，判断待切换的用户存储系统是否可
用，在判定可用时备份当前用户存储系统的数据信息至ai平台的数据库，这样就能够留取当前用户存储系统的数据信息，然后将待切换用户存储系统的数据信息同步至该数据库，再反馈至ai平台的服务层，实现两种用户存储系统的实时和无缝切换，同时保证原有的用户存储系统的数据信息保存而不丢失，从而实现ai平台对不同用户存储系统的兼容，无需提前确定需要对接的用户存储系统，提高了ai平台的工作和使用效率。
73.另外，作为一种优选的实施例，如图4所示，在对接待切换的用户存储系统时，该多用户存储对接方法还包括：
74.s210：使用识别存储块识别用户存储系统的存储产品类并发送至ai平台的服务层。
75.s220：ai平台的服务层根据存储产品类，从数据库中调取对应的通信协议。
76.s230：识别存储块使用通信协议，将用户存储系统与ai平台对接；当用户存储系统与ai平台对接成功时，执行上述判断待切换的用户存储系统是否可用的步骤。
77.本技术实施例提供的技术方案，在识别存储产品类并发送至ai平台的服务层时，ai平台根据该存储产品类，调取对应的通信协议，然后使用该通信协议就能够实现用户存储系统与ai平台的对接，这样识别存储块就能够访问用户存储系统中的数据。
78.为了实现上述方法，本技术下述各实施例还提供一种ai平台，通过下述ai平台100能够实现上述方法的功能，因为具体操作步骤上述方法已经提及，因此重复部分不再赘述。
79.ai平台100包括服务层400、数据库500和识别存储块200；其中，
80.识别存储块200，用于当获取到ai平台100切换用户存储系统300的切换指令时，判断待切换的用户存储系统300是否可用；
81.识别存储块200，还用于若判定待切换的用户存储系统300可用时，备份当前用户存储系统的数据信息至ai平台的数据库500；
82.识别存储块200，还用于将待切换的用户存储系统300的数据信息同步至ai平台100的数据库500；
83.识别存储块200，还用于当数据信息同步完成时，将同步结果反馈至ai平台的服务层400。
84.识别存储块200的功能主要如下：识别下游对接存储产品类，并反馈至ai页面，页面显示所有被识别到的存储系统信息。获取下游对接存储的用户信息，交互与ai平台的数据库，并按照对接存储划分不同存储用户。获取下游对接存储系统中的训练数据信息，反馈至ai平台100的前端页面，展示正确无误的信息。负责切换对接下游存储，并作为桥梁可以选择从存储1拷贝数据至存储2下，例如从用户存储系统存储至ai平台本地的数据库中。其中，如图6所示，识别存储块200对接的用户存储系统包括网络文件系统nfs，分布式文件系统ceph和hadoop分布式文件系统hdfs。
85.综上，本技术实施例提供的ai平台，通过设置识别存储块200，在识别存储块200获得ai平台100切换用户存储系统300的切换指令时，判断待切换的用户存储系统是否可用，在判定可用时备份当前用户存储系统的数据信息至ai平台的数据库500，这样就能够留取当前用户存储系统的数据信息，然后将待切换用户存储系统的数据信息同步至该数据库，再反馈至ai平台的服务层，实现两种用户存储系统的实时和无缝切换，同时保证原有的用户存储系统的数据信息保存而不丢失，从而实现ai平台对不同用户存储系统的兼容，无需
提前确定需要对接的用户存储系统，提高了ai平台的工作和使用效率。
86.作为一种优选的实施例，如图5所示，识别存储块200，具体用于访问待切换的用户存储系统300；当识别存储块200访问用户存储系统300成功时，判定用户存储系统300可用。
87.作为一种优选的实施例，如图5所示，识别存储块200还用于识别用户存储系统300的存储产品类并发送至ai平台的服务层400；
88.ai平台的服务层400用于根据存储产品类，从数据库中调取对应的通信协议；
89.识别存储块200还用于使用通信协议，将用户存储系统与ai平台100对接；
90.识别存储块300还用于当用户存储系统与ai平台100对接成功时，执行判断待切换的用户存储系统300是否可用的步骤。
91.作为一种优选的实施例，如图5所示，识别存储块200具体还用于将用户存储系统300的用户信息进行标记，并同步至数据库500中；
92.识别存储块200，具体还用于根据ai平台100的服务层指令，将用户存储系统的业务信息同步至数据库，并反馈至ai平台100的服务层。
93.作为一种优选的实施例，如图5所示，所述ai平台100中，识别存储块200还用于若判定用户存储系统不可用时，回滚至数据库500中备份的当前用户存储系统的数据信息，并提示切换失败原因。
94.本发明提供的技术方案，在服务器运行过程中，能够定时自动检测日志文件(如messages日志)中的错误日志或故障，过滤到共性问题和可忽略的log后，自动在日志文件中的内容中根据问题类型关键字进行问题类型的分类，确认问题相关的软硬件，根据问题类型和相关软硬件，启动相应的日志的收集、冗余过滤、打包和存储。通过本发明提供的方案，能够让管理员无需主动查看系统日志去检查系统的运行情况，在日常运行过程中或服务器出现严重的宕机、重启或运行缓慢等问题前，根据系统日志和软硬件配置情况，自动生成一份包含问题定位相关的详细全面的日志，帮助问题更快的定位解决问题。
95.本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。
96.本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
97.这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
98.这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计
算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
99.应当注意的是，在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的部件或步骤。位于部件之前的单词“一”或“一个”不排除存在多个这样的部件。本发明可以借助于包括有若干不同部件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
100.尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
101.显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。