一种云服务数据共享系统的制作方法

1.本发明涉及数据管理系统领域，具体而言，涉及一种云服务数据共享系统。


背景技术：

2.随着计算机的普遍，各行各业的数据量沉积越来越多，同时也出现了数据孤岛的问题，这也是长期以来的痛点和难点。
3.目前，市场上处理电子政务方面的数据方式比较单一；比如，只能处理指定类型的结构化数据或者只能处理某些特定类型的非结构化数据，本套架构能够科学合理的解决，当下流行的结构化数据和非结构化数据；再比如，关系型数据库数据、文本数据、图片数据、音频数据、影像数据等等。此外，数据源的数据比较单一、混乱、无序等，数据处理规则难以形成标准，数据存储难以留存历史完成数据、共享数据类型和服务对象单一等等，以上均由于缺少有效的异构数据和共享数据的一套平台架构，导致有异构数据共享难的问题。
4.因此，现有技术还存在上述缺陷，有待遇发展。


技术实现要素：

5.本发明实施例提供了一种云服务数据共享系统，可以混合异构数据精准、科学且安全的向外提供数据共享服务，以至少解决异构数据和共享数据难的问题。
6.根据本发明的一实施例，提供了一种云服务数据共享系统，包括：数据采集引擎、数据中心模块、数据传输引擎及云服务器；
7.数据采集引擎负责采集数据源，并将采集的数据源的数据保持原样的发送至数据中心模块；
8.数据中心模块用于通过数据传输引擎与云服务器进行数据传输，通过数据传输引擎将接收的数据发送至云服务器，或从云服务器获取数据；
9.数据传输引擎将数据中心模块的数据按照预设方式进行数据分类，使数据中心模块和云服务器之间按照数据分类进行传输；
10.云服务器与多个数据中心模块进行数据传输，每个数据中心模块配有数据采集引擎及数据传输引擎，每个数据中心模块将采集的数据通过各自的数据传输引擎发送至云服务器，并且每个数据中心模块可从云服务器获取数据，从而实现数据中心模块之间的数据共享。
11.进一步地，数据采集引擎还包括：
12.规则制定单元，用于按照制定的采集规则和采集机制对特定数据源的数据进行专业化和定制化的处理。
13.进一步地，数据中心模块还包括：
14.管理模块，用于对数据中心模块的进行管理。
15.进一步地，管理模块包括：
16.巡检模块，用于定期对数据中心模块进行巡检工作。
17.进一步地，数据中心模块还包括：
18.警示模块，用于根据管理模块的巡检结果进行提示或警报。
19.进一步地，数据中心模块还包括：
20.显示模块，用于将管理模块巡检的结果进行展示。
21.进一步地，数据中心模块还包括：
22.内存监控模块，用于监控数据中心模块的内存状态。
23.进一步地，数据中心模块还包括：
24.电池监控模块，用于监控数据中心模块的供电电池健康状态。
25.进一步地，数据传输引擎将数据中心模块的数据按照预设方式进行数据分类具体包括：
26.将数据按照不同的行业、不同的专题、不同的主题、不同的业务传输云服务器。
27.进一步地，数据采集引擎还包括：
28.日志模块，用于将采集的数据进行历史留存和归档。
29.本发明实施例中的云服务数据共享系统，数据采集引擎、数据中心模块、数据传输引擎及云服务器；云服务器与多个数据中心模块进行数据传输，每个数据中心模块配有数据采集引擎及数据传输引擎，每个数据中心模块将采集的数据通过各自的数据传输引擎发送至云服务器，并且每个数据中心模块可从云服务器获取数据，从而实现数据中心模块之间的数据共享。通过本系统可以混合异构数据精准、科学且安全的向外提供数据共享服务，以至少解决异构数据和共享数据难的问题。
附图说明
30.此处所说明的附图用来提供对本发明的进一步理解，构成本技术的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
31.图1为本发明云服务数据共享系统的原理示意图。
具体实施方式
32.为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
33.需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
34.根据本发明一实施例，提供了一种云服务数据共享系统，参见图1，包括：数据采集
引擎、数据中心模块、数据传输引擎及云服务器；
35.数据采集引擎负责采集数据源，并将采集的数据源的数据保持原样的发送至数据中心模块；
36.数据中心模块用于通过数据传输引擎与云服务器进行数据传输，通过数据传输引擎将接收的数据发送至云服务器，或从云服务器获取数据；
37.数据传输引擎将数据中心模块的数据按照预设方式进行数据分类，使数据中心模块和云服务器之间按照数据分类进行传输；
38.云服务器与多个数据中心模块进行数据传输，每个数据中心模块配有数据采集引擎及数据传输引擎，每个数据中心模块将采集的数据通过各自的数据传输引擎发送至云服务器，并且每个数据中心模块可从云服务器获取数据，从而实现数据中心模块之间的数据共享。
39.共享私有云：主要负责将各类的数据源的数据科学、合理、安全可靠的向社会提供服务。比如：通过网站的方式向公众提供服务、通过文本的方式向公众提供服务、通过api接口的方式向需要数据的单位提供数据支撑等等。
40.本发明实施例中的云服务数据共享系统，数据采集引擎、数据中心模块、数据传输引擎及云服务器；云服务器与多个数据中心模块进行数据传输，每个数据中心模块配有数据采集引擎及数据传输引擎，每个数据中心模块将采集的数据通过各自的数据传输引擎发送至云服务器，并且每个数据中心模块可从云服务器获取数据，从而实现数据中心模块之间的数据共享。通过本系统可以混合异构数据精准、科学且安全的向外提供数据共享服务，以至少解决异构数据和共享数据难的问题。
41.具体地，数据源主要有：结构化数据，比如：oracle数据库、db2数据库、microsoft sql server数据库、microsoft access数据库、mysql数据库等等。
42.非结构化数据库，比如：nosql数据库、cloudant数据库、mongodb数据库、redis数据库、hbase数据库等等。
43.典型的结构化数据包括：信用卡号码、日期、财务金额、电话号码、地址、产品名称等。
44.典型的非结构化数据包括：
45.文本文件：文字处理、电子表格、演示文稿、电子邮件、日志。
46.电子邮件：电子邮件由于其元数据而具有一些内部结构，我们有时将其称为半结构化。但是，消息字段是非结构化的，传统的分析工具无法解析它。
47.社交媒体：来自新浪微博、微信、qq、facebook，twitter，linkedin等平台的数据。
48.网站：youtube，instagram，照片共享网站。
49.移动数据：短信、位置等。
50.通讯：聊天、即时消息、电话录音、协作软件等。
51.媒体：mp3、数码照片、音频文件、视频文件。
52.业务应用程序：ms office文档、生产力应用程序。
53.典型的机器生成的非结构化数据包括：
54.卫星图像：天气数据、地形、军事活动。
55.科学数据：石油和天然气勘探、空间勘探、地震图像、大气数据。
56.数字监控：监控照片和视频。
57.传感器数据：交通、天气、海洋传感器。
58.实施例中，数据采集引擎还包括：
59.规则制定单元，用于按照制定的采集规则和采集机制对特定数据源的数据进行专业化和定制化的处理。
60.由数据采集团队制定某些定制化的采集规则和采集机制从而对特定数据源的数据进行专业化和定制化的处理；比如，针对某些特定的文本使用特定的文字处理技术，将非结构化的文本数据转化为结构化的数据以形成合理的归档数据；对某些pdf文档使用特定的抽取算法提取出业务相关的指定数据。
61.实施例中，数据中心模块还包括：
62.管理模块，用于对数据中心模块的进行管理。这些管理包括对数字中心的设备进行检查、对异样进行警报及对异常现象进行展示等。
63.实施例中，管理模块包括：
64.巡检单元，用于定期对数据中心模块进行巡检工作。
65.对数据中心管理模块进行预设巡检时间，按照预设的时间，对管理数据中心的云服务器的物理设备的定期智能化的进行巡检工作；比如，定期巡检服务器的运行状态、网络状态等等，将巡检结果实时推送给中心管理人员。
66.实施例中，数据中心模块还包括：
67.警示模块，用于根据管理模块的巡检结果进行提示或警报。
68.当巡检模块检测到数据中心有异样时，则发出警示，以提示工作人员进行异样排除。
69.实施例中，数据中心模块还包括：
70.显示模块，用于将管理模块巡检的结果进行展示。将异常情况进行显示，以便直观的看到异常提示。
71.实施例中，数据中心模块还包括：
72.内存监控模块，用于监控数据中心模块的内存状态。数据中心作为数据的接收者，不断从数据采集引擎或云服务器获得数据，因此需要大量的存储空间，对数据中心的内存进行监控，以便清楚了解数据中心的内存状态。
73.实施例中，数据中心模块还包括：
74.电池监控模块，用于监控数据中心模块的供电电池健康状态。定期智能巡检服务器相关支撑硬件设备的运行状态，通过电池监控模块对数据中心的蓄电池进行监控，如不间断电源蓄电情况、运行状态、健康状态等等。
75.实施例中，数据传输引擎将数据中心模块的数据按照预设方式进行数据分类具体包括：
76.将数据按照不同的行业、不同的专题、不同的主题、不同的业务传输云服务器。通过对所采集的数据进行分类有利于数据的传输和查看，避免数据杂乱，不便于管理。
77.实施例中，数据采集引擎还包括：
78.日志模块，用于将采集的数据进行历史留存和归档，该历史留存和归档便于随时查看或方便进行数据追踪。
79.以上仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。