一种数据监测方法、系统、设备以及介质与流程

1.本发明涉及监测领域，具体涉及一种数据监测方法、系统、设备以及存储介质。


背景技术：

2.现有的云计算服务器采用很多检测系统和检测传感器对服务器的硬件和软件进行检测，并将检测的数据存储在服务器数据库内，每次检测的数据都存储在数据库内，造成数据库内的存储变小，因此需要增加存储设备，增加成本。
3.而且现有的数据监测系统不能对数据库内的数据进行自动筛选分析处理，往往需要通过人工排查到异常的数据，再对异常问题进行解决，不仅效率低，速度慢，而且影响服务器的检修和维护时间，影响服务器的使用寿命，让服务器的运行存在不稳定性，


技术实现要素：

4.有鉴于此，为了克服上述问题的至少一个方面，本发明实施例提出一种数据监测方法，包括以下步骤：
5.采集每一个端口提供的数据；
6.对采集到的数据进行预处理并与第一云存储服务器中的数据进行比对；
7.根据对比结果筛选出不同的数据；
8.对所述不同的数据进行分析以确定正常数据和异常数据；
9.将所述正常数据存储到所述第一云存储服务器中并将所述异常数据存储到第二云存储服务器中。
10.在一些实施例中，还包括：
11.根据所述异常数据生成数据报告并进行反馈；
12.根据所述异常数据进行分析和解读以确定解决方案；
13.根据所述解决方案进行修复；
14.实时监测所述异常数据并对修复后的数据进行监测。
15.在一些实施例中，将所述异常数据存储到第二云存储服务器中，进一步包括：
16.响应于所述异常数据修复完成，生成异常数据清单；
17.将所述异常数据清单与所述第二云存储服务器中的异常数据进行对比；
18.根据对比结果将不同的异常数据进行存储。
19.在一些实施例中，还包括：
20.将所述异常数据与修复后的数据进行对比；
21.将对比结果进行反馈。
22.基于同一发明构思，根据本发明的另一个方面，本发明的实施例还提供了一种数据监测系统，包括：
23.采集模块，配置为采集每一个端口提供的数据；
24.对比模块，配置为对采集到的数据进行预处理并与第一云存储服务器中的数据进
行比对；
25.筛选模块，配置为根据对比结果筛选出不同的数据；
26.分析模块，配置为对所述不同的数据进行分析以确定正常数据和异常数据；
27.存储模块，配置为将所述正常数据存储到所述第一云存储服务器中并将所述异常数据存储到第二云存储服务器中。
28.在一些实施例中，还包括处理模块，配置为：
29.根据所述异常数据生成数据报告并进行反馈；
30.根据所述异常数据进行分析和解读以确定解决方案；
31.根据所述解决方案进行修复；
32.实时监测所述异常数据并对修复后的数据进行监测。
33.在一些实施例中，存储模块还配置为：
34.响应于所述异常数据修复完成，生成异常数据清单；
35.将所述异常数据清单与所述第二云存储服务器中的异常数据进行对比；
36.根据对比结果将不同的异常数据进行存储。
37.在一些实施例中，处理模块还配置为：
38.将所述异常数据与修复后的数据进行对比；
39.将对比结果进行反馈。
40.基于同一发明构思，根据本发明的另一个方面，本发明的实施例还提供了一种计算机设备，包括：
41.至少一个处理器；以及
42.存储器，所述存储器存储有可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时执行以下步骤：
43.采集每一个端口提供的数据；
44.对采集到的数据进行预处理并与第一云存储服务器中的数据进行比对；
45.根据对比结果筛选出不同的数据；
46.对所述不同的数据进行分析以确定正常数据和异常数据；
47.将所述正常数据存储到所述第一云存储服务器中并将所述异常数据存储到第二云存储服务器中。
48.在一些实施例中，还包括：
49.根据所述异常数据生成数据报告并进行反馈；
50.根据所述异常数据进行分析和解读以确定解决方案；
51.根据所述解决方案进行修复；
52.实时监测所述异常数据并对修复后的数据进行监测。
53.在一些实施例中，将所述异常数据存储到第二云存储服务器中，进一步包括：
54.响应于所述异常数据修复完成，生成异常数据清单；
55.将所述异常数据清单与所述第二云存储服务器中的异常数据进行对比；
56.根据对比结果将不同的异常数据进行存储。
57.在一些实施例中，还包括：
58.将所述异常数据与修复后的数据进行对比；
59.将对比结果进行反馈。
60.基于同一发明构思，根据本发明的另一个方面，本发明的实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时执行以下步骤：
61.采集每一个端口提供的数据；
62.对采集到的数据进行预处理并与第一云存储服务器中的数据进行比对；
63.根据对比结果筛选出不同的数据；
64.对所述不同的数据进行分析以确定正常数据和异常数据；
65.将所述正常数据存储到所述第一云存储服务器中并将所述异常数据存储到第二云存储服务器中。
66.在一些实施例中，还包括：
67.根据所述异常数据生成数据报告并进行反馈；
68.根据所述异常数据进行分析和解读以确定解决方案；
69.根据所述解决方案进行修复；
70.实时监测所述异常数据并对修复后的数据进行监测。
71.在一些实施例中，将所述异常数据存储到第二云存储服务器中，进一步包括：
72.响应于所述异常数据修复完成，生成异常数据清单；
73.将所述异常数据清单与所述第二云存储服务器中的异常数据进行对比；
74.根据对比结果将不同的异常数据进行存储。
75.在一些实施例中，还包括：
76.将所述异常数据与修复后的数据进行对比；
77.将对比结果进行反馈。
78.本发明具有以下有益技术效果之一：本发明提出的方案将每次对云计算服务器采集到的检测数据进行分析处理，并与大数据进行对比，相同的正常数据进行删除，不同的正常数据进行云存储，相同的异常数据进行删除，不同的异常数据进行存储，从而减少存储服务器的存储压力，提高云存储服务器的存储空间，将存储垃圾进行清理，减少存储设备，节约成本。
附图说明
79.为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的实施例。
80.图1为本发明的实施例提供的数据监测方法的流程示意图；
81.图2为本发明的实施例提供的数据监测系统的结构示意图；
82.图3为本发明的实施例提供的计算机设备的结构示意图；
83.图4为本发明的实施例提供的计算机可读存储介质的结构示意图。
具体实施方式
84.为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本发明实施例进一步详细说明。
85.需要说明的是，本发明实施例中所有使用“第一”和“第二”的表述均是为了区分两个相同名称非相同的实体或者非相同的参量，可见“第一”“第二”仅为了表述的方便，不应理解为对本发明实施例的限定，后续实施例对此不再一一说明。
86.根据本发明的一个方面，本发明的实施例提出一种数据监测方法，如图1所示，其可以包括步骤：
87.s1，采集每一个端口提供的数据；
88.s2，对采集到的数据进行预处理并与第一云存储服务器中的数据进行比对；
89.s3，根据对比结果筛选出不同的数据；
90.s4，对所述不同的数据进行分析以确定正常数据和异常数据；
91.s5，将所述正常数据存储到所述第一云存储服务器中并将所述异常数据存储到第二云存储服务器中。
92.本发明提出的方案将每次对云计算服务器采集到的检测数据进行分析处理，并与大数据进行对比，相同的正常数据进行删除，不同的正常数据进行云存储，相同的异常数据进行删除，不同的异常数据进行存储，从而减少存储服务器的存储压力，提高云存储服务器的存储空间，将存储垃圾进行清理，减少存储设备，节约成本。
93.在一些实施例中，整个系统可以包括数据采集模块、数据处理模块、数据分析模块、正常数据覆盖存储模块、异常数据存储模块、异常数据监测模块、异常数据提取模块、异常数据反馈模块、处理芯片、服务器硬件修复模块和服务器系统修复模块；
94.所述数据采集模块设有若干个，并通过局域网与服务器平台数据库相连，服务器平台数据库存储有服务器硬件检测数据和服务器系统检测数据；
95.所述采集模块与数据处理模块相连，所述数据处理模块与数据分析模块相连，所述数据分析模块分别与正常数据覆盖存储模块和异常数据存储模块相连，所述异常数据存储模块与异常数据监测模块相连，所述数据分析模块与异常数据提取模块相连，所述异常数据提取模块与异常数据反馈模块相连，所述异常数据反馈模块与处理芯片相连，所述处理芯片与服务器硬件修复模块和服务器系统修复模块相连。
96.所述数据分析模块包括初步分析单元、云计算单元、数据对比单元、分析结果生成单元和分析处理单元；所述初步分析单元与云计算单元相连，所述云计算单元与数据对比单元相连，所述数据对比单元与分析结果生成单元相连，所述分析结果生成单元与分析处理单元相连。
97.所述异常数据监测模块包括未修复前数据监测单元、修复后数据监测单元、修复后数据对比单元和修复后数据对比结果反馈单元；
98.所述异常数据反馈模块包括异常数据报告显示单元、异常数据报警单元、异常数据分析单元、异常数据处理单元、异常数据修复指令生成单元和异常数据修复指令发送单元；异常数据分析单元与异常数据处理单元相连，所述异常数据处理单元与异常数据修复指令生成单元相连，所述异常数据修复指令生成单元与异常数据修复指令发送单元相连。
99.这样云计算服务器上的硬件检测传感器和软件检测系统对服务器上的硬件以及
软件进行检测，检测得到的数据全部存储在服务器平台数据库内，然后通过多个数据采集模块并利用局域网将服务器平台数据库内的数据进行采集，采集后的数据通过数据处理模块进行数据处理，具体的处理方式是将相同的数据进行整合和修正，然后再通过数据分析模块对处理后的数据进行分析，具体的通过初步分析单元和云计算单元对采集的数据进行计算分析，然后于数据库保存的数据进行对比，再通过分析结果生成单元生成分析结果，再通过分析处理单元对异常的数据和正常的数据进行处理，将异常数据通过异常数据存储模块进行存储，然后再利用异常数据监测模块进行监测，将正常数据通过正常数据覆盖存储模块进行覆盖存储，减少占用存储容量，然后通过异常数据提取模块对异常数据进行提取，并通过异常数据反馈模块进行反馈处理，异常数据反馈模块中的异常数据报告显示单元将生成数据报告，异常数据报警单元将异常数据传输到管理员客户端上，并发出警报，异常数据分析单元对异常数据的产生进行分析和解读，异常数据处理单元对异常数据出现的问题进行处理，并提供相应的处理方案，异常数据修复指令生成单元将处理方案以报告和指令的形式呈现出来，报告是供管理员观看，指令是通过异常数据修复指令发送单元发送到处理芯片，并利用处理芯片控制服务器硬件修复模块和服务器系统修复模块进行修复工作，与此同时，异常数据监测模块会实时对异常数据进行监测，会对未修复前的数据进行监测，会通过修复后数据监测单元对修复后的数据进行监测，还能通过修复后数据对比单元，将修复后和修复前之间的数据进行对比，并通过修复后数据对比结果反馈单元将对比结果反馈到管理员客户端上，管理员通过数据报告可以直观的看到修复效果。
100.在一些实施例中，步骤s1，采集每一个端口提供的数据，具体的，可以通过服务器上的数据采集单元对端口提供的数据进行采集，然后通过数据处理模块对采集的数据进行聚合和修正，将相同数据进行合并处理，不同数据进行分类处理。其中，通过服务器上的数据采集单元对端口提供的数据进行采集，端口的数据为服务器硬件检测数据和服务器系统检测数据，该数据都是通过云计算服务器上的硬件传感器和软件检测系统检测得出的。
101.在一些实施例中，步骤s4，对所述不同的数据进行分析以确定正常数据和异常数据，具体的，通过数据分析模块将采集的数据和云存储服务器内的大数据进行对比，与云存储服务器相同的数据做删除处理，与云存储服务器不同的数据做临时存储处理，对临时存储的数据做分析处理，分析方式是与正常数据范围值做对比，在范围值内的属于正常数据，不在范围内的属于异常数据。其中，通过数据处理模块对采集的数据进行聚合和修正，将相同数据进行合并处理，不同数据进行分类处理；通过数据分析模块将采集的数据和云存储服务器内的大数据进行对比，与云存储服务器相同的数据做删除处理，减少存储压力也清理无用的垃圾数据，与云存储服务器不同的数据做临时存储处理，云存储服务器内存储的数据是云计算服务器上检测的正常数据。
102.在一些实施例中，还包括：
103.根据所述异常数据生成数据报告并进行反馈；
104.根据所述异常数据进行分析和解读以确定解决方案；
105.根据所述解决方案进行修复；
106.实时监测所述异常数据并对修复后的数据进行监测。
107.在一些实施例中，将所述异常数据存储到第二云存储服务器中，进一步包括：
108.响应于所述异常数据修复完成，生成异常数据清单；
109.将所述异常数据清单与所述第二云存储服务器中的异常数据进行对比；
110.根据对比结果将不同的异常数据进行存储。
111.在一些实施例中，还包括：
112.将所述异常数据与修复后的数据进行对比；
113.将对比结果进行反馈。
114.具体的，将正常数据生成数据清单并存储到云储存服务器内，异常数据进行评估修复处理；当异常数据修复完成后，异常数据会生成异常数据清单并与异常数据存储服务器内的异常数据进行对比；对比结果存在相同的异常数据，则对相同的异常数据进行删除，对不同的异常数据则进行存储。其中，对临时存储的数据做分析处理，分析方式是与正常数据范围值做对比，在范围值内的属于正常数据，不在范围内的属于异常数据；将正常数据生成数据清单并存储到云储存服务器内，异常数据进行评估修复处理；当异常数据修复完成后，异常数据会生成异常数据清单并与异常数据存储服务器内的异常数据进行对比，异常数据存储服务器是每次分析得出的异常数据进行存储，方便后期工作人员通过该服务器查询每次异常的数据，具有一定的针对性；对比结果存在相同的异常数据，则对相同的异常数据进行删除，对不同的异常数据则进行存储，该步骤的目的是减少异常数据存储服务器的存储压力，并清理垃圾数据。
115.本发明的提出的方案不仅能对云计算服务器硬件和软件检测的数据进行实时监测，还能自动对检测的数据进行分析处理，能对异常数据进行监测，针对异常数据问题能实现自动修复和信息反馈，保障云计算服务器能正常使用，也能让工作人员第一时间得到反馈信息，无需工作人员通过数据查询检测数据，而且该系统还能将异常数据和正常数据进行分类存储，方便管理人员后期进行查询，更加方便人们对云计算服务器进行维护管理。
116.基于同一发明构思，根据本发明的另一个方面，本发明的实施例还提供了一种数据监测系统400，如图2所示，包括：
117.采集模块401，配置为采集每一个端口提供的数据；
118.对比模块402，配置为对采集到的数据进行预处理并与第一云存储服务器中的数据进行比对；
119.筛选模块403，配置为根据对比结果筛选出不同的数据；
120.分析模块404，配置为对所述不同的数据进行分析以确定正常数据和异常数据；
121.存储模块405，配置为将所述正常数据存储到所述第一云存储服务器中并将所述异常数据存储到第二云存储服务器中。
122.在一些实施例中，还包括处理模块，配置为：
123.根据所述异常数据生成数据报告并进行反馈；
124.根据所述异常数据进行分析和解读以确定解决方案；
125.根据所述解决方案进行修复；
126.实时监测所述异常数据并对修复后的数据进行监测。
127.在一些实施例中，存储模块405还配置为：
128.响应于所述异常数据修复完成，生成异常数据清单；
129.将所述异常数据清单与所述第二云存储服务器中的异常数据进行对比；
130.根据对比结果将不同的异常数据进行存储。
131.在一些实施例中，处理模块还配置为：
132.将所述异常数据与修复后的数据进行对比；
133.将对比结果进行反馈。
134.基于同一发明构思，根据本发明的另一个方面，如图3所示，本发明的实施例还提供了一种计算机设备501，包括：
135.至少一个处理器520；以及
136.存储器510，存储器510存储有可在处理器上运行的计算机程序511，处理器520执行程序时执行如上的任一种数据监测方法的步骤。
137.基于同一发明构思，根据本发明的另一个方面，如图4所示，本发明的实施例还提供了一种计算机可读存储介质601，计算机可读存储介质601存储有计算机程序指令610，计算机程序指令610被处理器执行时执行如上的任一种数据监测方法的步骤。
138.最后需要说明的是，本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关硬件来完成，程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。
139.此外，应该明白的是，本文的计算机可读存储介质(例如，存储器)可以是易失性存储器或非易失性存储器，或者可以包括易失性存储器和非易失性存储器两者。
140.本领域技术人员还将明白的是，结合这里的公开所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。为了清楚地说明硬件和软件的这种可互换性，已经就各种示意性组件、方块、模块、电路和步骤的功能对其进行了一般性的描述。这种功能是被实现为软件还是被实现为硬件取决于具体应用以及施加给整个系统的设计约束。本领域技术人员可以针对每种具体应用以各种方式来实现的功能，但是这种实现决定不应被解释为导致脱离本发明实施例公开的范围。
141.以上是本发明公开的示例性实施例，但是应当注意，在不背离权利要求限定的本发明实施例公开的范围的前提下，可以进行多种改变和修改。根据这里描述的公开实施例的方法权利要求的功能、步骤和/或动作不需以任何特定顺序执行。此外，尽管本发明实施例公开的元素可以以个体形式描述或要求，但除非明确限制为单数，也可以理解为多个。
142.应当理解的是，在本文中使用的，除非上下文清楚地支持例外情况，单数形式“一个”旨在也包括复数形式。还应当理解的是，在本文中使用的“和/或”是指包括一个或者一个以上相关联地列出的项目的任意和所有可能组合。
143.上述本发明实施例公开实施例序号仅仅为了描述，不代表实施例的优劣。
144.本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
145.所属领域的普通技术人员应当理解：以上任何实施例的讨论仅为示例性的，并非旨在暗示本发明实施例公开的范围(包括权利要求)被限于这些例子；在本发明实施例的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，并存在如上的本发明实施例的不同方面的许多其它变化，为了简明它们没有在细节中提供。因此，凡在本发明实施例的精神和原则之内，所做的任何省略、修改、等同替换、改进等，均应包含在本发明实施例的保护范围之内。