一种检查服务器日志的方法、装置、设备及可读介质与流程

1.本领域涉及计算机领域，并且更具体地涉及一种检查服务器日志的方法、装置、设备及可读介质。


背景技术：

2.服务器系统测试用例在操作步骤做完之后都需要针对操作后的系统日志进行检查，从而确保服务器整体运行正常，除了功能测试还包含许多压力、性能及稳定性测试，这类测试的测试周期比较久，同时产生的系统日志也非常多，目前的检查方式多数是根据以往项目经验来进行手动检查，工作量大且各项目不易统一。
3.目前测试方式主要是根据测试总结的异常日志结合根据经验总结的可忽略日志文档来对系统日志进行手动检查和分析。但是需要手动对照的文档内容较多，当日志量非常大的时候(例如进行压力、性能等测试周期长的测试时)，需要耗费很大的人力时间成本，且手动检查容易疲惫和遗漏，测试效率及测试准确度难以保障。


技术实现要素：

4.有鉴于此，本发明实施例的目的在于提出一种检查服务器日志的方法、装置、设备及可读介质，通过使用本发明的技术方案，能够提高验证效率，能够有效减少人工重复工作量及失误率，提高了测试日志的检查效率、准确性和一致性。
5.基于上述目的，本发明的实施例的一个方面提供了一种检查服务器日志的方法，包括以下步骤：
6.建立每个linux系统版本日志的黑名单和白名单；
7.响应于接收到检查服务器日志的指令，判断当前服务器的linux系统版本；
8.获取并保存系统日志，基于当前服务器的linux系统版本对应的黑名单筛选出黑名单日志；
9.在筛选出的黑名单日志中删除当前服务器的linux系统版本对应的白名单中的日志，并判断删除后的黑名单日志中是否还存在错误日志；
10.响应于删除后的黑名单日志中不存在错误日志，将删除后的黑名单日志进行输出。
11.根据本发明的一个实施例，还包括：
12.响应于删除后的黑名单日志中存在错误日志，判断错误日志是否为可忽略日志；
13.响应于错误日志是可忽略日志，将可忽略日志删除并添加到当前服务器的linux系统版本对应的白名单中。
14.根据本发明的一个实施例，还包括：
15.响应于错误日志不是可忽略日志，将错误日志进行标记并进行报警。
16.根据本发明的一个实施例，linux系统版本包括rhel、centos、debian、ubuntu和suse中任意版本的linux系统。
17.本发明的实施例的另一个方面，还提供了一种检查服务器日志的装置，装置包括：
18.创建模块，创建模块配置为建立每个linux系统版本日志的黑名单和白名单；
19.判断模块，判断模块配置为响应于接收到检查服务器日志的指令，判断当前服务器的linux系统版本；
20.筛选模块，筛选模块配置为获取并保存系统日志，基于当前服务器的linux系统版本对应的黑名单筛选出黑名单日志；
21.删除模块，删除模块配置为在筛选出的黑名单日志中删除当前服务器的linux系统版本对应的白名单中的日志，并判断删除后的黑名单日志中是否还存在错误日志；
22.输出模块，输出模块配置为响应于删除后的黑名单日志中不存在错误日志，将删除后的黑名单日志进行输出。
23.根据本发明的一个实施例，还包括更新模块，更新模块配置为：
24.响应于删除后的黑名单日志中存在错误日志，判断错误日志是否为可忽略日志；
25.响应于错误日志是可忽略日志，将可忽略日志删除并添加到当前服务器的linux系统版本对应的白名单中。
26.根据本发明的一个实施例，还包括报警模块，报警模块配置为：
27.响应于错误日志不是可忽略日志，将错误日志进行标记并进行报警。
28.根据本发明的一个实施例，linux系统版本包括rhel、centos、debian、ubuntu和suse中任意版本的linux系统。
29.本发明的实施例的另一个方面，还提供了一种计算机设备，该计算机设备包括：
30.至少一个处理器；以及
31.存储器，存储器存储有可在处理器上运行的计算机指令，指令由处理器执行时实现上述任意一项方法的步骤，包括：
32.建立每个linux系统版本日志的黑名单和白名单；
33.响应于接收到检查服务器日志的指令，判断当前服务器的linux系统版本；
34.获取并保存系统日志，基于当前服务器的linux系统版本对应的黑名单筛选出黑名单日志；
35.在筛选出的黑名单日志中删除当前服务器的linux系统版本对应的白名单中的日志，并判断删除后的黑名单日志中是否还存在错误日志；
36.响应于删除后的黑名单日志中不存在错误日志，将删除后的黑名单日志进行输出。
37.根据本发明的一个实施例，步骤还包括：
38.响应于删除后的黑名单日志中存在错误日志，判断错误日志是否为可忽略日志；
39.响应于错误日志是可忽略日志，将可忽略日志删除并添加到当前服务器的linux系统版本对应的白名单中。
40.根据本发明的一个实施例，步骤还包括：
41.响应于错误日志不是可忽略日志，将错误日志进行标记并进行报警。
42.根据本发明的一个实施例，linux系统版本包括rhel、centos、debian、ubuntu和suse中任意版本的linux系统。
43.本发明的实施例的另一个方面，还提供了一种计算机可读存储介质，计算机可读
存储介质存储有计算机程序，计算机程序被处理器执行时实现上述任意一项方法的步骤，包括：
44.建立每个linux系统版本日志的黑名单和白名单；
45.响应于接收到检查服务器日志的指令，判断当前服务器的linux系统版本；
46.获取并保存系统日志，基于当前服务器的linux系统版本对应的黑名单筛选出黑名单日志；
47.在筛选出的黑名单日志中删除当前服务器的linux系统版本对应的白名单中的日志，并判断删除后的黑名单日志中是否还存在错误日志；
48.响应于删除后的黑名单日志中不存在错误日志，将删除后的黑名单日志进行输出。
49.根据本发明的一个实施例，步骤还包括：
50.响应于删除后的黑名单日志中存在错误日志，判断错误日志是否为可忽略日志；
51.响应于错误日志是可忽略日志，将可忽略日志删除并添加到当前服务器的linux系统版本对应的白名单中。
52.根据本发明的一个实施例，步骤还包括：
53.响应于错误日志不是可忽略日志，将错误日志进行标记并进行报警。
54.根据本发明的一个实施例，linux系统版本包括rhel、centos、debian、ubuntu和suse中任意版本的linux系统。
55.本发明具有以下有益技术效果：本发明实施例提供的检查服务器日志的方法，通过建立每个linux系统版本日志的黑名单和白名单；响应于接收到检查服务器日志的指令，判断当前服务器的linux系统版本；获取并保存系统日志，基于当前服务器的linux系统版本对应的黑名单筛选出黑名单日志；在筛选出的黑名单日志中删除当前服务器的linux系统版本对应的白名单中的日志，并判断删除后的黑名单日志中是否还存在错误日志；响应于删除后的黑名单日志中不存在错误日志，将删除后的黑名单日志进行输出的技术方案，能够提高验证效率，能够有效减少人工重复工作量及失误率，提高了测试日志的检查效率、准确性和一致性。
附图说明
56.为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的实施例。
57.图1为根据本发明一个实施例的检查服务器日志的方法的示意性流程图；
58.图2为根据本发明一个实施例的检查服务器日志的装置的示意图；
59.图3为根据本发明一个实施例的计算机设备的示意图；
60.图4为根据本发明一个实施例的计算机可读存储介质的示意图。
具体实施方式
61.为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照
附图，对本发明实施例进一步详细说明。
62.基于上述目的，本发明的实施例的第一个方面，提出了一种检查服务器日志的方法的一个实施例。图1示出的是该方法的示意性流程图。
63.如图1中所示，该方法可以包括以下步骤：
64.s1建立每个linux系统版本日志的黑名单和白名单。
65.根据测试经验总结出的参照文档进行日志的分门别类、总结优化，整理成相同格式，建立统一的黑名单库以及不同类型系统下的白名单库，实现统一的系统日志检查机制。同时可借助简单的shell脚本，将原本人工分析大部分工作转变为自动分析，统一各项目(各阶段)的分析过程，共享各项目测试经验，不断优化黑白名单库，降低人工分析时间成本，提高测试效率及测试结果准确度。
66.s2响应于接收到检查服务器日志的指令，判断当前服务器的linux系统版本。
67.linux系统版本包括rhel、centos、debian、ubuntu和suse中任意版本的linux系统，不同版本的linux系统需要检查的日志的格式不同，需要根据每个系统版本进行对应的日志格式的检查。
68.s3获取并保存系统日志，基于当前服务器的linux系统版本对应的黑名单筛选出黑名单日志。
69.从系统的日志中根据统一的黑名单筛选出所有有可能是异常日志的日志，作为嫌疑异常日志源，需要注意的是，不同类型的linux系统，日志文件名字或获取方式有些不同，例如：rhel/centos版本需要检查系统日志/var/log/文件夹下的messages、mcelog、dmesg，其中/var/log/messages日志太大时会分割多个日志，以时间为后缀，如messages
‑
20200901，均需要检查；debian/ubuntu版本需要检查系统日志/var/log/文件夹下的syslog、dmesg；suse版本需要检查系统日志/var/log文件夹下的messages、dmesg命令打印的日志。筛选日志可通过检查shell脚本或者linux命令实现，例如cat/var/log/messages*|grep
–
i“黑名单字段”>>messages
‑
error。
70.s4在筛选出的黑名单日志中删除当前服务器的linux系统版本对应的白名单中的日志，并判断删除后的黑名单日志中是否还存在错误日志。
71.例如rhel messages存在白名单"kernel:virbr0:starting userspace stp failed,starting kernel stp"，通过linux命令可将其从嫌疑异常日志源中排除：sed
‑
i"/kernel:virbr0:starting userspace stp failed,starting kernel stp/d"messages。
72.s5响应于删除后的黑名单日志中不存在错误日志，将删除后的黑名单日志进行输出。
73.通过本发明的技术方案，能够提高验证效率，能够有效减少人工重复工作量及失误率，提高了测试日志的检查效率、准确性和一致性。
74.在本发明的一个优选实施例中，还包括：
75.响应于删除后的黑名单日志中存在错误日志，判断错误日志是否为可忽略日志；
76.响应于错误日志是可忽略日志，将可忽略日志删除并添加到当前服务器的linux系统版本对应的白名单中。有些日志尽管是报错日志，但在某些特定情况下属于正常日志，例如项目不支持某设备，系统日志打出找不到此设备，那便属于正常日志。
77.在本发明的一个优选实施例中，还包括：
78.响应于错误日志不是可忽略日志，将错误日志进行标记并进行报警。
79.在本发明的一个优选实施例中，linux系统版本包括rhel、centos、debian、ubuntu和suse中任意版本的linux系统。
80.通过本发明的技术方案，能够提高验证效率，能够有效减少人工重复工作量及失误率，提高了测试日志的检查效率、准确性和一致性。
81.需要说明的是，本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关硬件来完成，上述的程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中存储介质可为磁碟、光盘、只读存储器(read
‑
only memory，rom)或随机存取存储器(random access memory，ram)等。上述计算机程序的实施例，可以达到与之对应的前述任意方法实施例相同或者相类似的效果。
82.此外，根据本发明实施例公开的方法还可以被实现为由cpu执行的计算机程序，该计算机程序可以存储在计算机可读存储介质中。在该计算机程序被cpu执行时，执行本发明实施例公开的方法中限定的上述功能。
83.基于上述目的，本发明的实施例的第二个方面，提出了一种检查服务器日志的装置，如图2所示，装置200包括：
84.创建模块，创建模块配置为建立每个linux系统版本日志的黑名单和白名单。
85.根据测试经验总结出的参照文档进行日志的分门别类、总结优化，整理成相同格式，建立统一的黑名单库以及不同类型系统下的白名单库，实现统一的系统日志检查机制。同时可借助简单的shell脚本，将原本人工分析大部分工作转变为自动分析，统一各项目(各阶段)的分析过程，共享各项目测试经验，不断优化黑白名单库，降低人工分析时间成本，提高测试效率及测试结果准确度。
86.判断模块，判断模块配置为响应于接收到检查服务器日志的指令，判断当前服务器的linux系统版本。
87.linux系统版本包括rhel、centos、debian、ubuntu和suse中任意版本的linux系统，不同版本的linux系统需要检查的日志的格式不同，需要根据每个系统版本进行对应的日志格式的检查。
88.筛选模块，筛选模块配置为获取并保存系统日志，基于当前服务器的linux系统版本对应的黑名单筛选出黑名单日志。
89.从系统的日志中根据统一的黑名单筛选出所有有可能是异常日志的日志，作为嫌疑异常日志源，需要注意的是，不同类型的linux系统，日志文件名字或获取方式有些不同，例如：rhel/centos版本需要检查系统日志/var/log/文件夹下的messages、mcelog、dmesg，其中/var/log/messages日志太大时会分割多个日志，以时间为后缀，如messages
‑
20200901，均需要检查；debian/ubuntu版本需要检查系统日志/var/log/文件夹下的syslog、dmesg；suse版本需要检查系统日志/var/log文件夹下的messages、dmesg命令打印的日志。筛选日志可通过检查shell脚本或者linux命令实现，例如cat/var/log/messages*|grep
–
i“黑名单字段”>>messages
‑
error。
90.删除模块，删除模块配置为在筛选出的黑名单日志中删除当前服务器的linux系统版本对应的白名单中的日志，并判断删除后的黑名单日志中是否还存在错误日志。
91.例如rhel messages存在白名单"kernel:virbr0:starting userspace stp failed,starting kernel stp"，通过linux命令可将其从嫌疑异常日志源中排除：sed
‑
i"/kernel:virbr0:starting userspace stp failed,starting kernel stp/d"messages。
92.输出模块，输出模块配置为响应于删除后的黑名单日志中不存在错误日志，将删除后的黑名单日志进行输出。
93.在本发明的一个优选实施例中，还包括更新模块，更新模块配置为：
94.响应于删除后的黑名单日志中存在错误日志，判断错误日志是否为可忽略日志；
95.响应于错误日志是可忽略日志，将可忽略日志删除并添加到当前服务器的linux系统版本对应的白名单中。
96.在本发明的一个优选实施例中，还包括报警模块，报警模块配置为：
97.响应于错误日志不是可忽略日志，将错误日志进行标记并进行报警。
98.在本发明的一个优选实施例中，linux系统版本包括rhel、centos、debian、ubuntu和suse中任意版本的linux系统。
99.基于上述目的，本发明实施例的第三个方面，提出了一种计算机设备。图3示出的是本发明提供的计算机设备的实施例的示意图。如图3所示，本发明实施例包括如下装置：至少一个处理器s21；以及存储器s22，存储器s22存储有可在处理器上运行的计算机指令s23，指令由处理器执行时实现以下方法：
100.建立每个linux系统版本日志的黑名单和白名单；
101.响应于接收到检查服务器日志的指令，判断当前服务器的linux系统版本；
102.获取并保存系统日志，基于当前服务器的linux系统版本对应的黑名单筛选出黑名单日志；
103.在筛选出的黑名单日志中删除当前服务器的linux系统版本对应的白名单中的日志，并判断删除后的黑名单日志中是否还存在错误日志；
104.响应于删除后的黑名单日志中不存在错误日志，将删除后的黑名单日志进行输出。
105.在本发明的一个优选实施例中，还包括：
106.响应于删除后的黑名单日志中存在错误日志，判断错误日志是否为可忽略日志；
107.响应于错误日志是可忽略日志，将可忽略日志删除并添加到当前服务器的linux系统版本对应的白名单中。
108.在本发明的一个优选实施例中，还包括：
109.响应于错误日志不是可忽略日志，将错误日志进行标记并进行报警。
110.在本发明的一个优选实施例中，linux系统版本包括rhel、centos、debian、ubuntu和suse中任意版本的linux系统。
111.基于上述目的，本发明实施例的第四个方面，提出了一种计算机可读存储介质。图4示出的是本发明提供的计算机可读存储介质的实施例的示意图。如图4所示，计算机可读存储介质存储s31有被处理器执行时执行如下方法的计算机程序s32：
112.建立每个linux系统版本日志的黑名单和白名单；
113.响应于接收到检查服务器日志的指令，判断当前服务器的linux系统版本；
114.获取并保存系统日志，基于当前服务器的linux系统版本对应的黑名单筛选出黑
名单日志；
115.在筛选出的黑名单日志中删除当前服务器的linux系统版本对应的白名单中的日志，并判断删除后的黑名单日志中是否还存在错误日志；
116.响应于删除后的黑名单日志中不存在错误日志，将删除后的黑名单日志进行输出。
117.在本发明的一个优选实施例中，还包括：
118.响应于删除后的黑名单日志中存在错误日志，判断错误日志是否为可忽略日志；
119.响应于错误日志是可忽略日志，将可忽略日志删除并添加到当前服务器的linux系统版本对应的白名单中。
120.在本发明的一个优选实施例中，还包括：
121.响应于错误日志不是可忽略日志，将错误日志进行标记并进行报警。
122.在本发明的一个优选实施例中，linux系统版本包括rhel、centos、debian、ubuntu和suse中任意版本的linux系统。
123.此外，根据本发明实施例公开的方法还可以被实现为由处理器执行的计算机程序，该计算机程序可以存储在计算机可读存储介质中。在该计算机程序被处理器执行时，执行本发明实施例公开的方法中限定的上述功能。
124.此外，上述方法步骤以及系统单元也可以利用控制器以及用于存储使得控制器实现上述步骤或单元功能的计算机程序的计算机可读存储介质实现。
125.本领域技术人员还将明白的是，结合这里的公开所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。为了清楚地说明硬件和软件的这种可互换性，已经就各种示意性组件、方块、模块、电路和步骤的功能对其进行了一般性的描述。这种功能是被实现为软件还是被实现为硬件取决于具体应用以及施加给整个系统的设计约束。本领域技术人员可以针对每种具体应用以各种方式来实现的功能，但是这种实现决定不应被解释为导致脱离本发明实施例公开的范围。
126.在一个或多个示例性设计中，功能可以在硬件、软件、固件或其任意组合中实现。如果在软件中实现，则可以将功能作为一个或多个指令或代码存储在计算机可读介质上或通过计算机可读介质来传送。计算机可读介质包括计算机存储介质和通信介质，该通信介质包括有助于将计算机程序从一个位置传送到另一个位置的任何介质。存储介质可以是能够被通用或专用计算机访问的任何可用介质。作为例子而非限制性的，该计算机可读介质可以包括ram、rom、eeprom、cd
‑
rom或其它光盘存储设备、磁盘存储设备或其它磁性存储设备，或者是可以用于携带或存储形式为指令或数据结构的所需程序代码并且能够被通用或专用计算机或者通用或专用处理器访问的任何其它介质。此外，任何连接都可以适当地称为计算机可读介质。例如，如果使用同轴线缆、光纤线缆、双绞线、数字用户线路(dsl)或诸如红外线、无线电和微波的无线技术来从网站、服务器或其它远程源发送软件，则上述同轴线缆、光纤线缆、双绞线、dsl或诸如红外线、无线电和微波的无线技术均包括在介质的定义。如这里所使用的，磁盘和光盘包括压缩盘(cd)、激光盘、光盘、数字多功能盘(dvd)、软盘、蓝光盘，其中磁盘通常磁性地再现数据，而光盘利用激光光学地再现数据。上述内容的组合也应当包括在计算机可读介质的范围内。
127.以上是本发明公开的示例性实施例，但是应当注意，在不背离权利要求限定的本
发明实施例公开的范围的前提下，可以进行多种改变和修改。根据这里描述的公开实施例的方法权利要求的功能、步骤和/或动作不需以任何特定顺序执行。此外，尽管本发明实施例公开的元素可以以个体形式描述或要求，但除非明确限制为单数，也可以理解为多个。
128.应当理解的是，在本文中使用的，除非上下文清楚地支持例外情况，单数形式“一个”旨在也包括复数形式。还应当理解的是，在本文中使用的“和/或”是指包括一个或者一个以上相关联地列出的项目的任意和所有可能组合。
129.上述本发明实施例公开实施例序号仅仅为了描述，不代表实施例的优劣。
130.本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
131.所属领域的普通技术人员应当理解：以上任何实施例的讨论仅为示例性的，并非旨在暗示本发明实施例公开的范围(包括权利要求)被限于这些例子；在本发明实施例的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，并存在如上的本发明实施例的不同方面的许多其它变化，为了简明它们没有在细节中提供。因此，凡在本发明实施例的精神和原则之内，所做的任何省略、修改、等同替换、改进等，均应包含在本发明实施例的保护范围之内。