一种监控指标的采集方法、装置、电子设备及存储介质与流程

1.本技术涉及数据采集技术领域，具体而言，涉及一种监控指标的采集方法、装置、电子设备及计算机可读存储介质。


背景技术：

2.监控数据的采集方式根据监控数据来源的不同要分为默认采集、插件、探测、日志、埋点几种。数据采集器可以从所运行的系统上直接采集相关运维数据，或从其它系统的api中获得数据，亦或是从系统或第三方组件中监听监控数据。
3.目前的监控软件可以实现对大部分厂商网络设备的监控，比如设备端口、设备型号、版本信息等，因为这些设备的对象标识符(object identifier，oid)值都是公开的，但是很多厂商的私有oid值并未公布，并且找不到oid描述，这给网络设备性能监控带来了困难。大部分工程师都只能使用mib walk等工具对设备oid进行扫描，然后对几万条、甚至几十万条oid值进行人工分析和测试，工作量巨大，并且有时使用的扫描工具不合适，会导致需要的oid值无法扫描出来，因此耗费巨大的时间成本和开发成本，效率低下。


技术实现要素：

4.本技术实施例的目的在于提供一种监控指标的采集方法、装置、电子设备及计算机可读存储介质，可以通过oid直接获得相应的指标信息，节省时间和开发成本。
5.第一方面，本技术实施例提供了一种监控指标的采集方法，所述方法包括：
6.获取待采集监控设备的管理信息库；
7.解析所述管理信息库，获得监控指标；
8.根据所述监控指标获得监控数据库；
9.获得所述监控数据库相应的oid集合；
10.获取调度任务；
11.根据所述调度任务在所述监控数据库中查询所述oid集合，获得指标信息。
12.在上述实现过程中，根据监控设备的监控指标和监控指标对应的oid获得监控数据库和oid集合，方便对监控指标以及oid的实时查找，且使得监控设备的调用更加方便，节省了时间和开发成本。
13.进一步地，所述根据所述监控指标获得监控数据库的步骤，包括：
14.获取所述监控指标的指标来源信息和指标类型信息；
15.根据所述指标来源信息和所述指标类型信息将所述监控指标进行分类，得到多个监控指标集合；
16.将所述多个监控指标集合进行合并，得到所述监控数据库。
17.在上述实现过程中，根据指标来源信息和指标类型信息对监控指标进行分类，方便后续对于监控指标的查找，节省了查找监控指标的时间，并且可以保证查找到的监控指标的准确性。
18.进一步地，所述获得所述监控数据库相应的oid集合的步骤，包括：
19.获取所述监控数据库中所述监控指标相应的oid；
20.根据所述oid获得所述oid集合。
21.在上述实现过程中，将监控指标的oid统一放置在oid集合中，方便后续对于监控指标的oid的查找，避免了无法查询到监控指标对应的oid的情况发生。
22.进一步地，所述根据所述oid获得所述oid集合的步骤，包括：
23.获取所述oid对应的监控指标的指标类型信息；
24.根据具有监控指标的指标类型信息的oid获得所述oid集合。
25.在上述实现过程中，将监控指标的指标类型信息作为oid的标签，避免查找oid对应的类型的繁琐过程，可以快速找到监控指标对应的oid，节省了oid的查找时间。
26.进一步地，所述根据所述调度任务在所述监控数据库中查询所述oid集合，获得指标信息的步骤，包括：
27.获取所述调度任务中的任务来源信息和任务类型信息；
28.根据所述任务来源信息和所述任务类型信息查找所述监控数据库中对应的监控指标；
29.根据所述监控指标获得所述指标信息。
30.在上述实现过程中，将调度任务中的任务来源信息和任务类型信息与监控数据库中的相互对应，可以快速找到对应的监控指标，不需要对所有监控数据库中的监控指标进行遍历，提高了查找速度。
31.进一步地，所述根据所述监控指标获得所述指标信息的步骤，包括：
32.获取所述监控指标对应的oid；
33.根据所述oid获得所述指标信息。
34.在上述实现过程中，根据oid可以快速查找到调度任务中对应的指标信息，无需遍历oid集合中的每一个oid，并且保证了指标信息和监控指标以及oid的完全对应。
35.进一步地，所述根据所述oid获得所述指标信息的步骤，包括：
36.根据所述oid获得所述oid相应的oid指令；
37.发送所述oid指令至服务器，以使所述服务器返回所述指标信息。
38.在上述实现过程中，查找到想应的oid之后，获得oid对应的oid指令，无需再调用监控指标，可以直接获取到监控指标对应的指标信息。
39.第二方面，本技术实施例还提供了一种监控指标的采集装置，所述装置包括：
40.获取模块，用于获取待采集监控设备的管理信息库；还用于获取调度任务；
41.解析模块，用于解析所述管理信息库，获得监控指标；
42.集成模块，用于根据所述监控指标获得监控数据库；
43.oid集合获得模块，用于获得所述监控数据库相应的oid集合；
44.查询模块，用于根据调度任务在监控数据库中查询oid集合，获得指标信息。
45.在上述实现过程中，根据监控设备的监控指标和监控指标对应的oid获得监控数据库和oid集合，方便对监控指标以及oid的实时查找，且使得监控设备的调用更加方便，节省了时间和开发成本。
46.第三方面，本技术实施例提供的一种电子设备，包括：存储器、处理器以及存储在
所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如第一方面任一项所述的方法的步骤。
47.第四方面，本技术实施例提供的一种计算机可读存储介质，所述存储介质上存储有操作指令，当所述操作指令在计算机上运行时，使得所述计算机执行如第一方面任一项所述的方法。
48.第五方面，本技术实施例提供的一种计算机程序产品，所述计算机程序产品在计算机上运行时，使得计算机执行如第一方面任一项所述的方法。
49.本公开的其他特征和优点将在随后的说明书中阐述，或者，部分特征和优点可以从说明书推知或毫无疑义地确定，或者通过实施本公开的上述技术即可得知。
50.并可依照说明书的内容予以实施，以下以本技术的较佳实施例并配合附图详细说明如后。
附图说明
51.为了更清楚地说明本技术实施例的技术方案，下面将对本技术实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本技术的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
52.图1为本技术实施例提供的监控指标的采集方法的流程示意图；
53.图2为本技术实施例提供的监控指标的采集装置的结构组成示意图；
54.图3为本技术实施例提供的电子设备的结构组成示意图。
具体实施方式
55.下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行描述。
56.应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。同时，在本技术的描述中，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
57.下面结合附图和实施例，对本技术的具体实施方式作进一步详细描述。以下实施例用于说明本技术，但不用来限制本技术的范围。
58.实施例一
59.图1是本技术实施例提供的监控指标的采集方法的流程示意图，如图1所示，该方法包括：
60.s1，获取待采集监控设备的管理信息库；
61.s2，解析管理信息库，获得监控指标；
62.s3，根据监控指标获得监控数据库；
63.s4，获得监控数据库相应的oid集合；
64.s5，获取调度任务；
65.s6，根据调度任务在监控数据库中查询oid集合，获得指标信息。
66.在上述实现过程中，根据监控设备的监控指标和监控指标对应的oid获得监控数据库和oid集合，方便对监控指标以及oid的实时查找，且使得监控设备的调用更加方便，节
省了时间和开发成本。
67.监控指标采集的方式根据监控数据来源的不同主要分为默认采集、插件、探测、日志、埋点几种。数据采集器一般是支持插件机制的数据采集和数据上报工具。它可以从自己所运行的系统上直接采集相关运维数据，或从其它系统的api中获得数据，亦或是从系统或第三方组件中监听监控数据。
68.收集器决定了监控数据的来源，收集器的好坏决定了监控数据的覆盖面、数据质量和及时性。一个好的监控系统应该配备大量针对常见技术场景的收集器，并提供方便的自定义数据接口。标准场景的监控数据占所有监控数据的70％左右，大量的收集器可以大大降低监控系统的持有成本，自定义监控数据占所有监控数据的30％左右，设计良好的自定义监控数据接口可以更好的调度、组织和收集自定义数据源，并为后续的二次开发工作夯实工程基础。
69.管理信息库(management information base，mib)是传输控制协议(transmission control protocol，tcp)和互联网协议(internet protocol，ip)两种网络管理协议标准框架的内容之一，mib定义了受管设备必须保存的数据项、允许对每个数据项进行的操作及其含义，即管理系统可访问的受管设备的控制和状态信息等数据变量都保存在mib中。它是一种数型结构的数据库，且每一个被监管的对象都由一个唯一的oid来识别。
70.任何一个被管理的资源都可以表示成一个对象，称为被管理的对象。mib是被管理对象的集合。它定义了被管理对象的一系列属性：对象的名称、对象的访问权限和对象的数据类型等。示例性地，被管理的对象可以为监控设备。
71.每个简单网络管理协议(simple network management protocol，snmp)设备都有自己的mib。mib也可以看作是网络管理系统(network management system，nms)和snmp之间的桥梁。
72.可选地，管理端是java工程集成snmp4j.jar，管理mib，通过工具类与代理端进行与snmp之间的操作。
73.代理端为被管理对象安装net-snmp组件，net-snmp是在嵌入式系统中部署最为广泛的snmp实现方案，也是最佳方案。其特点性能稳定，消耗服务器性能小，部署实施简单。
74.进一步地，s3包括：
75.获取监控指标的指标来源信息和指标类型信息；
76.根据指标来源信息和指标类型信息将监控指标进行分类，得到多个监控指标集合；
77.将多个监控指标集合进行合并，得到监控数据库。
78.可选地，监控指标集合中还包括了集合信息，如集合名称和集合id等。
79.在上述实现过程中，根据指标来源信息和指标类型信息对监控指标进行分类，方便后续对于监控指标的查找，节省了查找监控指标的时间，并且可以保证查找到的监控指标的准确性。
80.进一步地，s4包括：
81.获取监控数据库中监控指标相应的oid；
82.根据oid获得oid集合。
83.在上述实现过程中，将监控指标的oid统一放置在oid集合中，方便后续对于监控
指标的oid的查找，避免了无法查询到监控指标对应的oid的情况发生。
84.示例性地，如表1示为oid集合。
85.表1oid集合示意表
86.监控指标名称oid存储单位集合id硬盘总大小1.3.6.1.2.1.25.2.3.1.5kb1磁盘已用大小1.3.6.1.2.1.25.2.3.1.6kb1磁盘类型1.3.6.1.2.1.25.2.3.1.2 1cpu使用率1.3.6.1.2.1.25.3.3.1.2 2
87.进一步地，根据oid获得oid集合的步骤，包括：
88.获取oid对应的监控指标的指标类型信息；
89.根据具有监控指标的指标类型信息的oid获得oid集合。
90.示例性地，表2示为监控指标集合。
91.表2监控指标集合示意表
92.集合名称集合标记来源类型集合id硬盘信息disk清华同方ca2800e1cpu信息cpu清华同方ca2800e2硬盘信息disk迈普ns3320-523
93.在上述实现过程中，将监控指标的指标类型信息作为oid的标签，避免查找oid对应的类型的繁琐过程，可以快速找到监控指标对应的oid，节省了oid的查找时间。
94.进一步地，s6包括：
95.获取调度任务中的任务来源信息和任务类型信息；
96.根据任务来源信息和任务类型信息查找监控数据库中对应的监控指标；
97.根据监控指标获得指标信息。
98.在上述实现过程中，将调度任务中的任务来源信息和任务类型信息与监控数据库中的相互对应，可以快速找到对应的监控指标，不需要对所有监控数据库中的监控指标进行遍历，提高了查找速度。
99.进一步地，根据监控指标获得指标信息的步骤，包括：
100.获取监控指标对应的oid；
101.根据oid获得指标信息。
102.在上述实现过程中，根据oid可以快速查找到调度任务中对应的指标信息，无需遍历oid集合中的每一个oid，并且保证了指标信息和监控指标以及oid的完全对应。
103.示例性地，如表示3为指标信息。
104.表3指标信息示意表
105.监控设备ip来源类型snmp版本snmp端口192.16.1.2清华同方ca2800e1161
106.进一步地，根据oid获得指标信息的步骤，包括：
107.根据oid获得oid相应的oid指令；
108.发送oid指令至服务器，以使服务器返回指标信息。
109.在上述实现过程中，查找到想应的oid之后，获得oid对应的oid指令，无需再调用监控指标，可以直接获取到监控指标对应的指标信息。
110.一个隔离域部署一个采集器，可选地，采集器为nms，通过调度任务进行调度，输入被管理对象ip，通过snmp协议向被管理物理机发送监控请求。轮训采集被管理对象，一个监控指标对应一个oid，发送一次oid指令即可获取一次该指标对应数据：比如发送一次磁盘总大小oid指令得到磁盘总大小数据，发送一次cpu利用率oid指令得到cpu利用率数据。
111.实施例二
112.为了执行上述实施例一对应的方法，以实现相应的功能和技术效果，下面提供一种监控指标的采集装置，如图2所示，该装置包括：
113.获取模块1，用于获取待采集监控设备的管理信息库；还用于获取调度任务；
114.解析模块2，用于解析管理信息库，获得监控指标；
115.集成模块3，用于根据监控指标获得监控数据库；
116.oid集合获得模块4，用于获得监控数据库相应的oid集合；
117.查询模块5，用于根据调度任务在监控数据库中查询oid集合，获得指标信息。
118.在上述实现过程中，根据监控设备的监控指标和监控指标对应的oid获得监控数据库和oid集合，方便对监控指标以及oid的实时查找，且使得监控设备的调用更加方便，节省了时间和开发成本。
119.进一步地，集成模块3还用于：
120.获取监控指标的指标来源信息和指标类型信息；
121.根据指标来源信息和指标类型信息将监控指标进行分类，得到多个监控指标集合；
122.将多个监控指标集合进行合并，得到监控数据库。
123.在上述实现过程中，根据指标来源信息和指标类型信息对监控指标进行分类，方便后续对于监控指标的查找，节省了查找监控指标的时间，并且可以保证查找到的监控指标的准确性。
124.进一步地，oid集合获得模块4还用于：
125.获取监控数据库中监控指标相应的oid；
126.根据oid获得oid集合。
127.在上述实现过程中，将监控指标的oid统一放置在oid集合中，方便后续对于监控指标的oid的查找，避免了无法查询到监控指标对应的oid的情况发生。
128.进一步地，oid集合获得模块4还用于：
129.获取oid对应的监控指标的指标类型信息；
130.根据具有监控指标的指标类型信息的oid获得oid集合。
131.在上述实现过程中，将监控指标的指标类型信息作为oid的标签，避免查找oid对应的类型的繁琐过程，可以快速找到监控指标对应的oid，节省了oid的查找时间。
132.进一步地，查询模块5还用于：
133.获取调度任务中的任务来源信息和任务类型信息；
134.根据任务来源信息和任务类型信息查找监控数据库中对应的监控指标；
135.根据监控指标获得指标信息。
136.在上述实现过程中，将调度任务中的任务来源信息和任务类型信息与监控数据库中的相互对应，可以快速找到对应的监控指标，不需要对所有监控数据库中的监控指标进行遍历，提高了查找速度。
137.进一步地，查询模块5还用于：
138.获取监控指标对应的oid；
139.根据oid获得指标信息；
140.根据oid获得oid相应的oid指令；
141.发送oid指令至服务器，以使服务器返回指标信息。
142.在上述实现过程中，根据oid可以快速查找到调度任务中对应的指标信息，无需遍历oid集合中的每一个oid，并且保证了指标信息和监控指标以及oid的完全对应。查找到想应的oid之后，获得oid对应的oid指令，无需再调用监控指标，可以直接获取到监控指标对应的指标信息。
143.上述的监控指标的采集装置可实施上述实施例一的方法。上述实施例一中的可选项也适用于本实施例，这里不再详述。
144.本技术实施例的其余内容可参照上述实施例一的内容，在本实施例中，不再进行赘述。
145.实施例三
146.本技术实施例提供一种电子设备，包括存储器及处理器，该存储器用于存储计算机程序，该处理器运行计算机程序以使电子设备执行实施例一的监控指标的采集方法。
147.可选地，上述电子设备可以是服务器。
148.请参见图3，图3为本技术实施例提供的电子设备的结构组成示意图。该电子设备可以包括处理器31、通信接口32、存储器33和至少一个通信总线34。其中，通信总线34用于实现这些组件直接的连接通信。其中，本技术实施例中设备的通信接口32用于与其他节点设备进行信令或数据的通信。处理器31可以是一种集成电路芯片，具有信号的处理能力。
149.上述的处理器31可以是通用处理器，包括中央处理器(central processing unit，cpu)、网络处理器(network processor，np)等；还可以是数字信号处理器(dsp)、专用集成电路(asic)、现成可编程门阵列(fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本技术实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器31也可以是任何常规的处理器等。
150.存储器33可以是，但不限于，随机存取存储器(random access memory，ram)，只读存储器(read only memory，rom)，可编程只读存储器(programmable read-only memory，prom)，可擦除只读存储器(erasable programmable read-only memory，eprom)，电可擦除只读存储器(electric erasable programmable read-only memory，eeprom)等。存储器33中存储有计算机可读取操作指令，当计算机可读取操作指令由所述处理器31执行时，设备可以执行上述图1方法实施例涉及的各个步骤。
151.可选地，电子设备还可以包括存储控制器、输入输出单元。存储器33、存储控制器、处理器31、外设接口、输入输出单元各元件相互之间直接或间接地电性连接，以实现数据的传输或交互。例如，这些元件相互之间可通过一条或多条通信总线34实现电性连接。处理器31用于执行存储器33中存储的可执行模块，例如设备包括的软件功能模块或计算机程序。
152.输入输出单元用于提供给用户创建任务以及为该任务创建启动可选时段或预设执行时间以实现用户与服务器的交互。输入输出单元可以是，但不限于，鼠标和键盘等。
153.可以理解，图3所示的结构仅为示意，电子设备还可包括比图3中所示更多或者更少的组件，或者具有与图3所示不同的配置。图3中所示的各组件可以采用硬件、软件或其组合实现。
154.另外，本技术实施例还提供一种计算机可读存储介质，其存储有计算机程序，该计算机程序被处理器执行时实现实施例一的监控指标的采集方法。
155.本技术实施例还提供一种计算机程序产品，该计算机程序产品在计算机上运行时，使得计算机执行方法实施例所述的方法。
156.在本技术所提供的几个实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本技术的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行操作指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机操作指令的组合来实现。
157.另外，在本技术各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。
158.所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干操作指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本技术各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、rom、ram、磁碟或者光盘等各种可以存储程序代码的介质。
159.以上所述仅为本技术的实施例而已，并不用于限制本技术的保护范围，对于本领域的技术人员来说，本技术可以有各种更改和变化。凡在本技术的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本技术的保护范围之内。应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
160.以上所述，仅为本技术的具体实施方式，但本技术的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本技术揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本技术的保护范围之内。因此，本技术的保护范围应所述以权利要求的保护范围为准。
161.需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖
非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个
……”
限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。