云计算内存地址段异常测试方法、系统、终端及存储介质与流程

1.本发明涉及云计算技术领域，具体涉及一种云计算内存地址段异常测试方法、系统、终端及存储介质。


背景技术：

2.随着服务器硬件计算性能的不断提升，云计算应运而生，在商务、科研、教学等各个领域飞速发展并提供着强大的数据服务支撑。云计算(cloud computing)是分布式计算的一种，指的是通过网络“云”将巨大的数据计算处理程序分解成无数个小程序，然后，通过多部服务器组成的系统进行处理和分析这些小程序得到结果并返回给用户。云计算早期，简单地说，就是简单的分布式计算，解决任务分发，并进行计算结果的合并。因而，云计算又称为网格计算。通过这项技术，可以在很短的时间内(几秒钟)完成对数以万计的数据的处理，从而达到强大的网络服务。现阶段所说的云服务已经不单单是一种分布式计算，而是分布式计算、效用计算、负载均衡、并行计算、网络存储、热备份冗杂和虚拟化等计算机技术混合演进并跃升的结果。
3.搭建云计算平台需要在物理机资源上创建大量的虚拟机，虚拟机(virtual machine)指通过软件模拟的具有完整硬件系统功能的、运行在一个完全隔离环境中的完整计算机系统。在实体计算机中能够完成的工作在虚拟机中都能够实现。在计算机中创建虚拟机时，需要将实体机的部分硬盘和内存容量作为虚拟机的硬盘和内存容量。每个虚拟机都有独立的cmos、硬盘和操作系统，可以像使用实体机一样对虚拟机进行操作。
4.目前云计算溯其根源需要强力的整合系统作为支撑，这其中伴随着大量数据在内存中持续高速的读取交换，如系统一旦出现读取错误将导致业务模块乃至整个os崩溃，核心业务损失不可估量。已知可导致系统崩溃的原因主要是内存访问错误引起，例如访问不存在的内存地址，访问受保护的内存地址，访问只读的内存地址，这些错误可称为segfault.但segfault错误在正常情况下不会容易被挖掘出来，通常是在伴随着业务量的增加而发生，这也是最致命的时刻。
5.现有测试工具speccpu工具侧重于cpu计算性能，在对cpu进行压力计算时，对内存地址的的异常并不关注。memtester:该工具侧重于内存的区块的读写和物料校验，执行大规模读写时并不能有效引发内存地址异常错误，仅作为内存性能和物理存储区的验证工具。由于云计算涉及的物理服务器数量较大，若一台一台地进行内存地址异常测试会导致测试量多大、测试时间过长的问题。


技术实现要素：

6.针对现有技术的上述不足，本发明提供一种云计算内存地址段异常测试方法、系统、终端及存储介质，以解决上述技术问题。
7.第一方面，本发明提供一种云计算内存地址段异常测试方法，包括：
8.对云计算的虚拟机与物理机进行资源绑定；
9.向虚拟机发布足量计算任务；
10.实时采集虚拟机和物理机的系统日志，并从系统日志中筛选内存地址错误信息。
11.进一步的，对云计算的虚拟机与物理机进行资源绑定，包括：
12.利用taskset命令为云计算的所有物理机均绑定一个唯一的测试虚拟机，构建物理机与测试虚拟机一一对应的关系。
13.通过为云计算的每个物理机绑定一个唯一的测试虚拟机，测试虚拟机可以调用绑定物理机所有cpu计算核，因此在将测试虚拟机与物理机进行资源绑定后能够实现对所有物理机的统一调控。且为一个物理机绑定一个测试虚拟机避免了测试任务重复发布导致的资源浪费问题。
14.进一步的，向虚拟机发布足量计算任务，包括：
15.向各测试虚拟机发布圆周率计算任务，各测试虚拟机调用绑定的物理机的计算资源执行圆周率计算任务。
16.发布的圆周率计算任务能够保证在执行任务时遍历物理机的内存地址，从而保证测试的准确性。
17.进一步的，实时采集虚拟机和物理机的系统日志，并从系统日志中筛选内存地址错误信息，包括：
18.定期采集各测试虚拟机和物理机的系统日志；
19.利用关键词查询技术从采集的系统日志中筛选内存地址错误信息；
20.将内存地址错误信息标记来源后进行汇总。
21.通过定期采集各测试虚拟机和物理机的系统日志并进行内存地址错误信息筛选，能够及时记录测试过程中的内存地址错误信息，避免测试过程中突然出现系统崩溃导致的测试数据丢失。
22.第二方面，本发明提供一种云计算内存地址段异常测试系统，包括：
23.资源绑定单元，用于对云计算的虚拟机与物理机进行资源绑定；
24.任务发布单元，用于向虚拟机发布足量计算任务；
25.错误筛选单元，用于实时采集虚拟机和物理机的系统日志，并从系统日志中筛选内存地址错误信息。
26.进一步的，所述资源绑定单元包括：
27.资源绑定模块，用于利用taskset命令为云计算的所有物理机均绑定一个唯一的测试虚拟机，构建物理机与测试虚拟机一一对应的关系。
28.通过为云计算的每个物理机绑定一个唯一的测试虚拟机，测试虚拟机可以调用绑定物理机所有cpu计算核，因此在将测试虚拟机与物理机进行资源绑定后能够实现对所有物理机的统一调控。且为一个物理机绑定一个测试虚拟机避免了测试任务重复发布导致的资源浪费问题。
29.进一步的，所述任务发布单元包括：
30.任务发布模块，用于向各测试虚拟机发布圆周率计算任务，各测试虚拟机调用绑定的物理机的计算资源执行圆周率计算任务。
31.发布的圆周率计算任务能够保证在执行任务时遍历物理机的内存地址，从而保证测试的准确性。
32.进一步的，所述错误筛选单元包括：
33.日志采集模块，用于定期采集各测试虚拟机和物理机的系统日志；
34.错误筛选模块，用于利用关键词查询技术从采集的系统日志中筛选内存地址错误信息；
35.错误汇总模块，用于将内存地址错误信息标记来源后进行汇总。
36.通过定期采集各测试虚拟机和物理机的系统日志并进行内存地址错误信息筛选，能够及时记录测试过程中的内存地址错误信息，避免测试过程中突然出现系统崩溃导致的测试数据丢失。
37.第三方面，提供一种终端，包括：
38.处理器、存储器，其中，
39.该存储器用于存储计算机程序，
40.该处理器用于从存储器中调用并运行该计算机程序，使得终端执行上述的终端的方法。
41.第四方面，提供了一种计算机存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述各方面所述的方法。
42.本发明的有益效果在于，
43.本发明提供的云计算内存地址段异常测试方法，通过将云计算的虚拟机与物理机进行资源绑定，实现对物理机的资源控制，从而为统一进行内存地址异常测试搭建基础环境。资源绑定完成后向虚拟机发布足量计算任务，虚拟机执行计算任务时会调用物理机的cpu，物理机的cpu在执行计算任务时会不断访问物理机的内存地址，足量的计算任务保证能够遍历物理机内存地址，从而提高测试准确性。在测试过程中，不断采集系统日志并从中解析内存地址错误信息，从而保证测试数据的妥善保存。本发明能够对云计算进行统一的内存地址段异常测试，大大提高了测试效率和准确度，保证了云计算的稳定性。
44.本发明提供的云计算内存地址段异常测试系统，通过将云计算的虚拟机与物理机进行资源绑定，实现对物理机的资源控制，从而为统一进行内存地址异常测试搭建基础环境。资源绑定完成后向虚拟机发布足量计算任务，虚拟机执行计算任务时会调用物理机的cpu，物理机的cpu在执行计算任务时会不断访问物理机的内存地址，足量的计算任务保证能够遍历物理机内存地址，从而提高测试准确性。在测试过程中，不断采集系统日志并从中解析内存地址错误信息，从而保证测试数据的妥善保存。本发明能够对云计算进行统一的内存地址段异常测试，大大提高了测试效率和准确度，保证了云计算的稳定性。
45.本发明提供的终端，执行云计算内存地址段异常测试方法，通过将云计算的虚拟机与物理机进行资源绑定，实现对物理机的资源控制，从而为统一进行内存地址异常测试搭建基础环境。资源绑定完成后向虚拟机发布足量计算任务，虚拟机执行计算任务时会调用物理机的cpu，物理机的cpu在执行计算任务时会不断访问物理机的内存地址，足量的计算任务保证能够遍历物理机内存地址，从而提高测试准确性。在测试过程中，不断采集系统日志并从中解析内存地址错误信息，从而保证测试数据的妥善保存。本发明能够对云计算进行统一的内存地址段异常测试，大大提高了测试效率和准确度，保证了云计算的稳定性。
46.本发明提供的存储介质，保存有执行云计算内存地址段异常测试方法的程序，本发明能够对云计算进行统一的内存地址段异常测试，大大提高了测试效率和准确度，保证
了云计算的稳定性。
47.此外，本发明设计原理可靠，结构简单，具有非常广泛的应用前景。
附图说明
48.为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
49.图1是本发明一个实施例的方法的示意性流程图。
50.图2是本发明一个实施例的系统的示意性框图。
51.图3为本发明实施例提供的一种终端的结构示意图。
具体实施方式
52.为了使本技术领域的人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
53.图1是本发明一个实施例的方法的示意性流程图。其中，图1执行主体可以为一种云计算内存地址段异常测试系统。
54.如图1所示，该方法包括：
55.步骤110，对云计算的虚拟机与物理机进行资源绑定；
56.步骤120，向虚拟机发布足量计算任务；
57.步骤130，实时采集虚拟机和物理机的系统日志，并从系统日志中筛选内存地址错误信息。
58.本发明提供的云计算内存地址段异常测试方法，通过将云计算的虚拟机与物理机进行资源绑定，实现对物理机的资源控制，从而为统一进行内存地址异常测试搭建基础环境。资源绑定完成后向虚拟机发布足量计算任务，虚拟机执行计算任务时会调用物理机的cpu，物理机的cpu在执行计算任务时会不断访问物理机的内存地址，足量的计算任务保证能够遍历物理机内存地址，从而提高测试准确性。在测试过程中，不断采集系统日志并从中解析内存地址错误信息，从而保证测试数据的妥善保存。本发明能够对云计算进行统一的内存地址段异常测试，大大提高了测试效率和准确度，保证了云计算的稳定性。
59.为了便于对本发明的理解，下面以本发明云计算内存地址段异常测试方法的原理，结合实施例中对云计算内存地址段进行异常测试的过程，对本发明提供的云计算内存地址段异常测试方法做进一步的描述。
60.具体的，所述云计算内存地址段异常测试方法包括：
61.s1、对云计算的虚拟机与物理机进行资源绑定。
62.利用taskset命令为云计算的所有物理机均绑定一个唯一的测试虚拟机，构建物理机与测试虚拟机一一对应的关系。
63.kvm下云服务器vcpu与物理cpu的一一绑定：
64.virsh vcpupin kvm
‑
name vcpu n cpu n
65.注释：kvm
‑
name:云服务名称
66.vcpu n：云服务器虚拟cpu核1，核2..
67.cpu n：物理服务器cpu核1，核2..
68.虚拟机的vcpu类似于计算进程，因此利用taskset命令将虚拟机的vcpu与物理机cpu进行资源绑定。
69.通过为云计算的每个物理机绑定一个唯一的测试虚拟机，测试虚拟机可以调用绑定物理机所有cpu计算核，因此在将测试虚拟机与物理机进行资源绑定后能够实现对所有物理机的统一调控。且为一个物理机绑定一个测试虚拟机避免了测试任务重复发布导致的资源浪费问题。
70.s2、向虚拟机发布足量计算任务。
71.向各测试虚拟机发布圆周率计算任务，各测试虚拟机调用绑定的物理机的计算资源执行圆周率计算任务。
72.实现所有cpu，内存的遍历极限运算，验证segfault的存在
73.验证代码：
74.cpu_seqs＝`cat/proc/cpuinfo|grep proce|sed
‑
e"s/.*//g"|tr
‑
s'\n”'`
75.//实现cpu的遍历
76.2、for cpu_seq in$cpu_seqs；do
77.(time echo"scale＝5000；4*a(1)"|taskset
‑
c${cpu_seq}bc
‑
l
‑
q)>./cpu_${cpu_seq}.super_pi 2>&1&
78.done
79.tail
‑
n 5*.super_pi
80.//实现cpu与内存的极限加压遍历。
81.发布的圆周率计算任务能够保证在执行任务时遍历物理机的内存地址，从而保证测试的准确性。
82.s3、实时采集虚拟机和物理机的系统日志，并从系统日志中筛选内存地址错误信息。
83.定期采集各测试虚拟机和物理机的系统日志；利用关键词查询技术从采集的系统日志中筛选内存地址错误信息；将内存地址错误信息标记来源后进行汇总。
84.云计算管理节点中预存有各测试虚拟机和物理机的绑定关系以及ip地址。定期采集所有物理机和测试虚拟机的系统日志，将内存地址错误作为关键词，从系统日志中筛选内存地址错误。若筛选出内存地址错误信息则将内存地址错误信息标记来源(所属物理机或虚拟机)，然后进行保存。测试时间达到预设的时间后，终止圆周率计算任务。若测试期间的系统日志有内存地址错误信息则对相应的节点进行处理，若无内存地址错误信息则判定云计算内存地址段通过异常测试。
85.通过定期采集各测试虚拟机和物理机的系统日志并进行内存地址错误信息筛选，能够及时记录测试过程中的内存地址错误信息，避免测试过程中突然出现系统崩溃导致的测试数据丢失。
86.本实施例提供的云计算内存地址段异常测试方法，通过将云计算的虚拟机与物理
机进行资源绑定，实现对物理机的资源控制，从而为统一进行内存地址异常测试搭建基础环境。资源绑定完成后向虚拟机发布足量计算任务，虚拟机执行计算任务时会调用物理机的cpu，物理机的cpu在执行计算任务时会不断访问物理机的内存地址，足量的计算任务保证能够遍历物理机内存地址，从而提高测试准确性。在测试过程中，不断采集系统日志并从中解析内存地址错误信息，从而保证测试数据的妥善保存。本实施例能够对云计算进行统一的内存地址段异常测试，大大提高了测试效率和准确度，保证了云计算的稳定性。
87.如图2所示，该系统200包括：
88.资源绑定单元210，用于对云计算的虚拟机与物理机进行资源绑定；
89.任务发布单元220，用于向虚拟机发布足量计算任务；
90.错误筛选单元230，用于实时采集虚拟机和物理机的系统日志，并从系统日志中筛选内存地址错误信息。
91.可选地，作为本发明一个实施例，所述资源绑定单元包括：
92.资源绑定模块，用于利用taskset命令为云计算的所有物理机均绑定一个唯一的测试虚拟机，构建物理机与测试虚拟机一一对应的关系。
93.通过为云计算的每个物理机绑定一个唯一的测试虚拟机，测试虚拟机可以调用绑定物理机所有cpu计算核，因此在将测试虚拟机与物理机进行资源绑定后能够实现对所有物理机的统一调控。且为一个物理机绑定一个测试虚拟机避免了测试任务重复发布导致的资源浪费问题。
94.可选地，作为本发明一个实施例，所述任务发布单元包括：
95.任务发布模块，用于向各测试虚拟机发布圆周率计算任务，各测试虚拟机调用绑定的物理机的计算资源执行圆周率计算任务。
96.发布的圆周率计算任务能够保证在执行任务时遍历物理机的内存地址，从而保证测试的准确性。
97.可选地，作为本发明一个实施例，所述错误筛选单元包括：
98.日志采集模块，用于定期采集各测试虚拟机和物理机的系统日志；
99.错误筛选模块，用于利用关键词查询技术从采集的系统日志中筛选内存地址错误信息；
100.错误汇总模块，用于将内存地址错误信息标记来源后进行汇总。
101.通过定期采集各测试虚拟机和物理机的系统日志并进行内存地址错误信息筛选，能够及时记录测试过程中的内存地址错误信息，避免测试过程中突然出现系统崩溃导致的测试数据丢失。
102.图3为本发明实施例提供的一种终端300的结构示意图，该终端300可以用于执行本发明实施例提供的云计算内存地址段异常测试方法。
103.其中，该终端300可以包括：处理器310、存储器320及通信单元330。这些组件通过一条或多条总线进行通信，本领域技术人员可以理解，图中示出的服务器的结构并不构成对本发明的限定，它既可以是总线形结构，也可以是星型结构，还可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
104.其中，该存储器320可以用于存储处理器310的执行指令，存储器320可以由任何类型的易失性或非易失性存储终端或者它们的组合实现，如静态随机存取存储器(sram)，电
可擦除可编程只读存储器(eeprom)，可擦除可编程只读存储器(eprom)，可编程只读存储器(prom)，只读存储器(rom)，磁存储器，快闪存储器，磁盘或光盘。当存储器320中的执行指令由处理器310执行时，使得终端300能够执行以下上述方法实施例中的部分或全部步骤。
105.处理器310为存储终端的控制中心，利用各种接口和线路连接整个电子终端的各个部分，通过运行或执行存储在存储器320内的软件程序和/或模块，以及调用存储在存储器内的数据，以执行电子终端的各种功能和/或处理数据。所述处理器可以由集成电路(integrated circuit，简称ic)组成，例如可以由单颗封装的ic所组成，也可以由连接多颗相同功能或不同功能的封装ic而组成。举例来说，处理器310可以仅包括中央处理器(central processing unit，简称cpu)。在本发明实施方式中，cpu可以是单运算核心，也可以包括多运算核心。
106.通信单元330，用于建立通信信道，从而使所述存储终端可以与其它终端进行通信。接收其他终端发送的用户数据或者向其他终端发送用户数据。
107.本发明还提供一种计算机存储介质，其中，该计算机存储介质可存储有程序，该程序执行时可包括本发明提供的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文：read
‑
only memory，简称：rom)或随机存储记忆体(英文：random access memory，简称：ram)等。
108.因此，本发明通过将云计算的虚拟机与物理机进行资源绑定，实现对物理机的资源控制，从而为统一进行内存地址异常测试搭建基础环境。资源绑定完成后向虚拟机发布足量计算任务，虚拟机执行计算任务时会调用物理机的cpu，物理机的cpu在执行计算任务时会不断访问物理机的内存地址，足量的计算任务保证能够遍历物理机内存地址，从而提高测试准确性。在测试过程中，不断采集系统日志并从中解析内存地址错误信息，从而保证测试数据的妥善保存。本发明能够对云计算进行统一的内存地址段异常测试，大大提高了测试效率和准确度，保证了云计算的稳定性，本实施例所能达到的技术效果可以参见上文中的描述，此处不再赘述。
109.本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中如u盘、移动硬盘、只读存储器(rom，read
‑
only memory)、随机存取存储器(ram，random access memory)、磁碟或者光盘等各种可以存储程序代码的介质，包括若干指令用以使得一台计算机终端(可以是个人计算机，服务器，或者第二终端、网络终端等)执行本发明各个实施例所述方法的全部或部分步骤。
110.本说明书中各个实施例之间相同相似的部分互相参见即可。尤其，对于终端实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例中的说明即可。
111.在本发明所提供的几个实施例中，应该理解到，所揭露的系统和方法，可以通过其它的方式实现。例如，以上所描述的系统实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，系统或单元的间接耦合或通
信连接，可以是电性，机械或其它的形式。
112.所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
113.另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
114.尽管通过参考附图并结合优选实施例的方式对本发明进行了详细描述，但本发明并不限于此。在不脱离本发明的精神和实质的前提下，本领域普通技术人员可以对本发明的实施例进行各种等效的修改或替换，而这些修改或替换都应在本发明的涵盖范围内/任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。