优化网络端口性能的方法、装置、NUMA系统架构及设备与流程

摘要: 本技术涉及计算机,尤其涉及一种优化网络端口性能的方法、装置、numa系统架构及设备。背景技术:1、在高性能数据包处理领域,特别是在数据中心和高性能计算环境中,常...
优化网络端口性能的方法、装置、NUMA系统架构及设备与流程

本技术涉及计算机,尤其涉及一种优化网络端口性能的方法、装置、numa系统架构及设备。

背景技术:

1、在高性能数据包处理领域,特别是在数据中心和高性能计算环境中,常采用链路聚合(bond)技术将多个物理网络端口组合为一个逻辑接口,以提升带宽利用率和链路冗余能力。同时,为了获得更高的报文转发性能,通常结合数据平面开发套件(dpdk)的用户态驱动和轮询模式,并部署于非一致性内存访问(numa)系统架构上。

2、相关技术中,dpdk在创建 bond 虚拟设备后,一般会基于bond设备所在的numa节点创建或查找一个关联的报文缓冲区(mbuf)内存池。在后续初始化bond下属的各物理从属端口(slave)时,常将已分配给bond设备的该内存池直接复用或绑定至每一个slave。

3、当部分slave所在的物理numa节点不同于上述内存池所处节点时,内存访问操作将被迫跨越节点互连链路访问远程内存,由此引入了显著的远程访问延迟和带宽损耗,进而可能导致网络端口的通信性能不佳。

技术实现思路

1、基于上述技术问题,本技术提供了一种优化网络端口性能的方法、装置、numa系统架构及设备,能够提高多网卡聚合numa系统架构的网络通信性能。

2、本技术第一方面提供了一种优化网络端口性能的方法,应用于numa系统架构,所述numa系统架构包括分布在多个numa节点的多个网络端口,所述多个网络端口通过网络聚合技术组合成一个网络逻辑接口,并通过数据平面开发套件dpdk为每个所述网络端口分别分配对应的内存;

3、所述方法包括:

4、在所述numa系统架构运行过程中,通过所述数据平面开发套件dpdk实时监测所述numa系统架构的网络数据包收发过程,得到监测数据;

5、在第一网络端口的通信性能不满足设定性能要求的情况下,基于所述监测数据确定影响所述第一网络端口通信性能的核心因素;

6、在确定影响所述第一网络端口通信性能的核心因素为所述第一网络端口跨numa节点访问内存的情况下,通过所述数据平面开发套件dpdk对所述第一网络端口对应的内存进行调整,以降低所述第一网络端口访问内存的延迟。

7、在一些实现方式中,对所述第一网络端口对应的内存进行调整,以降低所述第一网络端口访问内存的延迟,包括:

8、基于所述监测数据确定所述第一网络端口所在的第一numa节点是否具有空闲内存空间;

9、在确定所述第一numa节点具有空闲内存空间的情况下,从所述第一numa节点的空闲内存中重新为所述第一网络端口分配对应的内存。

10、在一些实现方式中,在确定所述第一numa节点具有空闲内存空间的情况下,从所述第一numa节点的空闲内存中重新为所述第一网络端口分配对应的内存,包括:

11、在确定所述第一numa节点具有空闲内存空间的情况下,判断所述第一numa节点的可分配内存是否大于所述第一网络端口所需的内存;

12、在所述第一numa节点的可分配内存不大于所述第一网络端口所需的内存的情况下,将所述第一numa节点的可分配内存设置为所述第一网络端口对应的第一内存,以及,从所述第一网络端口对应的原内存中分配特定大小内存作为所述第一网络端口对应的第二内存;其中,所述第一numa节点的可分配内存与所述特定大小内存之和,等于所述第一网络端口所需的内存。

13、在一些实现方式中,所述方法还包括:

14、将所述第一网络端口的内存访问策略设置为优先访问所述第一内存。

15、在一些实现方式中,所述方法还包括:

16、在确定所述第一numa节点不具有空闲内存空间的情况下,确定距离所述第一numa节点最近的第二numa节点是否具有空闲内存空间;

17、在确定所述第二numa节点具有空闲内存空间的情况下,从所述第二numa节点的空闲内存中,重新为所述第一网络端口分配对应的内存。

18、在一些实现方式中,所述基于所述监测数据确定影响所述第一网络端口通信性能的核心因素,包括:

19、基于所述numa系统架构的物理拓扑参数,确定所述第一网络端口对应的内存是否为所述第一网络端口所在numa节点之外的其他numa节点的内存,以及,基于所述第一网络端口的收发包统计数据,确定所述第一网络端口跨numa节点收发的数据包总量;

20、若所述第一网络端口对应的内存为所述第一网络端口所在numa节点之外的其他numa节点的内存,并且所述第一网络端口跨numa节点收发的数据包总量超过设定的数据包总量阈值,则确定影响所述第一网络端口通信性能的核心因素为所述第一网络端口跨numa节点访问内存。

21、在一些实现方式中,所述方法还包括:

22、若所述第一网络端口对应的内存为所述第一网络端口所在numa节点的内存,和/或所述第一网络端口跨numa节点收发的数据包总量不超过所述数据包总量阈值,则确定影响所述第一网络端口通信性能的核心因素不是所述第一网络端口跨numa节点访问内存。

23、本技术第二方面提供了一种优化网络端口性能的装置,应用于numa系统架构,所述numa系统架构包括分布在多个numa节点的多个网络端口,所述多个网络端口通过网络聚合技术组合成一个网络逻辑接口,并通过数据平面开发套件dpdk为每个所述网络端口分别分配对应的内存;

24、所述装置包括:

25、监测单元,用于在所述numa系统架构运行过程中,通过所述数据平面开发套件dpdk实时监测所述numa系统架构的网络数据包收发过程,得到监测数据;所述监测数据包括所述numa系统架构的物理拓扑参数、各numa节点的内存使用情况和各个所述网络端口的收发包统计数据;

26、判断单元,用于在第一网络端口的通信性能不满足设定性能要求的情况下,基于所述监测数据确定影响所述第一网络端口通信性能的核心因素;

27、处理单元,用于在确定影响所述第一网络端口通信性能的核心因素为所述第一网络端口跨numa节点访问内存的情况下,通过所述数据平面开发套件dpdk对所述第一网络端口对应的内存进行调整,以降低所述第一网络端口访问内存的延迟。

28、本技术第三方面提供了一种numa系统架构,所述numa系统架构包括分布在多个numa节点的多个网络端口,所述多个网络端口通过网络聚合技术组合成一个网络逻辑接口,并通过数据平面开发套件dpdk为每个所述网络端口分别分配对应的内存;

29、所述numa系统架构被配置为执行上述的优化网络端口性能的方法。

30、本技术第四方面提供了一种计算机设备,包括上述的numa系统架构。

31、本技术提供的优化网络端口性能的方法能够在numa系统架构运行过程中实时监测网络数据包收发过程,得到监测数据。在第一网络端口的性能不满足要求时,基于监测数据确定影响第一网络端口性能的核心因素;若核心因素为第一网络端口跨numa节点访问内存,则通过dpdk对第一网络端口对应的内存进行调整,以降低其访问内存的延迟。上述方案能够实时地根据numa系统的网络数据包收发过程动态调整网络端口对应的内存,以避免由于其跨numa节点访问内存导致访问内存延迟高而影响其通信性能,从而可以有效提升网络端口的通信性能。