RDMA数据流处理方法、程序产品、设备及存储介质与流程
本发明涉及rdma网络技术,尤其涉及一种rdma数据流处理方法、程序产品、设备及存储介质。
背景技术:
1、在广域rdma(remote direct memory access,远程直接内存访问) 无损网络中,一些高性能应用程序,例如分布式人工智能训练、高性能计算中的科学模拟、跨数据中心的分布式存储与备份等,经常会产生大象流。大象流是通过网络链路进行大量的,持续的传递数据的过程,大象流会独占缓冲区、引发pfc(priority-based flow control,基于优先级的流量控制)暂停,导致对延迟敏感的老鼠流延迟激增和吞吐量骤降。因此,如何智能地调度和管理这些大象流和老鼠流,使得来源于不同应用程序的数据流的传输互不影响,提高各自的传输性能,是当前广域rdma无损网络技术研究的焦点和困难点。
技术实现思路
1、针对现有技术存在的问题,本发明的目的是提供一种可以将来源于不同应用程序的数据流被分配到不同的传输通道中的rdma数据流处理方法、程序产品、设备及存储介质。
2、为了实现上述发明目的,本发明提供了如下技术方案:
3、第一方面,本发明提供了一种rdma数据流处理方法,包括:
4、在接收到rdma数据流的情况下,获取所述rdma数据流的来源标识符;
5、从所述rdma数据流中解析出目的地址和目的队列对字段;其中,发送所述rdma数据流的应用程序不同,则所述rdma数据流的目的队列对字段所属字段范围不同;
6、根据所述来源标识符和目的地址,采用隧道路由表,确定对应的srv6隧道组,其中,所述隧道路由表用于指示不同来源标识符和不同目的地址范围的组合对应的srv6隧道组;
7、根据所述srv6隧道组和所述目的队列对字段,采用acl匹配规则,确定对应的srv6隧道,其中,所述acl匹配规则用于指示不同srv6隧道组以及不同目的队列对字段所属字段范围的组合所匹配的srv6隧道;
8、将所述rdma数据流引流到确定的所述srv6隧道中进行数据传输。
9、进一步的,所述方法还包括:
10、根据rdma数据流和所述目的队列对字段确定所述rdma数据流的哈希因子;
11、采用所述哈希因子对所述rdma数据流进行负载分担转发。
12、进一步的,所述根据rdma数据流和所述目的队列对字段确定所述rdma数据流的哈希因子,具体包括:
13、从所述rdma数据流获取包括源地址、目的地址、源端口、目的端口和协议号的五元组;
14、将所述五元组和所述目的队列对字段的组合作为所述哈希因子。
15、进一步的,对于发送rdma数据流的第一应用程序或第二应用程序,在所述第一应用程序的数据传输速率大于所述第二应用程序的数据传输速率的情况下,所述第一应用程序的所述目的队列对字段所属字段范围对应的srv6隧道带宽,大于所述第二应用程序的所述目的队列对字段所属字段范围对应的srv6隧道带宽。
16、进一步的,所述srv6隧道组包括若干条目的地址相同的srv6隧道,所述acl匹配规则中,被匹配的srv6隧道为所述srv6隧道组中的srv6隧道。
17、进一步的,所述acl匹配规则中,一个目的队列对字段范围对应一个srv6隧道,或多个目的队列对字段范围对应一个srv6隧道。进一步的,所述rdma数据流的来源标识符为接收所述rdma数据流的接口所绑定的虚拟路由实例标识符。
18、第二方面,本发明提供了一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现第一方面所述的方法。
19、第三方面,本发明提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序以实现第一方面所述的方法。
20、第四方面,本发明提供了一种计算机可读存储介质,其上存储有计算机程序/指令,所述计算机程序/指令在由处理器执行时实现第一方面所述的方法。
21、本发明与现有技术相比,其有益效果是:本发明提供的rdma数据流处理方法在接收到rdma数据流的情况下,获取所述rdma数据流的来源标识符;从所述rdma数据流中解析出目的地址和目的队列对字段;其中,发送所述rdma数据流的应用程序不同,所述rdma数据流的目的队列对字段所属字段范围不同;根据所述来源标识符和目的地址,采用隧道路由表,确定对应的srv6隧道组,其中,所述隧道路由表用于指示不同来源标识符和不同目的地址范围的组合对应的srv6隧道组;根据所述srv6隧道组和所述目的队列对字段,采用acl匹配规则,确定对应的srv6隧道,其中,所述acl匹配规则用于指示不同srv6隧道组以及不同目的队列对字段所属字段范围的组合所匹配的srv6隧道;将所述rdma数据流引流到确定的所述srv6隧道中进行数据传输。本发明在接收到不同应用程序发送的rdma数据流时,根据rdma数据流的来源标识符和目的地址,确定其所属的srv6隧道组,再根据目的队列对字段所属字段范围,确定其匹配的srv6隧道,因为不同应用程序的rdma数据流的目的队列对字段所属字段范围不同,而不同的目的队列对字段范围对应的srv6隧道不同,所以使得不同应用程序(例如大象流和老鼠流)的rdma数据流被分配到不同的srv6隧道中,让来源于不同应用程序的rdma数据流的传输互不影响。
1.一种rdma数据流处理方法,其特征在于,包括:
2.根据权利要求1所述的rdma数据流处理方法,其特征在于,所述方法还包括:
3.根据权利要求2所述的rdma数据流处理方法,其特征在于,所述根据rdma数据流和所述目的队列对字段确定所述rdma数据流的哈希因子,具体包括:
4.根据权利要求1所述的rdma数据流处理方法,其特征在于,对于发送rdma数据流的第一应用程序或第二应用程序,在所述第一应用程序的数据传输速率大于所述第二应用程序的数据传输速率的情况下,所述第一应用程序的所述目的队列对字段所属字段范围对应的srv6隧道带宽,大于所述第二应用程序的所述目的队列对字段所属字段范围对应的srv6隧道带宽。
5.根据权利要求1所述的rdma数据流处理方法,其特征在于,所述srv6隧道组包括若干条目的地址相同的srv6隧道,所述acl匹配规则中,被匹配的srv6隧道为所述srv6隧道组中的srv6隧道。
6.根据权利要求1所述的rdma数据流处理方法,其特征在于,所述acl匹配规则中,一个目的队列对字段范围对应一个srv6隧道,或多个目的队列对字段范围对应一个srv6隧道。
7.根据权利要求1所述的rdma数据流处理方法,其特征在于,所述rdma数据流的来源标识符为接收所述rdma数据流的接口所绑定的虚拟路由实例标识符。
8.一种计算机程序产品,包括计算机程序,其特征在于:所述计算机程序被处理器执行时实现权利要求1-7中任一项所述的方法。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于:所述处理器执行所述计算机程序以实现如权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序/指令,其特征在于:所述计算机程序/指令在由处理器执行时实现权利要求1-7中任一项所述的方法。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com