一种用于MoQ架构媒体传输系统的自适应调节装置

摘要: 本发明涉及实时媒体传输领域,具体来说,涉及基于解耦式媒体传输架构的实时媒体发送节奏控制领域,更具体地说,涉及一种用于moq架构媒体传输系统的自适应调节装置。背景...
一种用于MoQ架构媒体传输系统的自适应调节装置

本发明涉及实时媒体传输领域,具体来说,涉及基于解耦式媒体传输架构的实时媒体发送节奏控制领域,更具体地说,涉及一种用于moq架构媒体传输系统的自适应调节装置。

背景技术:

1、在实时媒体传输系统中,传输层通过pacing模块(发送节奏控制模块)来平滑数据包的发出速率,避免突发流量对网络造成冲击。pacing rate(pacing模块释放数据包的速率)通常由拥塞控制算法(congestion control algorithm,cca)根据其带宽估计和pacinggain(拥塞控制算法中计算pacing rate时使用的倍率参数)计算得出,服务于传输层自身的拥塞控制目标。

2、现有的实时媒体传输方案主要包括以下三类:第一类,webrtc一体化协议栈,该类方案中pacing模块按拥塞控制算法给定的速率平滑释放数据包。当编码器超调(实际帧大于目标)产生积压时,pacer(发送节奏控制器)按当前速率逐步排空队列。由于 webrtc 是紧耦合架构,pacer可以直接访问编码器输出状态和cca内部的控制变量,在部分实现中会根据队列深度做一定的动态调整;第二类, ace等联合编码器和pacer的实时通信突发整形方案,该方案通过协调编码器的输出时机和pacer的发送节奏来减少帧级突发对网络的冲击;第三类,ietf(internet engineering task force,互联网工程任务组)正在标准化的moq(media over quic,一种基于quic/webtransport的媒体传输协议框架)协议采用分层解耦架构方案,该方案将应用层(媒体编码与封装)和传输层(拥塞控制与数据包发送)分离。在这种架构下,传输层的cca不感知应用层当前是否产生了超调帧、发送队列中是否有积压。

3、在现有实时媒体传输方案中,传输层拥塞控制算法(cca)的发送节奏调节仅服务于传输层自身的拥塞控制目标,不感知应用层的帧级积压状态,当编码器产生超调帧时,发送队列中的积压数据无法被及时排空,单个超调帧的延迟会逐帧累积并向后传播,引发时延级联放大现象,此外,现有的突发整形方案虽然能够协调编码器输出与发送节奏以降低突发冲击,但其控制策略不区分网络状态,在弱网环境下仍保持突发发送,加剧了丢包和时延恶化,且该类方案需修改底层cca的处理逻辑与具体cca实现紧密绑定,无法在不同拥塞控制算法间泛化复用。

4、需要说明的是:本背景技术仅用于介绍本发明的相关信息,以便于帮助理解本发明的技术方案,但并不意味着相关信息必然是现有技术。相关信息与本发明方案一同提交和公开,在没有证据表明相关信息已在本发明的申请日以前公开的情况下,相关信息不应被视为现有技术。

技术实现思路

1、因此,本发明的目的在于克服上述现有技术的缺陷,提供一种用于moq架构媒体传输系统的自适应调节装置。

2、本发明的目的是通过以下技术方案实现的:

3、根据本发明的第一方面,提供一种用于moq架构媒体传输系统的自适应调节装置,用于自适应调节moq架构媒体传输系统中媒体数据对象的发送速率,所述自适应调节装置包括:本地负载感知模块,用于在moq架构媒体传输系统生成新的媒体数据对象时,获取moq架构媒体传输系统未发送的所有媒体数据对象;链路压力感知模块,用于实时评估moq架构媒体传输系统中网络链路的负载压力;锚定速率计算模块,用于计算moq架构媒体传输系统在预设排空周期内发送完当前未发送的所有媒体数据对象所需要的最低发送速率以作为锚定发送速率;决策模块,用于获取moq架构媒体传输系统中的建议发送速率,以锚定发送速率与获取的建议发送速率为边界构建候选发送速率区间,根据当前网络链路的负载压力采用预设方法从候选发送速率区间内选取目标发送速率,并使moq架构媒体传输系统以目标发送速率发送媒体数据对象,其中,目标发送速率与网络链路的负载压力呈负相关。

4、该方案至少能够实现以下有益技术效果:

5、该方案通过本地负载感知模块获取未发送的所有媒体数据对象,使锚定速率计算模块能够计算排空积压所需的最低发送速率,决策模块再以锚定速率和建议速率为边界、根据链路压力选取目标发送速率,使传输层发送节奏感知应用层帧级积压状态,解决moq架构中编码器超调时积压无法及时排空、引发时延级联放大的问题,在网络宽松时优先排空积压防止时延累积,在网络紧张时主动限速避免加剧拥塞,在不修改cca核心逻辑的前提下同时兼顾了帧时效性和网络稳定性。

6、可选的,所述链路压力感知模块被配置为,以moq架构媒体传输系统中媒体数据对象在网络链路中的实际传输时延与网络链路的最小往返时延之差的归一化值作为网络链路的负载压力。

7、该方案至少能够实现以下有益技术效果:

8、该方案以媒体数据对象的实际传输时延与最小往返时延之差的归一化值作为网络链路的负载压力,直接反映网络排队时延变化趋势,且不依赖cca内部状态,可在moq解耦架构中独立运行。

9、可选的,所述链路压力感知模块被配置为,以moq架构媒体传输系统中网络链路的丢包率评估网络链路的负载压力。

10、该方案至少能够实现以下有益技术效果:

11、该方案以网络链路丢包率评估网络链路的负载压力,准确反映网络拥塞程度,为双模切换决策模块提供可靠的切换依据。

12、可选的,所述链路压力感知模块被配置为,基于moq架构媒体传输系统中网络链路反馈的路由器显式拥塞通知评估网络链路的负载压力。

13、该方案至少能够实现以下有益技术效果:

14、该方案基于路由器显式拥塞通知评估网络链路的负载压力,在丢包发生前提前感知网络拥塞趋势,相比依赖丢包反馈具有更快的响应速度。

15、可选的,所述链路压力感知模块被配置为,基于moq架构媒体传输系统中接收端反馈的帧间时延抖动或接收端的缓冲区的负载评估网络链路的负载压力。

16、该方案至少能够实现以下有益技术效果:

17、该方案基于接收端反馈的帧间时延抖动或缓冲区负载评估链路压力,真实反映网络传输对媒体播放体验的影响,作为发送端本地压力感知的有效补充信号。

18、可选的,在所述锚定速率计算模块中,所述预设排空周期为moq架构媒体传输系统中单个媒体数据对象的生成时间间隔或多个媒体数据对象的生成时间间隔之和。

19、该方案至少能够实现以下有益技术效果:

20、该方案将预设排空周期设置为单个媒体数据对象的生成时间间隔时,保证积压在一个帧间隔内及时排空;设置为多个时间间隔之和时,允许积压在更长窗口内平滑消化,减小突发对网络的冲击,适用于不同时延敏感等级的场景。

21、可选的,在所述双模切换决策模块中,所述预设方法为:当负载压力小于或等于预设负载压力阈值且moq架构媒体传输系统中存在积压的媒体数据对象时,将锚定发送速率与建议发送速率中的最大值作为目标发送速率,当负载压力小于或等于预设阈值且moq架构媒体传输系统中不存在积压的媒体数据对象时,将建议发送速率作为目标发送速率;当负载压力大于预设负载压力阈值时,将锚定发送速率与建议发送速率中的最小值作为目标发送速率。

22、该方案至少能够实现以下有益技术效果:

23、该方法以网络链路的负载压力阈值为分界线,将发送策略划分为两种截然不同的工作模式。低压力模式下取最大值的操作本质上是让发送速率暂时脱离cca的保守控制,以锚定速率为基准主动“推”出积压,阻断单帧超调向后续帧传递的级联链条;高压力模式下取最小值的操作则是强制发送速率不高于任一输入值,对发送端注入网络的数据量实施硬限速,避免在弱网环境下因加速排空而挤占本就有限的瓶颈带宽。两模式之间的切换完全基于链路压力这一客观表征自动完成,无需人工干预,实现了帧时效性与网络稳定性的自主平衡。

24、可选的,在所述双模切换决策模块中,所述预设方法为:对网络链路的负载压力进行归一化处理,使其取值范围缩放到[0,1];采用如下方式确定目标发送速率:

25、

26、其中,表示归一化后的负载压力,表示moq架构媒体传输系统中的建议发送速率,表示锚定速率计算模块计算的锚定发送速率,表示决策模块选取的目标发送速率,表示取最小值函数,表示取最大值函数。

27、方案至少能够实现以下有益技术效果:

28、该方案通过连续加权公式实现了更为平滑的速率调节。当链路压力逐渐升高时,目标发送速率从max端连续过渡至min端,而非在两个极端之间跳跃切换,避免了速率突变可能带来的码率振荡。实现了发送节奏与链路压力的精细化匹配,尤其适用于网络状态在宽松与紧张之间频繁波动的场景。

29、根据本发明的第二方面,提出一种用于moq架构媒体传输系统的自适应调节方法,当moq架构媒体传输系统中生成新的媒体数据对象时,执行以下步骤:s1、获取moq架构媒体传输系统中未发送的所有媒体数据;s2、获取moq架构媒体传输系统中网络链路的负载压力;s3、计算moq架构媒体传输系统中在预设排空周期内发送完当前未发送的所有媒体数据所需的最低发送速率以作为锚定发送速率;s4、获取moq架构媒体传输系统中的建议发送速率,并以锚定发送速率与获取的建议发送速率为边界构建候选发送速率区间,根据当前网络链路的负载压力采用预设方法从候选发送速率区间内选取目标发送速率,并使moq架构媒体传输系统以目标发送速率发送媒体数据对象,其中,目标发送速率与网络链路的负载压力呈负相关。

30、根据本发明的第三方面,提出一种自适应媒体传输系统,所述自适应媒体传输系统基于moq架构构建,所述系统的发送端设置有如本发明第一方面所述的自适应调节装置。

31、与现有技术相比,本发明的优点在于:

32、本发明将锚定速率计算和双模切换决策封装为与具体拥塞控制算法实现解耦的独立模块,无需修改cca的核心逻辑即可叠加于现有moq架构之上,整个方案仅通过调节pacing rate这一标准接口参数生效,链路压力表征可采用时延变化、丢包率、ecn标记等多种方式实现,已在gcc、sqp、pudica等多种拥塞控制算法上验证有效,具有即插即用的泛化特性;同时通过锚定速率使传输层发送节奏获得帧级积压感知能力,填补了moq分层架构中应用层与传输层之间的信息断裂,经trace-driven测试验证,可使截止期限未命中率降低达78.8%,有效消除了编码器超调引发的时延级联放大现象。