一种面向星地融合网络的直播视频端到端传输方法及装置
本发明是关于卫星通讯与视频传输,特别是关于一种面向星地融合网络的直播视频端到端传输方法及装置。
背景技术:
1、视频直播、远程会议、在线监控和灾害应急等业务要求将摄像头或移动终端持续产生的视频流实时传送给远端用户。现有地面互联网虽然在城市区域能够提供较高带宽,但在海洋、荒漠、山区、航空航天等偏远区域仍存在覆盖不足;在地震、洪水、火灾等自然灾害期间,地面基站和骨干链路也可能发生中断。由低轨卫星、地面站以及地面互联网共同构成的星地融合网络能够提供广域覆盖和较低传播时延,为上述场景中的直播视频传输提供新的基础设施。
2、星地融合网络中的端到端传输路径通常由源地面站到接入低轨卫星的地星链路、多个低轨卫星之间的星间链路以及目的低轨卫星到目的地面站的地星链路组成。低轨卫星轨道高度较低、运行速度快,单颗卫星对地面站的可见时间有限,卫星之间的邻接关系和地面站接入关系随时间不断变化。同时,不同区域的星座密度、地星链路带宽、往返时延、信噪比和节点负载具有明显差异,因此路径选择不仅需要确定星间链路,还需要同步确定源、目的地面站的接入卫星。
3、现有卫星路由方法多采用最短距离、最小传播时延等启发式指标,或者根据链路状态周期性重新计算端到端路径。前者通常忽略卫星负载、链路剩余可用时间和地星链路选择,容易在局部形成拥塞;后者需要较频繁地同步全局拓扑和资源状态,在大规模星座下控制消息和计算开销较高。部分分布式学习方法仅依据局部观测逐跳选择下一跳,缺少对完整路径稳定性和直播期限的约束,可能产生反复修复、局部绕行或路径环路。
4、直播视频与普通数据传输不同,其用户体验不仅取决于平均时延,还与启动时延、码率、卡顿次数、卡顿持续时间、码率波动以及关键帧是否完整到达有关。主流视频编码通常以图片组为基本单位,其中i帧是后续p帧和b帧解码的参考;一旦i帧丢失,可能导致一个图片组内的大量画面失真。现有路由机制通常将各类视频帧等同处理,当卫星切换或链路短时中断时,即使平均吞吐率满足要求,也可能出现较长卡顿。已有面向卫星的视频自适应研究多聚焦单颗中继卫星的弯管转发,尚未解决多跳星间链路条件下的直播视频端到端传输问题。
5、因此,需要一种能够同时感知卫星拓扑动态、地面站接入质量和视频帧重要性的传输方法,在不依赖全局高频同步的前提下完成跨管理域路由,并在路径失效、节点拥塞和关键帧丢包风险上升时及时采取预取、修复和冗余保护措施,以满足直播视频的低时延、高可靠和低卡顿要求。
6、公开于该背景技术部分的信息仅仅旨在增加对本发明的总体背景的理解,而不应当被视为承认或以任何形式暗示该信息构成已为本领域一般技术人员所公知的现有技术。
技术实现思路
1、本发明的目的在于提供一种面向星地融合网络的直播视频端到端传输方法及装置,其将全局路由问题分解为多个域内路径段,并结合地面站接入选择、视频帧优先级、关键帧时隙交织冗余以及多智能体强化学习路径决策,使得能够在低轨卫星拓扑快速变化的条件下保持无环、可修复和控制开销有界的直播视频传输,从而能够解决多跳星间链路条件下的直播视频端到端传输问题和路径中的反复修复、局部绕行或路径环路问题。
2、为实现上述目的,本发明提供了一种面向星地融合网络的直播视频端到端传输方法,应用于一种面向星地融合网络的直播视频端到端传输系统,该系统包括中轨卫星,低轨卫星,源地面站,目的地面站,源低轨卫星和目的低轨卫星,所述方法具体包括如下步骤:
3、s1:将低轨卫星集合划分为多个管理域,每个管理域由多个低轨卫星组成,并分配一个中轨卫星作为管理节点;
4、s2:在相邻管理域的交界处,选取能够同时与两个管理节点保持控制联系的低轨卫星作为双归属边缘节点;
5、s3:源地面站和目的地面站实时计算可见低轨卫星集合,选择并接入最优的低轨卫星作为源低轨卫星和目的低轨卫星;
6、s4:源地面站将编码视频按照图片组gop划分为连续任务单元,其中,每个图片组gop内含有多个帧,根据视频编码依赖关系,将所述帧划分为帧内编码i帧、预测编码p帧和双向预测b帧;
7、s5:将帧分割给多个网络层数据包运输,每个数据包中包含标识信息 ,包括gop序号、帧序号、数据报序号、帧类型信息;
8、s6:生成源地面站到目的地面站的最终路径,将所述数据包从源地面站发送到目的地面站中;
9、s7:目的地面站接收并按标识信息重排数据包,恢复所述编码视频。
10、在本发明的一实施方式中,所述生成源地面站到目的地面站的最终路径,具体包括如下步骤:
11、s61:源低轨卫星所在管理域的中轨卫星将源低轨卫星作为路径起点,将源低轨卫星所在的管理域作为当前管理域;
12、s62:判断所述目的低轨卫星与当前管理域的归属关系;
13、s63:如果所述目的低轨卫星位于当前管理域中,则将目的低轨卫星作为当前管理域内的路径终点,生成从路径起点到路径终点的最优域内路径;
14、如果所述目的低轨卫星不位于当前管理域内中,则从当前管理域内选定一个最优双归属边缘节点作为当前管理域内的路径终点,将源低轨卫星作为路径起点,生成当前管理域内的最优域内路径;
15、s64:将管理该最优双归属边缘节点的另一个管理节点所在的管理域作为新的当前管理域,将该最优双归属边缘节点作为新的路径起点;
16、s65:重复s62-s64的步骤,直到目的低轨卫星位于当前管理域内;
17、s66:输出所有最优域内路径,合成所述最终路径;
18、在本发明的一实施方式中,所述从当前管理域内选定一个最优双归属边缘节点,包括:
19、s631:获取当前管理域中的所有双归属边缘节点;
20、选取地理位置或预计到达时延最接近目的地面站的kedge个双归属边缘节点作为候选节点集;
21、根据归一化队列负载,当前低轨卫星到达每个双归属边缘节点的预测时延,每个双归属节点的剩余驻留时间,对所述候选节点集中的所有双归属边缘节点评分;
22、将评分最高的边缘节点作为当前管理域中的最优双归属边缘节点。
23、在本发明的一实施方式中,所述生成源地面站到目的地面站的最终路径,将所述数据包从源地面站发送到目的地面站中,还包括i帧丢包应对机制,包括:
24、丢包风险预测,中轨卫星根据所述最优域内路径的历史丢包率、当前队列占用、链路接触窗口、修复率和近期抖动等信息估计所述最优域内路径的丢包概率;
25、当所述丢包概率大于阈值,且冗余令牌数不少于预设值c2时,为所述i帧配置备用域内路径,所述备用域内路径与所述最优域内路径所有节点不相交;当节点完全不相交路径不存在时,选择共享链路数量最少的路径作为备用域内路径;
26、所述备用域内路径与最优域内路径之间具有δt的发送时隙。
27、在本发明的一实施方式中,所述生成从路径起点到路径终点的最优域内路径,包括:
28、构建共享模型,所述共享模型为actor-critic模型,包括actor网络和critic网络;所述共享模型采用集中训练、分散执行ctde机制;
29、根据星历和最新链路统计预计算生成候选路径集,所述候选路径集中包含kp条候选路径;
30、以当前时刻作为决策时刻t,根据网络环境和候选路径特征,构造中轨卫星在决策时刻t的状态向量,将状态向量输入actor网络,得到kp条候选路径的概率分布;
31、对候选路径集设置约束条件和屏蔽函数,使得不满足约束条件的候选路径不得选中,如果有满足约束条件的路径,则在满足约束条件的路径中,根据概率分布得到最终的选定路径psel;如果所有路径不满足约束条件,则重新生成候选路径集,直到得到选定路径为止。
32、在本发明的一实施方式中,还包括对所述共享模型进行更新;
33、包括设立分段奖励机制,计算得到决策时刻 t 获得的即时奖励值;
34、批量收集 轨迹,作为模型的输入;
35、当收集次数累计达到预设批量nbatch或距上次更新达到预设时间ttrain时触发模型更新。
36、在本发明的一实施方式中,所述数据包的源路由头至少包括低轨卫星序列,下一跳游标和备用下一跳;
37、当前低轨卫星从低轨卫星序列中读取预期下一跳的卫星节点后,对该节点进行安全检查和有效邻居检测;如果通过检测,则转发数据包,如果下一跳短时不可用,且备用下一跳满足不回访已访问节点、接触窗口和期限要求,则备用下一跳执行本地快速重路由,以避免向中轨卫星发送控制消息。
38、在本发明的一实施方式中,如果预期下一跳和备用下一跳均不可用,或路径生存时间到期,或游标越界或安全检查拒绝当前路径时,当前低轨卫星向其管理中轨卫星发送修复请求;
39、中轨卫星以当前低轨卫星为新起点,规划当前低轨卫星到原路径段终点的新后缀并覆盖未完成的路径节点列表;修复次数累计到krepmax后,触发从当前管理域重新选择路径终点和最优域内路径。
40、本发明的另一目的在于提供一种面向星地融合网络的直播视频端到端传输装置,用于实现如上述任一项所述的一种面向星地融合网络的直播视频端到端传输方法,包括:
41、管理域划分模块,用于将低轨卫星集合划分为多个管理域,每个管理域由多个低轨卫星组成,并分配一个中轨卫星作为管理节点;
42、节点选定模块,用于在相邻管理域的交界处,选取能够同时与两个管理节点保持控制联系的低轨卫星作为双归属边缘节点;
43、接入模块,用于源地面站和目的地面站实时计算可见低轨卫星集合,选择并接入最优的低轨卫星作为源低轨卫星和目的低轨卫星;
44、任务划分模块,用于源地面站将编码视频按照图片组gop划分为连续任务单元,其中,每个图片组gop内含有多个帧,根据视频编码依赖关系,将所述帧划分为帧内编码i帧、预测编码p帧和双向预测b帧;
45、分割模块,用于将帧分割给多个网络层数据包运输,每个数据包中包含标识信息,包括gop序号、帧序号、数据报序号、帧类型信息;
46、路径生成模块,用于生成源地面站到目的地面站的最终路径,将所述数据包从源地面站发送到目的地面站中;
47、接收模块,用于目的地面站接收并按标识信息重排数据包,恢复所述编码视频。
48、本发明的另一目的在于提供一种电子设备,包括存储器、处理器、内存,以及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时,实现如上述任一项所述一种面向星地融合网络的直播视频端到端传输方法的步骤。
49、与现有技术相比,本发明提供了一种面向星地融合网络的直播视频端到端传输方法及装置,利用分层管理,使用相对稳定的中轨卫星对高动态低轨卫星划分管理域,为低轨卫星配置主、备管理节点和双归属边缘节点,并综合可见链路持续时间、往返时延、信噪比和负载选取地面站接入卫星,从而实现卫星的分层管理,显著降低了路由计算的复杂度和控制信令开销。设置了跨域分段路由,各中轨卫星仅规划本管理域内的路径段,在双归属边缘节点处完成域间交接,通过下一段预取、源路由头转发、本地快速重路由、域内修复及生存期约束实现无环、低开销转发。设置了i帧防丢包应对机制,以图片组为粒度保持域内路径一致,按照i帧、p帧和b帧的重要性进行加权排队,并在预测丢包率较高且冗余预算允许时,对i帧在尽量不相交的路径上进行时隙交织复制。同时使用智能路径决策,构建采用集中训练、分散执行机制的多智能体强化学习模型,根据轨道相位、节点负载、源目的状态和候选路径的时延、跳数、稳定性、失效剩余时间及期限余量选择最优域内路径,并通过安全动作屏蔽和分段反馈约束路径满足直播期限。从而适应低轨卫星拓扑快速变化和频繁切换,在控制开销受限的条件下降低视频包时延和丢失,减少卡顿并提升直播视频体验,适用于偏远地区直播、海事航空通信、野外监控、灾害应急和全球视频分发等场景。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com