一种视频链路自愈方法及系统与流程
本技术涉及数据处理领域,特别是涉及一种视频链路自愈方法及系统。
背景技术:
1、gb28181视频联网系统主要用于解决跨厂商、跨平台的视频设备互联互通问题。在典型的gb28181系统组网中,通常包括前端设备(如网络摄像机、硬盘录像机)、中心信令控制服务器以及流媒体服务器等核心组件。系统整体采用“信令与媒体流分离”的双通道架构:信令面基于sip(会话初始协议)构建会话通道,负责设备的注册认证、心跳保活、目录查询、实时点播协商以及云台控制等指令的交互;媒体面则基于rtp(实时传输协议)构建媒体流通道,负责将编码后的视音频数据(通常封装为ps流)进行实时传输。
2、在实际的点播流程中,平台或客户端首先通过sip信令向设备发起invite请求,并在携带的sdp(会话描述协议)中协商媒体格式、接收ip和端口等参数;设备恢复确认后,双方通过ack完成会话建立,随后设备才会按照协商结果,通过rtp协议向指定地址推送视频媒体流。
3、这种信令与媒体彻底解耦的设计,虽然极大地提升了大规模视频联网系统的扩展性和稳定性,但在复杂的现网环境(如跨网段、nat穿透、多级级联)部署中,暴露出以下技术缺陷:
4、1、在现网运维中经常出现sip信令交互正常完成,但实际媒体流却无法正常观看的情况,具体表现为:rtp报文未到达接收端、rtp到达了错误的端口、实际rtp流的ssrc与sdp声明的ssrc不一致、或者rtp包内容为空;2、在上级平台向下级平台转发点播请求时,往往会重写sip消息中的call-id、sdp中的媒体ip和端口等信息,当链路出现故障时,运维人员无法从单一平台获得端到端的完整视图,难以确定故障究竟发生在哪一级平台、哪个设备或哪一段传输链路上;3、实际rtp流到达接收端的五元组往往与sdp协商的媒体参数不一致。传统方案按照sdp声明的ip和端口来接收媒体流,容易漏收或错收,无法准确判断媒体流的真实来源;4、当视频链路出现异常时,运维人员通常需要手动抓包分析、查看日志,然后执行“重新点播”或“重启设备”等通用恢复操作,耗时长、效率低。
技术实现思路
1、在本实施例中提供了一种视频链路自愈方法及系统,以解决相关技术中信令与媒体状态割裂、多级级链路归因困难、nat、专网边界和端口复用造成媒体路径漂移、运维恢复手段粗粒度的问题。
2、第一个方面,在本实施例中提供了一种视频链路自愈方法,包括:
3、采集gb28181网络中的媒体服务器的端口分配记录、若干包括sdp内容的sip信令报文及若干rtp媒体报文,为rtp媒体报文、端口分配记录及sip信令报文分配采集时间戳;
4、自sip信令报文中提取会话标识、设备编码及通道编码,并自sdp内容中提取信令侧媒体参数,信令侧媒体参数至少包括预期ssrc及预期负载类型;
5、自rtp媒体报文中获取包括实际ssrc的六元组,基于六元组将若干rtp媒体报文聚合为若干媒体流,通过rtp媒体报文获取与媒体流对应的包括实际负载类型及首包时间戳的媒体侧指纹;
6、基于端口分配记录、设备编码、通道编码、会话标识、信令侧媒体参数、媒体侧指纹构建包括预期媒体节点及实际流节点的sip事务图谱,于sip事务图谱中,构建预期媒体节点与实际流节点之间的候选关联边;
7、获取与候选关联边对应的若干评估得分,基于若干评估得分获取关联置信度得分,基于预期媒体节点、实际流节点、关联置信度得分及若干评估得分获取异常类型,并根据异常类型执行自愈动作。
8、在其中的一些实施例中,所述通过rtp媒体报文获取与媒体流对应的包括实际负载类型及首包时间戳的媒体侧指纹的步骤包括:
9、自rtp媒体报文中获取实际负载类型,根据同一媒体流内各rtp媒体报文的序列号获取序列号连续性及丢包率;
10、根据同一媒体流内各rtp媒体报文的rtp时间戳获取首包时间戳、时间戳增量及抖动;
11、对媒体流进行ps起始码检测及关键帧识别,以获取ps起始码检出信息和关键帧检出信息,将实际负载类型、首包时间戳、序列号连续性、丢包率、时间戳增量、抖动、ps起始码检出信息和关键帧检出信息组合为媒体侧指纹。
12、在其中的一些实施例中,所述基于端口分配记录、设备编码、通道编码、会话标识、信令侧媒体参数、媒体侧指纹构建包括预期媒体节点及实际流节点的sip事务图谱的步骤包括:
13、基于端口分配记录构建端口节点,基于设备编码构建设备节点,基于通道编码构建通道节点,基于会话标识构建会话节点,基于信令侧媒体参数构建预期媒体节点,并基于媒体侧指纹构建实际流节点;
14、通过sip信令报文为设备节点配置指向通道节点的归属边、为通道节点配置指向会话节点的发起边、为会话节点与预期媒体节点配置描述边,通过端口分配记录及sdp内容为预期媒体节点配置指向端口节点的映射边,以形成sip事务图谱。
15、在其中的一些实施例中,所述构建预期媒体节点与实际流节点之间的候选关联边的步骤包括:
16、对同一会话标识下的sip信令报文的sdp内容进行响应检测,将存在响应内容的sip信令报文的采集时间戳选定为初始预期建流基准时刻;
17、自与存在响应内容的sip信令报文对应的端口分配记录中获取端口分配时刻,基于初始预期建流基准时刻及端口分配时刻获取最终预期建流基准时刻,通过最终预期建流基准时刻及预设建流容限获取预期时间窗;
18、将与媒体侧指纹对应的首包时间戳与预期时间窗进行比对,将预期ssrc与实际ssrc进行比对,将预期负载类型与实际负载类型进行比对,以在预期媒体节点与实际流节点之间构建候选关联边。
19、在其中的一些实施例中,若干评估得分分别为call-id回溯匹配度得分、dialog匹配度得分、ssrc匹配度得分、端口匹配度得分、时间窗匹配度得分、rtp连续性得分和ps帧有效性得分。
20、在其中的一些实施例中,关联置信度得分的获取公式为:
21、,
22、其中,表示置信度得分,表示call-id回溯匹配度得分,表示dialog匹配度得分,表示ssrc匹配度得分,表示端口匹配度得分,表示时间窗匹配度得分,表示rtp连续性得分,表示ps帧有效性得分,表示冲突惩罚项,、、、、、、、均表示权重系数。
23、在其中的一些实施例中,异常类型包括:信令成功但媒体无流、媒体端口漂移、ssrc冲突或媒体串流、媒体假活跃、级联路径断链、nat 映射失效。
24、在其中的一些实施例中,所述基于预期媒体节点、实际流节点、关联置信度得分及若干评估得分获取异常类型的步骤包括:
25、检测预期媒体节点是否存在与其连接的实际流节点,若不存在与其连接的实际流节点,则判定异常类型为信令成功但媒体无流;
26、将关联置信度得分与置信度得分阈值进行比对,若关联置信度得分大于置信度得分阈值,则将预期媒体节点、实际流节点组合为当前平台链路,并获取与当前平台链路对应的上游平台链路及下游平台链路,若上游平台链路的置信度得分大于置信度得分阈值,且下游平台链路的关联置信度得分小于最低阈值,则判定异常类型为级联路径断链;
27、若关联置信度得分小于置信度得分阈值,则将端口匹配度得分与端口得分阈值进行比对、将冲突惩罚项与冲突阈值进行比对、将rtp连续性得分及ps帧有效性得分分别与rtp得分阈值及ps帧得分阈值进行比对;
28、若端口匹配度得分小于端口得分阈值,则分别将ssrc匹配度得分与ssrc得分阈值进行比对、时间窗匹配度得分与时间窗得分阈值进行比对、rtp连续性得分与rtp得分阈值进行比对,若时间窗匹配度得分大于时间窗得分阈值、ssrc匹配度得分大于ssrc得分阈值,且rtp连续性得分大于rtp得分阈值,则结合媒体侧指纹判断异常类型是否为媒体端口漂移或nat 映射失效;
29、若冲突惩罚项大于冲突阈值,则判定异常类型为ssrc冲突或媒体串流;
30、若rtp连续性得分大于rtp得分阈值,且ps帧有效性得分小于ps帧得分阈值,则判定异常类型为媒体假活跃。
31、在其中的一些实施例中,在所述获取与候选关联边对应的若干评估得分,基于若干评估得分获取关联置信度得分,基于预期媒体节点、实际流节点、关联置信度得分及若干评估得分获取异常类型,并根据异常类型执行自愈动作的步骤之后,还包括:
32、在预设恢复窗口内获取更新置信度得分,基于更新置信度得分判断自愈是否完成。
33、第二个方面,在本实施例中提供了一种视频链路自愈系统,包括:终端设备、传输设备以及服务器设备;其中,所述终端设备通过传输设备连接服务器设备;
34、所述终端设备用于采集端口分配记录、若干包括sdp内容的sip信令报文及若干rtp媒体报文,并将端口分配记录、若干包括sdp内容的sip信令报文及若干rtp媒体报文通过所述传输设备发送至所述服务器设备;
35、所述传输设备用于在所述终端设备与所述服务器设备之间传输数据;
36、所述服务器设备用于执行第一方面中任一项所述的视频链路自愈方法的步骤。
37、第三个方面,在本实施例中提供了一种计算机设备,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一个方面所述的视频链路自愈方法。
38、第四个方面,在本实施例中提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述第一个方面所述的视频链路自愈方法。
39、与相关技术相比,在本实施例中通过采集sip信令报文、rtp媒体报文及端口分配记录,并统一分配采集时间戳,实现了信令面与媒体面的同步采集,为后续跨面关联提供了统一的时间基准和数据基础;通过从sdp内容中提取信令侧媒体参数、将rtp媒体报文聚合为媒体流,并生成媒体侧指纹,将信令侧的预期与实际媒体流形成可比对的两组数据;通过构建sip事务图谱并建立候选关联边,实现了跨维度的可追溯关联,使得任意实际流均可回溯到其所属的设备、通道和sip会话;通过计算多维关联置信度,实现了对信令与媒体关联关系的精细化量化评估,能够区分正常漂移与真实异常;通过基于预期媒体节点、实际流节点、关联置信度得分及若干评估得分获取异常类型,实现了对隐性媒体异常的精准分类;通过结合根据异常类型选择自动执行差异化的自愈动作,提供了精细的运维恢复手段。
40、本技术的一个或多个实施例的细节在以下附图和描述中提出,以使本技术的其他特征、目的和优点更加简明易懂。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com