一种机载娱乐系统片源分布式存储及跨环网容错调度方法与流程
本发明涉及机载客舱媒体资源的分布式存储与调度,具体为机载娱乐系统片源分布式存储及跨环网容错调度方法。
背景技术:
1、现有的机载座椅系统(in-flightentertainmentsystem,ife)中,每个座椅显示单元(seatdisplayunit,sdu)独立从媒体服务器单元(mediaserverunit,msu)下载并缓存全部多媒体资源,该架构存在缺陷:1)资源获取效率低:每个sdu需单独向msu发起全量资源请求并完成下载,当客舱内sdu数量较多时,msu面临高并发访问压力,整体响应延迟增大。2)存储资源浪费严重:每个sdu均需配备大容量本地存储以缓存全部资源,导致硬件成本显著上升,对于资源体积较大的航司内容部署场景,单机存储配置需求尤为突出。3)容错能力不足:一旦机载网络出现异常或局部节点失效,受影响sdu将无法完成资源下载与缓存,直接导致乘客服务中断,影响用户体验与航司服务品质。因此,亟需一种能够从架构层面根本性解决上述问题的机载座椅系统资源管理方案。
技术实现思路
1、(一)解决的技术问题
2、针对现有技术的不足,本发明提供了机载娱乐系统片源分布式存储及跨环网容错调度方法,具备显著降低单节点存储需求与msu回源并发压力、提升资源利用效率,在节点失效时快速定位相邻环网副本并保障播放连续性,以及通过综合调度策略提高系统稳定性与可实施性的优点,解决了现有系统存储冗余、容错能力弱、切换延迟不可控及调度决策缺乏量化依据的问题。
3、(二)技术方案
4、为实现上述目的,本发明提供如下技术方案:机载娱乐系统片源分布式存储及跨环网容错调度方法,包括以下步骤:
5、步骤一、系统初始化与模块部署:建立基于sdu小环网的分布式片源存储与资源调度架构,该架构由msu媒体服务器单元、一级终端集群、二级网络集群、智能资源调度管理链路与spb供电模块组成,msu媒体服务器单元具备智能资源调度功能,并命名为智能资源调度模块;
6、步骤二、集群划分:智能资源调度模块根据sdu的物理安装位置与网络连接关系,对客舱内多个sdu进行分组划分;
7、步骤三、共享缓存池建立:完成集群划分后,每个sdu从本地存储空间中划分预设容量作为共享缓存区域;
8、步骤四、资源分布存储流程:智能资源调度模块对msu中的多媒体资源进行统一管理,为每个资源生成唯一资源标识;
9、步骤五、资源索引管理及完整片源分散存储机制:在msu中建立全局资源索引,新资源加入时由智能资源调度模块选择一个sdu作为唯一承载节点;同一小环网内同一片源仅保留一份副本;
10、步骤六、基于资源访问热度的片库推荐机制:智能资源调度模块统计资源访问次数、频率及增长趋势计算热度,无论热度高低均只在一个sdu中保存一份;
11、步骤七、基于小环网的sdu资源访问流程:用户通过sdu发起访问时按本地缓存→本环网承载节点→相邻环网备援→msu回源的顺序逐级寻址;本环网承载节点故障时直接查询其他环网副本,跨环网数据仅作临时播放缓存;
12、步骤八、节点状态检测及故障迁移机制:各sdu周期性发送心跳,连续m个周期未收到则判定异常并移除;异常后更新索引、查询相邻环网副本,无有效副本则回源msu,恢复须连续k个周期有效且自检通过;
13、步骤九、缓存一致性管理机制:msu维护资源版本号,资源更新时向sdu同步通知,版本不一致则标记旧版本不可服务并重新获取;文件仅在本地版本与全局一致且校验值匹配时才能服务;
14、步骤十、缓存淘汰与负载再平衡机制:缓存使用率达高水位时依据热度、空闲时长及文件大小淘汰;负载不均衡时迁移非热点完整片源至高评分低负载节点,迁移不拆分片源且任一时刻仅一个承载节点,形成闭环管理;
15、步骤十一、跨环网切换与播放连续性保障机制:异常时保留已缓存数据段,以当前播放偏移量为续传起点从相邻环网副本继续请求;切换时延须小于剩余缓冲时长,接近时优先兜底请求。
16、优选的,所述msu媒体服务器单元作为源片库、全局资源索引和调度管理节点,内置智能资源调度模块,负责初始资源部署、版本管理、节点状态维护及最终回源;一级终端集群由物理位置相邻的多个sdu组成,不同完整片源分别存储于不同sdu,同一片源在同一小环网内仅配置一个资源承载sdu;二级网络集群连接多个小环网,用于在本小环网片源节点失效时访问相邻小环网中的同片源备援副本;智能资源调度管理链路表示msu中的智能资源调度模块对资源索引、节点心跳、版本、校验值和服务状态进行统一维护,不限定采用神经网络;spb供电模块在一级终端集群内,根据实际机载供电及网络连接方式配置相应spb供电模块。
17、优选的,所述步骤一中系统初始化与模块部署流程:
18、s1.1、在机载座椅系统实际部署过程中,媒体服务器单元通过客舱骨干网络与机舱内多个座椅显示单元连接,系统上电启动后,其内置智能资源调度模块对各sdu节点状态进行检测,并根据sdu物理位置、网络拓扑结构以及存储能力建立基于sdu小环网的分布式片源存储与资源调度结构;
19、s1.2、智能资源调度模块采用双时间尺度运行方式:
20、(1)在慢时间尺度上执行资源热度统计、完整片源文件的部署调整和节点间容量再平衡;
21、(2)在快时间尺度上执行单次资源请求的路径选择、节点故障判定和服务重定向,两类调度周期均满足:
22、
23、其中,为快速调度周期,为资源重配置周期,能同时在节点离线/链路质量突变时及时完成访问切换。
24、优选的,所述步骤二中集群划分流程:
25、s2.1、智能资源调度模块根据sdu的物理安装位置与网络连接关系,将相邻的sdu划分为一个一级终端集群,每个一级终端集群内部通过网络链路互联,形成一级资源共享网络;
26、s2.2、划分的一级终端集群之间通过客舱骨干网络互联,形成二级网络集群。
27、优选的,所述步骤三中共享缓存池建立流程:
28、s3.1、完成集群划分后,每个sdu从本地存储空间中划分出设定容量作为共享缓存区,一级终端集群内由sdu共同形成分布式共享缓存池;
29、s3.2、设一级终端集群包含个座椅显示单元,第i个座椅显示单元划入共享缓存区的容量为,则该一级终端集群的名义共享缓存容量为:
30、
31、s3.3、预留文件系统、资源索引、校验信息以及故障恢复空间后,使用共享缓存容量进一步表示为:
32、
33、其中,为可用容量系数,在=10、=300gb的部署条件下,集群名义容量为3tb,实际可分配容量根据以及系统预留策略确定。
34、优选的,所述步骤四中资源分布存储流程如下:
35、s4.1、当系统进行资源部署时,智能资源调度模块根据片源文件属性以及各sdu节点状态,将不同完整片源文件分别存储到同一小环网的不同sdu中,任一完整片源文件仅选择一个sdu作为其资源承载节点;
36、s4.2、设资源r在当前统计周期内的归一化访问次数为、归一化累计访问持续时间为、归一化访问增长趋势为,三者的取值范围均为[0,1],则资源即时访问热度计算为:
37、
38、其中,=1,智能资源调度模块对即时热度进行指数平滑,得到用于片库展示排序和资源部署优先级判断的平滑热度:
39、
40、其中,0≤≤1,越大,调度结果对最新访问变化越敏感,越小,资源部署越稳定;
41、s4.3、智能资源调度模块再根据当前网络带宽、节点访问负载、节点历史资源访问命中率与节点在线状态参数对sdu节点行综合评价;
42、s4.4、智能资源调度模块根据各sdu节点综合评价结果选择目标缓存节点,并将资源数据分布存储至对应sdu节点,其中,节点综合评价结果采用如下方式计算:
43、智能资源调度模块先按照预设上下界将各参数归一化至[0,1],对于任一正向指标,其归一化值表示为:
44、
45、其中,为防止分母为零的微小正数,对于节点i,综合评分值表示为:
46、
47、其中,表示归一化剩余缓存容量,表示归一化可用带宽,表示归一化历史资源访问命中率,表示归一化网络链路质量,表示归一化当前访问负载,表示归一化网络时延;、、、、和为非负权重;
48、s4.5、在节点在线、剩余缓存容量不小于待存完整片源文件大小且未超过预设负载上限的束下,目标缓存节点可按下式选择:
49、
50、其中,ω(r)为满足资源r完整存储束的候选节点集合,该选择结果用于确定资源r在当前小环网内的唯一承载节点;
51、s4.6、将评分较高的sdu节点优先作为资源缓存节点。
52、优选的,所述步骤五中资源索引管理及完整片源分散存储机制构建:在msu中建立全局资源索引表,全局资源索引表用于记录多媒体资源与缓存sdu节点之间的对应关系,至少包括:资源编号、缓存节点编号、一级终端集群编号、资源版本version、资源大小、资源访问热度、资源状态;
53、所述步骤六中基于资源访问热度的片库推荐机制:
54、(1)当用户进入片库时,智能资源调度模块根据各资源的访问热度对片库中的资源进行排序,并优先展示访问热度较高的资源;
55、(2)当用户通过其他sdu请求访问该资源时,通过资源索引定位资源所在sdu,并通过一级终端集群内部网络获取完整资源;
56、(3)当资源所在sdu发生故障导致该资源在当前一级终端集群内不可访问时,智能资源调度模块通过二级网络集群查询其他一级终端集群中的相同资源,并根据候选集群及缓存节点的网络状态选择资源服务节点。
57、优选的,所述步骤七中基于小环网的sdu资源访问,当用户通过sdu发起资源访问请求时,执行以下子步骤:
58、s5.1、sdu接收用户资源访问请求,并获取目标资源对应的;
59、s5.2、sdu首先本地缓存区域,当本地存在目标资源时,则直接读取完整资源并提供给机载座椅的播放模块;
60、s5.3、当本地缓存未命中时,则请求sdu根据查询全局资源索引表,优先获取本小环网内目标资源的承载节点;当本小环网记录为不可服务时,再获取相邻小环网中的候选和;
61、当全局资源索引表返回多个候选缓存节点时,智能资源调度模块根据请求节点i与候选节点j之间的链路状态计算访问代价,访问代价表示为:
62、
63、其中,为归一化传输时延,为归一化丢包率,为候选节点负载,为归一化网络跳数;和分别表示请求节点与候选节点所属的一级终端集群,为指示函数,进行跨一级终端集群访问时,指示函数取1时,引入额外代价;
64、目标服务节点按照最小访问代价选择:
65、
66、当前层级无有效资源或链路质量不满足播放要求时,才进入下一层级;
67、s5.4、当本小环网内的资源承载sdu发生故障、离线、请求超时或资源校验失败,则智能资源调度模块将该节点标记为不可服务,并根据直接查询其他小环网的同片源副本,不再将请求重定向至本小环网中未保存该资源的其他健康sdu;当相邻一级终端集群存在目标资源时,智能资源调度模块根据请求sdu与候选资源服务节点之间的网络时延、链路质量、网络跳数及节点在线状态等参数选择目标资源服务节点;
68、s5.5、请求sdu通过二级网络集群向选定的跨环网资源服务节点发送带有、版本号及读取偏移量的分段资源请求;目标节点完成身份、版本和完整性校验后,返回对应数据段;
69、s5.6、请求sdu完成数据校验后,将返回的数据段写入播放缓冲区并加载至播放模块,环网获取的数据默认仅作为播放过程中的临时数据缓存,不形成资源索引记录,不作为同一小环网内新的资源承载副本;
70、当一级终端集群内部不存在目标资源时,智能资源调度模块通过二级网络集群查询邻近一级集群中的缓存节点,并完成跨集群资源访问。
71、设资源请求在本地缓存、同一级终端集群、邻近一级终端集群以及媒体服务器单元回源四种路径上的命中概率分别为、、和,对应平均访问时延分别为、、和,则系统平均问时延表示为:
72、
73、其中,+++=1,且通常满足<<<,通过提高本地及一级终端集群内的命中概率;
74、所述步骤八中,在节点异常后,智能资源调度模块执行以下步骤:
75、s6.1、更新全局资源索引表,将异常节点标记为不可访问状态;
76、s6.2、查询异常节点所承载的完整片源文件,并标记受影响的;
77、s6.3、依据受影响查询相邻小环网中的同片源健康副本,并计算各候选节点的访问代价;
78、s6.4、当相邻小环网不存在有效副本或跨环网链路不满足要求时,则回源msu获取资源,并登记资源恢复任务;
79、s6.5、当异常sdu恢复后,先校验其本地完整片源文件的版本和完整性;校验通过后重新加入候选集合,校验失败时从msu或其他小环网重新获取对应完整片源文件。
80、优选的,所述步骤九中,智能资源调度模块执行以下步骤:
81、s7.1、生成新的资源版本号;
82、s7.2、更新全局资源索引表中的资源版本信息;
83、s7.3、向保存对应完整片源文件的sdu节点发送同步通知;
84、s7.4、sdu节点接收到同步通知后,将本地缓存版本号与msu中的最新版本号进行比较:
85、(1)当版本一致时,则继续使用当前缓存资源;
86、(2)当版本不一致时,则将旧版本完整片源文件标记为不可服务,并重新获取最新完整片源文件;完成校验和索引切换后再删除旧版本;
87、对于任一完整片源文件,只有在本地版本与msu维护的全局版本一致,且完整文件的数据校验值与全局索引记录一致时,才允许向其他sdu提供服务,其有效性条件表示为:
88、
89、当上述任一条件不满足时,该完整片源文件被标记为不可服务,智能资源调度模块从msu或其他小环网中的健康副本重新获取完整文件,并在校验通过后更新全局资源索引;
90、所述步骤十中缓存淘汰与负载再平衡机制:
91、s8.1、当座椅显示单元i的共享缓存使用率达到预设高水位阈值时,智能资源度模块会自动启动缓存淘汰机制,对于当前未被播放或传输且删除后不破坏不同小环网之间最低备援数量的候选完整片源文件,计算淘汰优先级:
92、
93、其中,表示资源自上次访问以来空闲时长的归一化值,表示资源大小的归一化值,、和为非负权重,淘汰优先级越高,表示资源热度越低、空闲时间越长或占用空间越大,越优先被清理;
94、s8.2、缓存淘汰应满足:删除后该资源在不同一级终端集群中的有效备援副本数量不小于;删除对象不是系统范围内唯一健康副本;删除前全局资源索引已确认其他小环网副本或msu源资源可用,缓存使用率下降至后停止淘汰;
95、s8.3、完成副本生成、淘汰或节点恢复后,智能资源调度模块对健康节点集合内的节点负载进行统计,设最大节点负载和最小节点负载分别为和,则负载不均衡度表示为:
96、
97、当超过预设阈值时,智能资源调度模块从高负载节点选择非热点完整片源文件迁移至同一小环网内评分较高的低负载节点,迁移时先在目标sdu写入完整片源文件并完成校验,在目标文件尚未校验通过前仍由原sdu提供服务;校验通过后更新全局资源索引,使目标sdu成为新的唯一资源承载节点,再删除原sdu中的旧文件。
98、优选的,所述步骤十一中跨环网切换与播放连续性保障机制:
99、s9.1、请求sdu以固定长度或自适应长度的数据段读取片源,并在播放开始前建立预设时长的播放缓冲,资源承载节点正常时,按照当前播放偏移量持续预取后续数据段;
100、s9.2、当检测到本小环网资源节点异常时,请求sdu保留已缓存且已校验的数据段,调度模块以当前已确认播放偏移量作为续传起点,从相邻小环网同片源副本继续请求后续数据;
101、s9.3、跨环网候选节点的预计切换时延应小于当前剩余可播放缓冲时长;当预计切换时延接近缓冲时长时,系统可降低预取段长度、提高请求优先级或直接并行向msu发起兜底请求;
102、s9.4、切换完成后,请求sdu对前后数据段的、version、片段序号和校验值进行连续性检查,确认无缺段、重段或版本混用后继续播放。
103、与现有技术相比,本发明提供了机载娱乐系统片源分布式存储及跨环网容错调度方法,具备以下有益效果:
104、1、本发明通过在同一小环网内由多个sdu共同承载片库、每个完整片源文件仅存储于一个sdu且同一小环网内仅保留一份服务副本的方式,并在msu中建立全局资源索引实现精确定位,并配合四级分级访问路径使正常播放优先在本地或本小环网内完成,达到了显著降低单节点存储配置需求与msu重复下发及并发压力、提升整体资源利用效率的有益效果。
105、2、本发明通过在相邻小环网之间配置同一片源的完整备援副本,结合msu中全局资源索引对资源所在位置、版本、校验值及服务状态的精确记录,在资源承载sdu失效时无需广播查询即能直接定位相邻环网的同片源健康副本,并配合分段读取、播放缓冲以及以当前播放偏移量为续传起点的跨环网切换机制,达到了增强节点失效容错能力、提高资源定位确定性、保障播放连续性的有益效果。
106、3、本发明通过资源热度指数平滑处理、节点状态多维度归一化评分、双时间尺度调度、跨集群访问代价约束以及缓存高低水位阈值控制的综合运用,使各环节的调度决策均具有明确的输入参数、计算方法和执行条件,形成了“状态采集→索引查询→分级选路→资源供流→结果校验→索引更新”的闭环资源管理过程,最终达到了提高调度稳定性、降低资源频繁迁移和路由反复切换概率、提升方案整体可实施性的有益效果。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com