一种多平台自适应分镜裁剪方法及系统与流程
本申请属于视频图像处理,具体为一种多平台自适应分镜裁剪方法及系统。
背景技术:
1、随着短视频平台的多元化发展,同一视频内容需要在横屏、竖屏、方屏等不同显示比例的平台间快速分发,这对视频内容的跨平台适配能力提出了更高要求。传统的分镜裁剪方案往往采用简单的等比缩放或中心裁切策略,虽然能够快速完成格式转换,但这类方法在处理复杂画面构图时存在明显缺陷。当画面中存在多个视觉焦点或关键信息分散在不同区域时,机械式的裁剪会导致重要内容被截断或主体偏离画面中心,造成视觉表达的不完整。
2、现有裁剪方案存在以下不足:其一,缺乏对画面内容语义理解的能力,无法区分画面中的主要视觉元素与次要背景信息,裁剪决策完全基于几何规则而非内容重要程度,导致核心主体被意外裁切的概率较高。其二,无法自适应处理不同画面构图下的差异化裁剪需求,对于单焦点画面、多焦点画面以及焦点动态变化的连续镜头,现有方案采用统一的裁剪规则,缺乏基于画面内容密度的动态调整机制。其三,现有方案未考虑目标显示设备的纵横比例差异对裁剪策略的影响,在横屏转竖屏等高压缩比场景下,缺乏基于空间压缩程度的差异化处理逻辑,高压场景下强行保留所有内容会导致画面严重畸变或信息过度拥挤。
3、综上,现有技术难以解决画面空间有限性与多焦点信息承载需求之间的矛盾,在多焦点画面构图下重要内容被截断、主体偏离画面中心等核心问题突出,亟需一种基于视觉显著性分析的自适应分镜裁剪方案。
技术实现思路
1、针对以上问题,本申请提供一种多平台自适应分镜裁剪方法及系统,以解决画面空间有限性与多焦点信息承载需求之间的矛盾,实现横竖屏转换过程中核心视觉焦点的精准保留与画面构图的合理适配。
2、为实现上述目的,本申请采用的技术方案是:
3、第一方面,本申请提供一种多平台自适应分镜裁剪方法,包括:
4、获取原始横屏视频数据并提取待处理视频帧集合;
5、对所述待处理视频帧集合内的每一视频帧进行画面元素分析,计算各画面元素的综合显著分数,并根据所述综合显著分数将画面元素划分为主要焦点元素或辅助信息元素;
6、根据所述主要焦点元素与辅助信息元素的出现频次与位置集中度赋予不同保留优先级,生成元素保护层级表;
7、获取目标竖屏显示设备的纵横比例转换系数,并根据所述纵横比例转换系数与所述每一视频帧的原始尺寸计算空间适配压力指标;
8、若所述空间适配压力指标大于预设的压力上限阈值,则按照所述元素保护层级表中的舍弃顺序移除所述辅助信息元素,保留所述主要焦点元素并计算包含所有保留的主要焦点元素的第一动态裁剪窗口尺寸;
9、根据所述第一动态裁剪窗口尺寸生成第一裁剪坐标序列,并根据所述第一裁剪坐标序列对所述待处理视频帧集合执行裁剪,得到裁剪后帧画面;
10、对所述裁剪后帧画面进行多帧一致性约束校验,消除相邻帧之间裁剪区域突变产生的抖动现象,得到目标竖屏适配视频帧序列。
11、第二方面,本申请还提供了一种多平台自适应分镜裁剪系统,包括:
12、视频帧提取模块,用于获取原始横屏视频数据并提取待处理视频帧集合;
13、画面元素分析模块,用于对所述待处理视频帧集合内的每一视频帧进行画面元素分析,计算各画面元素的综合显著分数,并根据所述综合显著分数将画面元素划分为主要焦点元素或辅助信息元素;
14、保护层级生成模块,用于根据所述主要焦点元素与辅助信息元素的出现频次与位置集中度赋予不同保留优先级,生成元素保护层级表;
15、压力指标计算模块,用于获取目标竖屏显示设备的纵横比例转换系数,并根据所述纵横比例转换系数与所述每一视频帧的原始尺寸计算空间适配压力指标;
16、高压裁剪模块,用于若所述空间适配压力指标大于预设的压力上限阈值,则按照所述元素保护层级表中的舍弃顺序移除所述辅助信息元素,保留所述主要焦点元素并计算包含所有保留的主要焦点元素的第一动态裁剪窗口尺寸,根据所述第一动态裁剪窗口尺寸生成第一裁剪坐标序列,并根据所述第一裁剪坐标序列对所述待处理视频帧集合执行裁剪,得到裁剪后帧画面;
17、一致性校验模块,用于对裁剪后帧画面进行多帧一致性约束校验,消除相邻帧之间裁剪区域突变产生的抖动现象,得到目标竖屏适配视频帧序列。
18、相比于现有技术,本申请具有如下有益效果:
19、(1)基于画面元素的视觉显著性分析实现内容感知的裁剪决策,通过综合显著分数将画面元素划分为主要焦点与辅助信息,使裁剪操作能够优先保障核心视觉内容的完整性,解决了传统几何裁切导致重要内容被截断或主体偏离画面中心的问题。
20、(2)通过时间序列稳定性分析构建元素保护层级表,综合考虑元素在连续帧中的出现频次与位置集中度,赋予不同元素差异化的保留优先级,使裁剪决策具备时序一致性,避免因单帧分析导致的焦点元素判定不稳定。
21、(3)引入空间适配压力指标量化横屏转竖屏过程中的空间压缩程度,根据压力指标的高低触发差异化的裁剪策略:高压场景下主动舍弃辅助信息、集中保留核心焦点,低压场景下优化裁剪窗口偏移位置以兼顾更多内容,实现了裁剪策略与空间约束的自适应匹配。
22、(4)通过动态裁剪窗口与多帧一致性约束相结合,在保证每帧裁剪区域精准覆盖保留元素的同时,消除相邻帧之间裁剪区域突变产生的画面抖动,使输出视频在视觉上保持平滑连贯,提升了观看体验。
1.一种多平台自适应分镜裁剪方法,其特征在于,包括:
2.根据权利要求1所述的多平台自适应分镜裁剪方法,其特征在于,在根据所述第一裁剪坐标序列对所述待处理视频帧集合执行裁剪,得到裁剪后帧画面之后,对所述裁剪后帧画面进行多帧一致性约束校验之前,还包括:
3.根据权利要求1所述的多平台自适应分镜裁剪方法,其特征在于,所述获取原始横屏视频数据并提取待处理视频帧集合,包括:
4.根据权利要求1所述的多平台自适应分镜裁剪方法,其特征在于,所述对所述待处理视频帧集合内的每一视频帧进行画面元素分析,计算各画面元素的综合显著分数,并根据所述综合显著分数将画面元素划分为主要焦点元素或辅助信息元素,包括:
5.根据权利要求1所述的多平台自适应分镜裁剪方法,其特征在于,所述根据所述主要焦点元素与辅助信息元素的出现频次与位置集中度赋予不同保留优先级,生成元素保护层级表,包括:
6.根据权利要求1所述的多平台自适应分镜裁剪方法,其特征在于,所述获取目标竖屏显示设备的纵横比例转换系数,并根据所述纵横比例转换系数与所述每一视频帧的原始尺寸计算空间适配压力指标,包括:
7.根据权利要求1所述的多平台自适应分镜裁剪方法,其特征在于,所述根据所述第一动态裁剪窗口尺寸生成第一裁剪坐标序列,并根据所述第一裁剪坐标序列对所述待处理视频帧集合执行裁剪,得到裁剪后帧画面,包括:
8.根据权利要求2所述的多平台自适应分镜裁剪方法,其特征在于,所述根据调整后的画面内容密度分布确定第二动态裁剪窗口尺寸,并根据所述第二动态裁剪窗口尺寸生成第二裁剪坐标序列,并根据所述第二裁剪坐标序列对所述待处理视频帧集合执行裁剪,得到裁剪后帧画面,包括:
9.一种多平台自适应分镜裁剪系统,其特征在于,包括:
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com