一种基于画面关联度的广告动态投放方法、设备及介质与流程

摘要: 本技术涉及图像通信,具体涉及一种基于画面关联度的广告动态投放方法、设备及介质。背景技术:1、随着互联网视频内容的爆发式增长,在线视频广告市场已成为数字营销的重点...
一种基于画面关联度的广告动态投放方法、设备及介质与流程

本技术涉及图像通信,具体涉及一种基于画面关联度的广告动态投放方法、设备及介质。

背景技术:

1、随着互联网视频内容的爆发式增长,在线视频广告市场已成为数字营销的重点。然而,传统视频广告投放方式面临诸多局限,贴片广告因用户跳过习惯导致触达效率持续衰减,剧情植入则需在拍摄期提前锁定、周期长且投入大;固定时间点或固定位置的广告插入缺乏对画面实际内容的感知能力,容易引发用户注意力断裂或情绪反感。因此,视频植入式广告得到了快速发展,其能够在视频画面中自动寻找合适的区域植入广告进行产品推广。

2、然而,现有的视频广告投放方式,大多依赖人工预先选定植入区域,并通过人工判图筛选匹配静态广告,此类方式不仅智能化程度低,且固定的广告展示区域容易遮挡画面中的关键信息,影响用户观看体验。并且,某些广告素材与视频内容几乎没有关联,难以实现广告的有效点击,无法起到良好的推广作用。

技术实现思路

1、为了解决上述问题,本技术提出了一种基于画面关联度的广告动态投放方法,包括:

2、获取待处理视频流,按照预设的滑动时间窗口,提取所述待处理视频流中的连续多帧视频图像,对各帧视频图像进行语义分割,以提取所述视频图像中的主体对象区域和背景区域;

3、获取当前帧视频图像之前的连续历史帧视频图像,根据所述连续历史帧视频图像中所述背景区域的几何参数变化,将所述背景区域划分为稳定背景区域和瞬态背景区域;

4、确定所述当前帧视频图像在未来预设时长内的预期遮挡区域,将所述稳定背景区域中与所述预期遮挡区域不重叠的区域,作为广告嵌入区域;

5、获取候选广告素材库,计算所述候选广告素材库中的各候选广告素材与所述当前帧视频图像之间的关联度,将所述关联度最高的候选广告素材作为目标广告素材,嵌入到所述广告嵌入区域中;

6、根据所述未来预设时长内视频图像的语义特征,动态调整所述目标广告素材的嵌入状态。

7、在本技术的一种实现方式中,确定所述当前帧视频图像在未来预设时长内的预期遮挡区域,具体包括:

8、判断所述待处理视频流对应的视频类型;其中,所述视频类型包括实时视频和非实时视频;

9、根据所述视频类型,获取所述待处理视频流的播放缓冲区数据,并确定所述播放缓冲区数据的当前缓存深度;其中,所述当前缓存深度以缓存帧数量或缓存时长表示;

10、在所述当前缓存深度不小于预设深度的情况下,读取所述播放缓冲区数据中位于所述当前帧视频图像之后的连续帧缓存视频图像;其中,所述连续帧缓存视频图像的总播放时长不小于所述未来预设时长;

11、对所述连续帧缓存视频图像分别进行语义分割,提取各缓存视频图像中的主体对象区域;

12、对所述连续帧缓存视频图像中所述主体对象区域所覆盖的全部画面位置进行并集运算,以得到所述当前帧视频图像在未来预设时长内的预期遮挡区域。

13、在本技术的一种实现方式中,得到所述当前帧视频图像在未来预设时长内的预期遮挡区域之后,所述方法还包括:

14、若所述当前缓存深度小于预设深度,获取所述当前帧视频图像之前的连续历史帧视频图像中所述主体对象区域的运动轨迹;

15、根据所述运动轨迹,构建对应的主体运动特征向量;其中,所述主体运动特征向量至少包括主体运动速度、主体运动方向一致性指数和主体轨迹曲率;

16、将所述主体运动特征向量输入预先训练的风险分类器,输出各所述背景区域在所述未来预设时长内被主体对象区域遮挡的风险等级;

17、根据所述风险等级对应的收缩步长,对通过所述连续帧缓存视频图像确定的预期遮挡区域进行边界收缩,得到收缩后的预期遮挡区域;其中,所述收缩步长与所述风险等级呈正相关关系。

18、在本技术的一种实现方式中,根据所述连续历史帧视频图像中所述背景区域的几何参数变化,将所述背景区域划分为稳定背景区域和瞬态背景区域,具体包括:

19、分别提取所述连续历史帧视频图像中各背景区域的轮廓边界,根据所述轮廓边界,计算所述背景区域在相邻帧之间的轮廓偏移量;

20、根据所述轮廓偏移量,计算各背景区域在所述连续历史帧视频图像内的几何参数变化率;

21、若所述几何参数变化率小于预设的稳定性阈值,将对应的背景区域标记为所述稳定背景区域,否则,则将对应的背景区域标记为所述瞬态背景区域。

22、在本技术的一种实现方式中,计算所述候选广告素材库中的各候选广告素材与所述当前帧视频图像之间的关联度,具体包括:

23、提取所述当前帧视频图像对应的语义标签集合,将所述语义标签集合与所述候选广告素材库中的各候选广告素材的文本描述特征进行匹配,以计算对应的画面内容匹配度;

24、根据所述语义标签集合的时间序列变化,确定所述当前帧视频图像所在的视频片段的场景演变特征,并生成对应的场景特征向量;

25、根据所述候选广告素材所适配的场景类型以及在不同场景类型下的投放权重,构建各候选广告素材的场景适配属性向量;

26、计算各候选广告素材的所述场景适配属性向量与所述场景特征向量之间的时序匹配度,对所述时序匹配度与画面内容匹配度进行加权融合,得到各候选广告素材与所述当前帧视频图像之间的关联度。

27、在本技术的一种实现方式中,计算所述候选广告素材库中的各候选广告素材与所述当前帧视频图像之间的关联度之后,所述方法还包括:

28、获取所述候选广告素材库中各候选广告素材的历史投放数据;其中,所述历史投放数据至少包括各候选广告素材在历史投放过程中的用户注视时长和交互转化率;

29、根据所述历史投放数据,计算各候选广告素材的素材质量评分;

30、获取所述当前帧视频图像对应的当前播放场景的时段属性和/或受众属性,根据所述时段属性和/或受众属性,确定当前场景下的素材偏好权重;

31、根据所述素材质量评分和所述素材偏好权重,对所述关联度进行加权修正,得到各候选广告素材对应的修正后的关联度;

32、将所述修正后的关联度最高的候选广告素材,作为所述目标广告素材。

33、在本技术的一种实现方式中,读取所述播放缓冲区数据中位于所述当前帧视频图像之后的连续帧缓存视频图像之后,所述方法还包括:

34、在所述视频类型为所述实时视频的情况下,提取所述连续帧缓存视频图像中的主体对象区域,并计算所述主体对象区域在相邻缓存帧之间的运动一致性指标;

35、若所述运动一致性指标小于所述预设阈值,则识别所述主体对象区域在所述连续帧缓存视频图像中出现的离散异常帧,并剔除所述离散异常帧中主体对象区域所覆盖的画面位置;其中,所述离散异常帧是指其主体对象区域位置与相邻帧主体对象区域位置之间的位移量超过预设的异常位移阈值的缓存帧。

36、在本技术的一种实现方式中,根据所述未来预设时长内视频图像的语义特征,动态调整所述目标广告素材的嵌入状态,具体包括:

37、对所述未来预设时长内所述广告嵌入区域进行语义追踪,以生成所述广告嵌入区域对应的语义特征序列;

38、根据所述语义特征序列,判断所述广告嵌入区域在所述未来预设时长内对应的语义类别标签是否与预设的背景类别语义集合相匹配;

39、若是,则将所述嵌入状态确定为持续展示状态,并确定所述目标广告素材的展示持续帧数为所述未来预设时长对应的总帧数;

40、若否,根据所述语义类别标签序列中非背景类别语义帧的分布特征,确定所述广告嵌入区域的展示持续帧数;

41、在所述展示持续帧数内,控制所述目标广告素材在所述广告嵌入区域中保持嵌入状态。

42、本技术实施例提供了一种基于画面关联度的广告动态投放设备,所述设备包括:

43、至少一个处理器;

44、以及,与所述至少一个处理器通信连接的存储器;

45、其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如上任一项所述的一种基于画面关联度的广告动态投放方法。

46、本技术实施例提供了一种非易失性计算机存储介质,存储有计算机可执行指令,所述计算机可执行指令设置为:

47、如上任一项所述的一种基于画面关联度的广告动态投放方法。

48、通过本技术提出的一种基于画面关联度的广告动态投放方法能够带来如下有益效果:

49、通过滑动时间窗口提取连续多帧视频图像并进行语义分割,实现了对主体对象区域与背景区域的自动识别,无需人工预先选定植入区域,并且,基于连续历史帧中背景区域的几何参数变化将背景划分为稳定区域与瞬态区域,并结合未来预设时长内的预期遮挡区域进行空间比对,从稳定背景中剔除可能被主体遮挡的区域作为广告嵌入区域,避免了固定广告位遮挡关键信息或后期被主体遮挡导致展示不完整的问题。通过计算候选广告素材与当前帧画面内容的关联度选取语义匹配的广告进行嵌入,解决了广告素材与视频内容脱节的问题,提升了广告与画面的融合度,进一步根据后续帧的语义特征动态调整广告的嵌入状态,使广告在画面变化时自适应地保持展示或退出,有效保障了广告展示的完整性,提升了广告投放效果与用户体验。