特效同步评估方法、装置、设备及存储介质、程序产品与流程

技术特征：
1.一种特效同步评估方法，其特征在于，所述特效同步评估方法包括：响应于针对评估界面中的评估触发标识的触发操作，获取待评估特效的特效视频；基于从所述特效视频解析出的视频帧序列和音频信号，确定出所述待评估特效的特效动画对应的动画时间信息，以及所述待评估特效的特效音频对应的音频时间信息；其中，所述动画时间信息是精度为视频帧时长的时间信息，所述音频时间信息是精度为音频帧时长的时间信息；依据所述动画时间信息和所述音频时间信息之间的差异，确定出评估结果；所述评估结果表征所述特效动画和所述特效音频的同步情况；在所述评估界面的结果展示区域中，展示所述评估结果。2.根据权利要求1所述的方法，其特征在于，所述动画时间信息包括：所述特效动画的动画起始时间和动画结束时间，所述音频时间信息包括：所述特效音频的音频起始时间和音频结束时间；所述依据所述动画时间信息和所述音频时间信息之间的差异，确定出评估结果，包括：计算所述动画起始时间和所述音频起始时间之间的第一时间差，以及所述动画结束时间和所述音频结束时间之间的第二时间差；依据所述第一时间差和所述第二时间差中的至少一个，确定出所述评估结果。3.根据权利要求2所述的方法，其特征在于，所述依据所述第一时间差和所述第二时间差中的至少一个，确定出所述评估结果，包括：当所述第一时间差小于等于第一时间阈值，且所述第二时间差小于等于第二时间阈值时，确定所述评估结果为所述特效动画与所述特效音频同步；当所述第一时间差大于所述第一时间阈值，或所述第二时间差大于所述第二时间阈值时，确定所述评估结果为所述特效动画与所述特效音频不同步。4.根据权利要求2或3所述的方法，其特征在于，所述基于从所述特效视频解析出的视频帧序列和音频信号，确定出所述待评估特效的特效动画对应的动画时间信息，以及所述待评估特效的特效音频对应的音频时间信息，包括：基于对所述音频信号中的每个音频帧进行幅度特征和频域特征的确定，检测出所述特效音频的起点音频帧和终点音频帧；依据所述起点音频帧的编号和所述音频帧时长，计算出所述音频起始时间，以及依据所述终点音频帧的编号和所述音频帧时长，计算出所述音频结束时间；基于对所述视频帧序列中的每个视频帧进行动态区域的确定，检测出所述特效动画的起点视频帧和终点视频帧；依据所述起点视频帧的编号和所述视频帧时长，计算出所述动画起始时间，以及依据所述终点视频帧的编号和所述视频帧时长，计算出所述动画结束时间。5.根据权利要求4所述的方法，其特征在于，所述幅度特征包括：短时能量，所述频域特征包括：短时过零率；所述基于对所述音频信号中的每个音频帧进行幅度特征和频域特征的确定，检测出所述特效音频的起点音频帧和终点音频帧，包括：针对所述音频信号中的每个所述音频帧，确定出所述短时能量和所述短时过零率；从所述音频信号中，筛选出所述短时能量大于能量阈值，且所述短时过零率大于过零
率阈值的多个有效音频帧；将多个所述有效音频帧中的首个有效音频帧，确定为所述起点音频帧，以及将多个所述有效音频帧中的最后一个有效音频帧，确定为所述终点音频帧。6.根据权利要求4所述的方法，其特征在于，所述基于对所述视频帧序列中的每个视频帧进行动态区域的确定，检测出所述特效动画的起点视频帧和终点视频帧，包括：针对所述视频帧序列中的每个所述视频帧，确定出第一动态区域；将所述视频帧序列中首个满足动画起始条件的视频帧，确定为所述特效动画的所述起点视频帧；其中，所述动画起始条件为所述第一动态区域的区域面积大于第一面积阈值，且所述第一动态区域与预设区域的重叠面积大于第二面积阈值的视频帧；针对所述视频帧序列中位于所述起点视频帧之后的多个其他视频帧，分别确定出第二动态区域；当基于所述第二动态区域，从多个所述其他视频帧中提取出连续的n个静止视频帧时，将第n个所述静止视频帧，确定为所述终点视频帧；其中，n为大于1的正整数，所述静止视频帧为所述第二动态区域的区域面积小于等于所述第一面积阈值，且所述第二动态区域与所述预设区域的重叠面积小于等于所述第二面积阈值的视频帧。7.根据权利要求6所述的方法，其特征在于，所述针对所述视频帧序列中的每个所述视频帧，确定出第一动态区域，包括：对所述视频帧序列中的每个所述视频帧，以及每个所述视频帧的第一相邻视频帧进行帧差计算，得到第一帧差图像；对所述第一帧差图像进行降维处理，得到第一降维图像；针对所述第一降维图像中亮度大于亮度阈值的图像区域进行膨胀，得到膨胀区域；针对所述膨胀区域进行连通域计算，得到所述第一动态区域。8.根据权利要求6所述的方法，其特征在于，所述针对所述视频帧序列中位于所述起点视频帧之后的多个其他视频帧，分别确定出第二动态区域，包括：对每个所述其他视频帧，以及每个所述其他视频帧的第二相邻视频帧进行帧差计算，得到第二帧差图像；对所述第二帧差图像进行降维处理，得到第二降维图像；针对所述第二降维图像中亮度大于亮度阈值的图像区域进行腐蚀，得到腐蚀区域；针对所述腐蚀区域进行连通域计算，得到所述第二动态区域。9.根据权利要求4所述的方法，其特征在于，所述音频帧中包括：n个音频信号点，所述音频帧时长为n与音频采样率的比值。10.根据权利要求1所述的方法，其特征在于，所述动画时间信息包括：所述特效动画的动画持续时间和所述特效音频的音频持续时间；所述依据所述动画时间信息和所述音频时间信息之间的差异，确定出评估结果，包括：计算所述动画持续时间和所述音频持续时间之间的第三时间差；依据所述第三时间差和第三时间阈值的大小关系，确定出所述评估结果。11.一种特效同步评估装置，其特征在于，所述特效同步评估装置包括：视频获取模块，用于响应于针对评估界面中的评估触发标识的触发操作，获取待评估
特效的特效视频；时间确定模块，用于基于从所述特效视频解析出的视频帧序列和音频信号，确定出所述待评估特效的特效动画对应的动画时间信息，以及所述待评估特效的特效音频对应的音频时间信息；其中，所述动画时间信息是精度为视频帧时长的时间信息，所述音频时间信息是精度为音频帧时长的时间信息；结果生成模块，用于依据所述动画时间信息和所述音频时间信息之间的差异，确定出评估结果；所述评估结果表征所述特效动画和所述特效音频的同步情况；结果展示模块，用于在所述评估界面的结果展示区域中，展示所述评估结果。12.一种用于特效同步评估的电子设备，其特征在于，所述电子设备包括：存储器，用于存储可执行指令；处理器，用于执行所述存储器中存储的可执行指令时，实现权利要求1至10任一项所述的特效同步评估方法。13.一种计算机可读存储介质，存储有可执行指令，其特征在于，所述可执行指令被处理器执行时实现权利要求1至10任一项所述的特效同步评估方法。14.一种计算机程序产品，包括计算机程序或指令，其特征在于，所述计算机程序或指令被处理器执行时实现权利要求1至10任一项所述的特效同步评估方法。

技术总结
本申请提供了一种特效同步评估方法、装置、设备及计算机可读存储介质、程序产品；本申请实施例可以应用于云技术、人工智能、智慧交通、车载等各种场景，涉及自动化测试技术和云计算技术；该方法包括：响应于针对评估界面中的评估触发标识的触发操作，获取待评估特效的特效视频；基于从特效视频解析出的图像序列和音频信号，确定出待评估特效的特效动画对应的动画时间信息，以及待评估特效的特效音频对应的音频时间信息；依据动画时间信息和所述音频时间信息之间的差异，确定出评估结果；评估结果表征特效动画和特效音频的同步情况；在评估界面的结果展示区域中，展示评估结果。通过本申请，能够提高特效同步评估的智能程度。能够提高特效同步评估的智能程度。能够提高特效同步评估的智能程度。


技术研发人员：张鹏 严明 肖央 程文昕 王泽尧
受保护的技术使用者：腾讯科技（深圳）有限公司
技术研发日：2021.11.01
技术公布日：2022/2/6