视频生成方法、装置、电子设备及机器可读介质与流程
本申请涉及人工智能,特别是涉及一种视频生成方法、装置、电子设备及机器可读介质。
背景技术:
1、随着视频应用程序的迅速发展,出现了ai(artificial intelligence,人工智能)漫剧,ai漫剧是根据ai技术智能生成的漫画视频,具有成本较低的特点。
2、然而,目前的漫剧生成方案在生成的视频出现质量问题时,只能重新生成整个视频,视频调优效率较低。
技术实现思路
1、本申请实施例提供了一种视频生成方法,以解决视频调优效率较低的技术问题。
2、相应的,本申请实施例还提供了一种视频生成装置、电子设备以及机器可读介质,用以保证上述方法的实现及应用。
3、为了解决上述问题,本申请实施例公开了一种视频生成方法,方法包括:
4、获取目标文本和视频生成工作流,视频生成工作流包括存在依赖关系的多个任务,目标文本包括至少一个文本段;针对目标文本执行视频生成工作流,并记录任务对至少一个文本段的输出数据;在接收到分段调试指令的情况下,确定重执行文本段以及重执行任务;重执行文本段包括分段调试指令指示的目标内容在目标文本中对应的文本段;重执行任务包括分段调试指令指示的目标任务和目标任务在视频生成工作流中的下游任务;基于重执行任务的直接依赖任务的输出数据和重执行文本段,重新执行重执行任务,并在视频生成工作流执行完成的情况下获得目标文本对应的目标视频。
5、本申请实施例公开了一种视频生成装置,包括:
6、获取模块,用于获取目标文本和视频生成工作流,视频生成工作流包括具有依赖关系的多个任务,目标文本包括至少一个文本段。
7、执行模块,用于针对目标文本执行视频生成工作流,并记录任务对至少一个文本段的输出数据。
8、确定模块,用于在接收到分段调试指令的情况下,确定重执行文本段以及重执行任务;重执行文本段包括分段调试指令指示的目标内容在目标文本中对应的文本段;重执行任务包括分段调试指令指示的目标任务和目标任务在视频生成工作流中的下游任务。
9、第一重执行模块,用于基于重执行任务的直接依赖任务的输出数据和重执行文本段,重新执行重执行任务,并在视频生成工作流执行完成的情况下获得目标文本对应的目标视频。
10、本申请实施例还公开了一种电子设备,包括:处理器;和存储器,其上存储有可执行代码,当可执行代码被执行时,使得处理器执行如本申请实施例中一个或多个的方法。
11、本申请实施例还公开了一个或多个机器可读介质,其上存储有可执行代码,当可执行代码被执行时,使得处理器执行如本申请实施例中一个或多个的方法。
12、与相关技术相比,本申请实施例包括以下优点:获取目标文本和视频生成工作流,视频生成工作流包括存在依赖关系的多个任务;针对目标文本执行视频生成工作流,并记录任务对至少一个文本段的输出数据;在接收到分段调试指令的情况下,确定重执行文本段以及重执行任务;重执行文本段包括分段调试指令指示的目标内容在目标文本中对应的文本段;重执行任务包括分段调试指令指示的目标任务和目标任务在视频生成工作流中的下游任务;基于重执行任务的直接依赖任务的输出数据和重执行文本段,重新执行重执行任务,并在视频生成工作流执行完成的情况下获得目标文本对应的目标视频。本申请实施例具有以下有益效果:第一方面,在执行视频生成工作流的过程中记录每个任务的输出数据,以支持部分任务和部分文本段的重新执行,实现了视频生成工作流的分段调试,相较于全部重新执行,可以有效提高视频调优效率;第二方面,通过视频生成工作流全自动化生成视频,视频生成工作流的执行过程中不需要人为参与,有助于提高视频生成效率;相较于现有技术中一部漫剧制作需要5天以上,本申请实施例可以将制作时长降低至8小时以内。
1.一种视频生成方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,获取视频生成工作流之前,还包括:
3.根据权利要求2所述的方法,其特征在于,针对所述目标文本执行所述视频生成工作流之前,还包括:
4.根据权利要求1所述的方法,其特征在于,记录所述任务对所述至少一个文本段的输出数据,包括:
5.根据权利要求4所述的方法,其特征在于,还包括:
6.根据权利要求1至5中任一项所述的方法,其特征在于,针对所述目标文本执行所述视频生成工作流,包括:
7.根据权利要求2所述的方法,其特征在于,所述视频生成工作流,包括:
8.根据权利要求7所述的方法,其特征在于,
9.根据权利要求7所述的方法,其特征在于,所述音频包括至少一个角色的对话音频,所述视频生成工作流还包括:声音库生成任务,所述声音库生成任务用于根据所述角色提取任务提取的角色特征文本生成所述角色的声音特征,并将所述声音特征和所述角色特征文本中的角色的名称添加到所述角色声音库中,所述音频包括至少一个角色的对话音频,根据所述音频文本生成音频,包括:
10.根据权利要求7所述的方法,其特征在于,还包括:
11.根据权利要求10所述的方法,其特征在于,
12.根据权利要求7所述的方法,其特征在于,将所述多个分镜文本的视频片段和所述音频合成为所述目标视频,包括:
13.一种视频生成装置,其特征在于,所述装置包括:
14.一种电子设备,其特征在于,包括:
15.一个或多个机器可读介质,其特征在于,其上存储有可执行代码,当所述可执行代码被执行时,使得处理器执行如权利要求1至12任一所述的方法。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com