图像生成方法及装置与流程

摘要: 本说明书实施例涉及人工智能,特别涉及一种图像生成方法。本说明书一个或者多个实施例同时涉及一种图像生成装置,一种计算设备,一种计算机可读存储介质以及一种计算机程序...
图像生成方法及装置与流程

本说明书实施例涉及人工智能,特别涉及一种图像生成方法。本说明书一个或者多个实施例同时涉及一种图像生成装置,一种计算设备,一种计算机可读存储介质以及一种计算机程序产品。

背景技术:

1、目前,在视频生成方面,定义角色的参考图像通常包含正面、侧面以及背面三种视图,然而在这些参考图像能够呈现的角色信息有限,而且在生成上述参考图像时,不同生成模型对不同生成风格和角色特征的适配能力存在差异,这种适配差异会导致生成的角色外观不一致、风格不匹配,进而影响后续生成效果。

技术实现思路

1、有鉴于此,本说明书实施例提供了一种图像生成方法。本说明书一个或者多个实施例同时涉及一种图像生成装置,一种计算设备,一种计算机可读存储介质以及一种计算机程序产品,以解决现有技术中存在的因参考图像的局限性,导致生成效果不好的技术缺陷。

2、根据本说明书实施例的第一方面,提供了一种图像生成方法,包括:

3、根据目标生成风格从初始图像生成模型集合中确定候选图像生成模型集合;

4、对所述候选图像生成模型集合中的各候选图像生成模型进行评分,获得评分结果,并根据所述评分结果,从所述候选图像生成模型集合中确定目标图像生成模型;

5、将包含参考对象的初始参考图像以及所述目标图像生成模型对应的对象生成提示词输入所述目标图像生成模型,生成包含所述参考对象的、所述目标生成风格的至少一个目标参考图像,其中,所述对象生成提示词中包含在多个生成维度上描述所述参考对象的描述文本。

6、根据本说明书实施例的第二方面,提供了一种图像生成装置,包括:

7、候选模型确定模块,被配置为根据目标生成风格从初始图像生成模型集合中确定候选图像生成模型集合;

8、目标模型确定模块,被配置为对所述候选图像生成模型集合中的各候选图像生成模型进行评分,获得评分结果,并根据所述评分结果,从所述候选图像生成模型集合中确定目标图像生成模型;

9、图像生成模块,被配置为将包含参考对象的初始参考图像以及所述目标图像生成模型对应的对象生成提示词输入所述目标图像生成模型,生成包含所述参考对象的、所述目标生成风格的至少一个目标参考图像,其中,所述对象生成提示词中包含在多个生成维度上描述所述参考对象的描述文本。

10、根据本说明书实施例的第三方面,提供了一种计算设备,包括:

11、存储器和处理器;

12、所述存储器用于存储计算机程序/指令,所述处理器用于执行所述计算机程序/指令,该计算机程序/指令被处理器执行时实现上述图像生成方法的步骤。

13、根据本说明书实施例的第四方面,提供了一种计算机可读存储介质,其存储有计算机程序/指令,该计算机程序/指令被处理器执行时实现上述图像生成方法的步骤。

14、根据本说明书实施例的第五方面,提供了一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被处理器执行时实现上述图像生成方法的步骤。

15、本说明书一个实施例提供了图像生成方法,根据目标生成风格从初始图像生成模型集合中确定候选图像生成模型集合,使模型选择能够适配具体的生成风格需求,为后续精准确定目标图像生成模型奠定基础;对候选图像生成模型集合中的各候选图像生成模型进行评分,获得评分结果,并根据评分结果从候选图像生成模型集合中确定目标图像生成模型,通过评分机制客观量化各候选图像生成模型的生成能力,从而筛选出与当前生成任务较为适配的目标图像生成模型;将包含参考对象的初始参考图像以及目标图像生成模型对应的对象生成提示词输入目标图像生成模型,生成包含参考对象的、所述目标生成风格的至少一个目标参考图像,其中对象生成提示词中包含在多个生成维度上描述所述参考对象的描述文本,通过该对象生成提示词引导目标图像生成模型从有限的初始参考图像中扩展出更丰富的对象信息,生成在多个生成维度上、与参考对象保持一致的至少一个目标参考图像,后续在利用至少一个参考图像进行对应视觉内容生成时,能够有效提升参考对象的外观一致性,改善生成效果。

1.一种图像生成方法,包括:

2.根据权利要求1所述的图像生成方法,所述根据目标生成风格从初始图像生成模型集合中确定候选图像生成模型集合,包括:

3.根据权利要求1所述的图像生成方法,所述对所述候选图像生成模型集合中的各候选图像生成模型进行评分,获得评分结果,包括:

4.根据权利要求1所述的图像生成方法,所述根据所述评分结果,从所述候选图像生成模型集合中确定目标图像生成模型,包括:

5.根据权利要求1所述的图像生成方法,所述将包含参考对象的初始参考图像以及所述目标图像生成模型对应的对象生成提示词输入所述目标图像生成模型,生成包含所述参考对象的、所述目标生成风格的至少一个目标参考图像之前,还包括:

6.根据权利要求1所述的图像生成方法,所述将包含参考对象的初始参考图像以及所述目标图像生成模型对应的对象生成提示词输入所述目标图像生成模型,生成包含所述参考对象的、所述目标生成风格的至少一个目标参考图像之后,还包括:

7.根据权利要求1-6任意一项所述的图像生成方法,所述将包含参考对象的初始参考图像以及所述目标图像生成模型对应的对象生成提示词输入所述目标图像生成模型,生成包含所述参考对象的、所述目标生成风格的至少一个目标参考图像之后,还包括:

8.根据权利要求7所述的图像生成方法,所述将所述生成约束信息以及包含所述参考对象的至少一个目标参考图像输入视觉数据生成模型,获得目标视觉数据,包括:

9.根据权利要求8所述的图像生成方法,所述从包含所述参考对象的至少一个目标参考图像中,确定与所述生成约束信息匹配的关联参考图像,包括:

10.一种图像生成装置,包括:

11.一种计算设备,包括:

12.一种计算机可读存储介质,其存储有计算机程序/指令,该计算机程序/指令被处理器执行时实现权利要求1至9任意一项所述图像生成方法的步骤。

13.一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被处理器执行时实现权利要求1至9任意一项所述图像生成方法的步骤。