图像处理方法、装置、电子设备及存储介质与流程

技术特征：
1.一种图像处理方法，其特征在于，包括：接收待进行风格变换的原始图像对应的图像修改描述信息；对所述图像修改描述信息进行语义编码，得到所述图像修改描述信息对应的语义编码信息；获取所述语义编码信息所对应的风格特征变化信息，所述风格特征变化信息为图像风格所对应的特征变化信息；获取所述原始图像对应的原始风格特征集合；基于所述风格特征变化信息对所述原始风格特征集合中的原始风格特征进行调整，得到目标风格特征集合；基于所述目标风格特征集合生成所述图像修改描述信息对应的风格变换图像。2.根据权利要求1所述的方法，其特征在于，所述基于所述风格特征变化信息对所述原始风格特征集合中的原始风格特征进行调整，得到目标风格特征集合，包括：基于所述风格特征变化信息对所述原始风格特征集合中的第一原始风格特征进行调整，得到调整后的第一风格特征；所述第一原始风格特征为所述风格特征变化信息所对应的原始风格特征；将第二原始风格特征以及所述调整后的第一风格特征进行组合，得到所述目标风格特征集合，所述第二原始风格特征为所述原始风格特征集合中所述第一原始风格特征之外的原始风格特征。3.根据权利要求1所述的方法，其特征在于，所述获取所述语义编码信息所对应的风格特征变化信息，包括：获取预先确定的图像变化特征空间和文本语义特征空间之间的映射关系；将所述语义编码信息作为所述文本语义特征空间中的文本语义特征，基于所述映射关系获取所述文本语义特征在所述图像变化特征空间所对应的图像变化特征；将所述图像变化特征作为所述风格特征变化信息。4.根据权利要求1所述的方法，其特征在于，所述对所述图像修改描述信息进行语义编码，得到所述图像修改描述信息对应的语义编码信息，包括：将所述图像修改描述信息输入到预先训练得到的语义编码模型中，以基于所述语义编码模型中的语义编码参数对所述图像修改描述信息进行编码，得到所述图像修改描述信息对应的语义编码信息；所述语义编码模型是基于配对的训练文本以及训练图像进行训练得到的。5.根据权利要求4所述的方法，其特征在于，训练得到所述语义编码模型的步骤包括：获取训练样本，所述训练样本包括第一训练图像和所述第一训练图像配对的训练文本；将所述训练文本输入到待训练的语义编码模型中进行编码，得到所述训练文本的文本编码特征；将所述第一训练图像输入到图像编码模型进行编码，得到所述第一训练图像的图像编码特征；根据所述第一训练图像的图像编码特征和所述训练文本的文本编码特征，确定每一所述第一训练图像与每一所述训练文本之间的第一相似度；所述第一相似度表征图像模态对
应的编码特征与文本模态对应的编码特征之间的相似度；根据所述第一相似度，确定所述待训练的语义编码模型对应的目标损失值；根据所述目标损失值调整所述待训练的语义编码模型的模型参数，直到满足训练结束条件，得到已训练的所述语义编码模型。6.根据权利要求5所述的方法，其特征在于，所述训练样本为多个，所述根据所述第一相似度，确定所述待训练的语义编码模型对应的目标损失值，包括：根据所述第一相似度，得到所述待训练的语义编码模型对应的第一损失值，所述第一损失值与所述第一相似度成负相关关系；根据第二相似度，得到所述待训练的语义编码模型对应的第二损失值，所述第二损失值与所述第二相似度成正相关关系；所述第二相似度为不同所述训练样本中的训练文本与第一训练文本之间的相似度；基于所述第一损失值与所述第二损失值，得到所述待训练的语义编码模型对应的所述目标损失值。7.一种图像处理装置，其特征在于，包括：描述信息获取单元，被配置为执行接收待进行风格变换的原始图像对应的图像修改描述信息；语义编码单元，被配置为执行对所述图像修改描述信息进行语义编码，得到所述图像修改描述信息对应的语义编码信息；风格变换确定单元，被配置为执行获取所述语义编码信息所对应的风格特征变化信息，所述风格特征变化信息为图像风格所对应的特征变化信息；原始特征集合获取单元，被配置为执行获取所述原始图像对应的原始风格特征集合；目标特征集合获取单元，被配置为执行基于所述风格特征变化信息对所述原始风格特征集合中的原始风格特征进行调整，得到目标风格特征集合；风格变换图像获取单元，被配置为执行基于所述目标风格特征集合生成所述图像修改描述信息对应的风格变换图像。8.一种电子设备，其特征在于，包括：处理器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为执行所述指令，以实现如权利要求1至6中任一项所述的图像处理方法。9.一种计算机可读存储介质，其特征在于，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得所述电子设备能够执行如权利要求1至6中任一项所述的图像处理方法。10.一种计算机程序产品，所述计算机程序产品中包括指令，其特征在于，所述指令被电子设备的处理器执行时，使得所述电子设备能够执行如权利要求1至6任一项所述的图像处理方法。

技术总结
本公开关于一种图像处理方法、装置、电子设备及存储介质。所述方法包括：接收待进行风格变换的原始图像对应的图像修改描述信息；对图像修改描述信息进行语义编码，得到对应的语义编码信息；获取语义编码信息对应的风格特征变化信息；获取原始图像的原始风格特征集合；基于风格特征变化信息对原始风格特征集合中的原始风格特征进行调整，得到目标风格特征集合；基于目标风格特征集合生成图像修改描述信息对应的风格变换图像。在本方案中，基于图像修改描述信对应的语义编码信息调整原始风格特征，并生成风格变换图像，无需人工调整图像，有效提高编辑效率，且通过调整风格特征即可修改图像风格，可以降低图像处理成本。可以降低图像处理成本。可以降低图像处理成本。


技术研发人员：张恒
受保护的技术使用者：北京达佳互联信息技术有限公司
技术研发日：2021.12.21
技术公布日：2022/4/1