一种图像生成方法、装置、电子设备及存储介质与流程

本发明涉及图像处理，特别是涉及一种图像生成方法、装置、电子设备及存储介质。

背景技术：

1、视频、商品售卖等各种服务平台能够提供视频或商品详情页等网络资源，用户需要浏览各网络资源时，服务平台可以向用户展示网络资源的图像，以吸引用户点击网络资源进行浏览。

2、现有技术中，技术人员可以基于网络资源的原始图像中显示的信息，分析出对应的关键词，比如，将原始图像所包含的文字作为关键词，或者人工理解原始图像中的文本后总结出关键词；然后，将对应的关键词添加至网络资源的原始图像中，生成用于资源推荐的目标图像。

3、然而，按照现有技术，需要人工依次针对每一网络资源进行上述处理，效率较低，且关键词的确定易受人为主观影响，最终导致目标图像的生成效率以及准确度不高。

技术实现思路

1、本发明实施例的目的在于提供一种图像生成方法、装置、电子设备及存储介质，以提高图像生成效率以及准确度。具体技术方案如下：

2、在本发明实施的第一方面，首先提供了一种图像生成方法，所述方法包括：

3、基于原始图像中的文本的语义，识别所述原始图像的使用意图，并提取出表征所述使用意图的目标关键词；

4、提取所述原始图像的视觉特征；

5、基于所述视觉特征，确定融合参数；其中，所述融合参数用于适配所述原始图像的视觉风格，并使所述关键词在所述原始图像中突出显示；

6、基于所述融合参数，在所述原始图像中融合所述目标关键词。

7、可选的，所述基于原始图像中的文本的语义，识别所述原始图像的使用意图，并提取出表征所述使用意图的目标关键词，包括：

8、提取原始图像中的文本，得到原始文本；

9、基于所述原始文本进行语义分析，识别所述原始图像的使用意图，并提取出表征所述使用意图的备选关键词；并基于展示有每一备选关键词的图像的预测点击概率，获得该备选关键词对应的预测点击概率；

10、从各备选关键词中，确定对应的预测点击概率最大的至少一个备选关键词，作为表征所述使用意图的目标关键词。

11、可选的，所述基于展示有每一备选关键词的图像的预测点击概率，获得该备选关键词对应的预测点击概率，包括：

12、若存在与每一备选关键词的相似度大于预设阈值的预设关键词，则将预设关键词对应的预设点击概率，作为该备选关键词对应的预测点击概率；其中，每一预设关键词对应的预设点击概率表示：展示该预设关键词的图像的点击频率；

13、若不存在所述预设关键词，则获取预测模型所输出的该备选关键词对应的备选点击概率，作为该备选关键词的预测点击概率；其中，所述预测模型为基于样本文本、所述样本文本中的样本关键词，以及每一样本关键词对应的真实点击概率进行训练得到的。

14、可选的，所述基于所述融合参数，在所述原始图像中融合所述目标关键词，包括：

15、基于所述融合参数中描述所述原始图像整体风格的第一参数，生成水印基底；

16、按照所述融合参数中描述关键词在图像中的视觉形态的第二参数调整所述目标关键词；

17、在所述水印基底上渲染调整后的目标关键词，得到承载有目标关键词的融合水印；

18、基于所述融合参数中描述关键词位置的第三参数，在所述原始图像中融合所述融合水印。

19、可选的，所述第一参数包含：所述原始图像的主色调、所述原始图像的整体亮度信息和所述原始图像的风格类型；

20、所述基于所述融合参数中描述所述原始图像整体风格的第一参数，生成水印基底，包括：

21、基于所述融合参数中第一参数包含的主色调及整体亮度信息，确定水印基底的颜色和透明度；

22、按照确定的颜色和透明度，生成待处理水印基底；

23、确定所述融合参数中风格类型对应的纹理；

24、在所述待处理水印基底中添加确定的纹理，得到所需的水印基底。

25、可选的，所述第三参数按照以下方式获得：

26、识别所述原始图像中的预设保护区域；

27、在所述原始图像中除预设保护区域外的区域中，确定关键词位置，得到描述关键词位置的第三参数。

28、在本发明实施的第二方面，还提供了一种图像生成装置，所述装置包括：

29、第一提取模块，用于基于原始图像中的文本的语义，识别所述原始图像的使用意图，并提取出表征所述使用意图的目标关键词；

30、第二提取模块，用于提取所述原始图像的视觉特征；

31、确定模块，用于基于所述视觉特征，确定融合参数；其中，所述融合参数用于适配所述原始图像的视觉风格，并使所述关键词在所述原始图像中突出显示；

32、融合模块，用于基于所述融合参数，在所述原始图像中融合所述目标关键词。

33、在本发明实施的第三方面，提供了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现上述第一方面任一所述的图像生成方法。

34、在本发明实施的又一方面，还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一所述的图像生成方法。

35、在本发明实施的又一方面，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述任一所述的图像生成方法。

36、本发明实施例中，基于原始图像中文本的语义识别原始图像的使用意图，提取出表征使用意图的目标关键词；随后提取原始图像的视觉特征，基于提取到的视觉特征，确定适配原始图像视觉风格、用于使关键词在原始图像中突出显示的融合参数；再基于确定的融合参数，在原始图像中融合目标关键词。通过对原始图像文本进行语义分析获取关键词；通过提取原始图像的视觉特征，依据图像自身视觉风格匹配对应的融合参数，接着按照适配视觉风格的融合参数，完成关键词与原始图像的融合整合处理，最终生成关键词突出自然且贴合原图风格的目标图像。当需要针对大量网络资源对应的原始图像生成目标图像时，通过本方案无需人工依次对每一网络资源进行处理，可以提升目标图像的生成效率，又通过语义分析自动产出关键词，消除人工确定关键词带来的主观影响，同时依托视觉风格设定融合参数实现关键词适配融合，避免了关键词直接添加所引发的画面冲突与展示效果偏差问题，提升目标图像的生成准确度。

1.一种图像生成方法，其特征在于，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述基于原始图像中的文本的语义，识别所述原始图像的使用意图，并提取出表征所述使用意图的目标关键词，包括：

3.根据权利要求2所述的方法，其特征在于，所述基于展示有每一备选关键词的图像的预测点击概率，获得该备选关键词对应的预测点击概率，包括：

4.根据权利要求1所述的方法，其特征在于，所述基于所述融合参数，在所述原始图像中融合所述目标关键词，包括：

5.根据权利要求4所述的方法，其特征在于，所述第一参数包含：所述原始图像的主色调、所述原始图像的整体亮度信息和所述原始图像的风格类型；

6.根据权利要求4所述的方法，其特征在于，所述第三参数按照以下方式获得：

7.一种图像生成装置，其特征在于，所述装置包括：

8.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-6任一所述的方法。

10.一种计算机程序产品，其特征在于，当所述计算机程序产品在计算机上运行时，使得所述计算机执行权利要求1-6任一所述的方法。