一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

图像推送方法和装置与流程

2022-04-02 04:43:15 来源:中国专利 TAG:


1.本公开的实施例涉及计算机技术领域,具体涉及图像推送方法和装置。


背景技术:

2.随着多媒体终端的应用普及,多模态创意设计在信息推送中发挥着越来越重要的作用,由此也出现了应用多模态创意设计以提升信息推送效率和准确度等效果。
3.现有的实现方案主要包括两种。一种是投后调优,这种方式主要是先在灰度流量下进行多组创意设计投放,然后再基于灰度效果通过贝叶斯算法等预测各创意设计的最优投放比例以进行全量投放。另一种是投前预测,这种方式主要是基于多组创意设计图像,通过图像embedding的方式抽取图像的高阶特征,然后再进行预测建模,以确定得分最高的创意设计图像以进行投放。


技术实现要素:

4.本公开的实施例提出了图像推送方法和装置。
5.第一方面,本公开的实施例提供了一种图像推送方法,该方法包括:获取待推送图像的视觉特征,其中,视觉特征包括设计特征和目标视觉特征,目标视觉特征利用向量嵌入得到;根据视觉特征,确定用户对待推送图像的偏好度;响应于确定偏好度符合预设条件,向用户对应的终端推送该待推送图像。
6.第二方面,本公开的实施例提供了一种图像推送装置,该装置包括:视觉特征获取单元,被配置成获取待推送图像的视觉特征,其中,视觉特征包括设计特征和目标视觉特征,目标视觉特征利用向量嵌入得到;偏好度确定单元,被配置成根据视觉特征,确定用户对待推送图像的偏好度;推送单元,被配置成响应于确定偏好度符合预设条件,向用户对应的终端推送该待推送图像。
7.第三方面,本公开的实施例提供了一种电子设备,该电子设备包括:一个或多个处理器;存储装置,用于存储一个或多个程序;当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如第一方面中任一实现方式描述的方法。
8.第四方面,本公开的实施例提供了一种计算机可读介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如第一方面中任一实现方式描述的方法。
9.本公开的实施例提供的图像推送方法和装置,通过获取待推送图像对应的设计特征和利用向量嵌入得到的目标视觉特征作为视觉特征,然后根据视觉特征确定用户对待推送图像的偏好度,再根据用户对待推送图像的偏好度进行图像推送,可以结合设计特征更全面的对图像进行特征表征,从而有助于提升图像推送效果。
附图说明
10.通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本公开的其它特征、目的和优点将会变得更明显:
11.图1是本公开的一个实施例可以应用于其中的示例性系统架构图;
12.图2是根据本公开的图像推送方法的一个实施例的流程图;
13.图3是根据本公开的实施例的图像推送方法的又一个实施例的流程图;
14.图4是根据本公开的实施例的图像推送方法的再一个实施例的流程图;
15.图5是根据本公开的实施例的图像推送方法的一个应用场景的示意图;
16.图6是根据本公开的图像推送装置的一个实施例的结构示意图;
17.图7是适于用来实现本公开的实施例的电子设备的结构示意图。
具体实施方式
18.下面结合附图和实施例对本公开作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
19.需要说明的是,在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本公开。
20.图1示出了可以应用本公开的图像推送方法或图像推送装置的实施例的示例性架构100。
21.如图1所示,系统架构100可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
22.终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息等。终端设备101、102、103上可以安装有各种客户端应用。例如,浏览器类应用、搜索类应用、购物类应用、即时通讯工具、社交类应用、图像处理类应用等等。
23.终端设备101、102、103可以是硬件,也可以是软件。当终端设备101、102、103为硬件时,可以是各种电子设备,包括但不限于智能手机、平板电脑、电子书阅读器、膝上型便携计算机和台式计算机等等。当终端设备101、102、103为软件时,可以安装在上述所列举的电子设备中。其可以实现成多个软件或软件模块(例如用来提供分布式服务的多个软件或软件模块),也可以实现成单个软件或软件模块。在此不做具体限定。
24.服务器105可以是提供各种服务的服务器,例如为终端设备101、102、103上安装的客户端应用提供服务支持的后端服务器。服务器105可以获取待推送图像的视觉特征,并根据视觉特征确定用户对待推送图像的偏好度,若偏好度符合预设条件,可以进一步向用户对应的终端(如终端设备101、102、103等)推送该待推送图像。
25.需要说明的是,上述待推送图像的视觉特征可以直接存储在服务器105的本地,服务器105可以直接提取本地所存储的待推送图像的视觉特征并进行处理,此时,可以不存在终端设备101、102、103和网络104。
26.需要说明的是,本公开的实施例所提供的图像推送方法一般由服务器105执行,相应地,图像推送装置一般设置于服务器105中。
27.还需要指出的是,终端设备101、102、103中也可以安装有图像推送类应用,终端设备101、102、103也可以基于图像推送类应用根据待推送图像的视觉特征确定用户对待推送图像的偏好度,并在偏好度符合预设条件时,向用户对应的终端推送该待推送图像。此时,
图像推送方法可以由终端设备101、102、103执行,相应地,图像推送装置也可以设置于终端设备101、102、103中。此时,示例性系统架构100可以不存在服务器105和网络104。
28.需要说明的是,服务器105可以是硬件,也可以是软件。当服务器105为硬件时,可以实现成多个服务器组成的分布式服务器集群,也可以实现成单个服务器。当服务器105为软件时,可以实现成多个软件或软件模块(例如用来提供分布式服务的多个软件或软件模块),也可以实现成单个软件或软件模块。在此不做具体限定。
29.应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
30.继续参考图2,其示出了根据本公开的图像推送方法的一个实施例的流程200。该图像推送方法包括以下步骤:
31.步骤201,获取待推送图像的视觉特征。
32.在本实施例中,待推送图像可以是各种类型、各种内容的图像。例如,待推送图像可以是某个物品的介绍图等。又例如,待推送图像可以是某个服务或活动的推广图等等。待推送图像的视觉特征表示待推送图像在视觉角度呈现出的特征。视觉特征可以包括设计特征和目标视觉特征。
33.其中,设计特征可以用于表示待推送图像在设计方面的特征。设计特征可以根据实际的应用场景或应用需求包括多种方面的设计特征。例如,包括但不限于:布局、背景装饰、风格、色系等等。
34.目标视觉特征可以利用向量嵌入(embedding)得到,具体可以利用各种针对图像的向量嵌入方法得到。一般地,目标视觉特征可以使用特征向量进行表示。
35.待推送图像的视觉特征可以基于各种方法确定。例如,设计特征可以由设计人员预先标注。目标视觉特征可以利用卷积神经网络等提取得到。作为示例,可以基于现有的分类模型和resnet等网络结构,保留浅层的若干block,再连接全连接层和预测输出层构建模型并训练,此时可以将全连接层的输出作为目标视觉特征
36.图像推送方法的执行主体(如图1所示的服务器105等)可以从本地或其它存储设备获取待推送图像的视觉特征。需要说明的是,待推送图像的视觉特征可以由图像推送方法的执行主体确定,也可以由其它电子设备确定。
37.步骤202,根据视觉特征,确定用户对待推送图像的偏好度。
38.在本实施例中,用户对待推送图像的偏好度可以表示用户对待推送图像的感兴趣程度。具体地,偏好度可以根据实际的应用场景采用各种具体的表示方式。例如,偏好度可以采用点击率、浏览时长等数据指标来表示。
39.根据不同的应用场景,可以采用各种不同的方法根据待推送图像的视觉特征确定用户对待推送图像的偏好度。例如,可以根据统计历史时段段内用户偏好度较高的图像的视觉特征,然后根据统计得到的视觉特征与待推送图像的视觉特征的相似度确定用户对待推送图像的偏好度。一般地,用户对待推送图像的偏好度与确定的相似度正相关。
40.又例如,在使用点击率等数据指标表示偏好度,可以采用各种数据指标预测方法确定用户对待推送图像的偏好度。作为示例,利用现有的各种点击率预测模型根据待推送图像的视觉特征确定用户对待推送图像的点击率。一般地,用户对待推送图像的偏好度与确定的点击率正相关。
41.步骤203,响应于确定偏好度符合预设条件,向用户对应的终端推送该待推送图像。
42.在本实施例中,预设条件可以根据实际的应用需求灵活设置。例如,预设条件可以包括确定的偏好度不小于预设阈值。又例如,预设条件可以包括确定的偏好度对应的排序位置不小于预设位置。其中,排序位置可以指在预设的多个待推送图像分别对应的偏好度进行排序形成的排序中的位置。
43.若偏好度符合预设条件,可以表示用户对待推送图像比较感兴趣。此时,可以进一步向用户对应的终端(如用户所使用的终端等)推送该待推送图像,从而可以实现基于设计特征的图像推送,避免仅采用利用向量嵌入得到的目标视觉特征进行图像推送,忽略了用户对图像的设计特征的偏好需求。
44.在本实施例的一些可选的实现方式中,待推送图像的设计特征可以通过如下步骤确定:
45.步骤一、解析待推送图像的设计元素。
46.在本步骤中,一般地,待推送图像的设计可以由其具有的各种设计元素来体现。不同的设计可以包括各种不同的设计元素。对于同一个设计,不同个划分方式也会产生不同的设计元素。例如,设计元素包括但不限于:色系、字体、样式、图文布局等等。
47.具体地,可以采用各种解析方法确定待推送图像具有的设计元素。例如,可以由设计人员预先设置待推送图像的设计文档,并在设计文档中记录各设计元素。此时,可以通过读取待推送图像的设计文档解析待推送图像具有的各设计元素。
48.步骤二、识别设计元素所表示的语义,得到识别结果,以及将得到的识别结果确定为设计特征。
49.在本步骤中,设计元素所表示的语义可以指设计人员期望通过设计元素所表达的意图。例如,通过不同的色系可以表达庄重或轻松等不同的语义。
50.通过识别设计元素所表示的语义,可以得到语义识别结果,进而可以将得到的语义识别结果确定为设计特征,从而可以将待推送图像的设计意图转化为可解释的设计特征。
51.具体地,可以根据实际的应用场景采用各种不同的识别方法来识别设计元素所表示的语义。例如,可以由设计人员预先标注设计元素和语义之间的对应关系。此时,可以通过查询预设的对应关系确定设计元素所表示的语义。
52.又例如,以背景的色系语义识别为示例,可以通过如下步骤确定背景的色系所表示的语义:
53.步骤一、统计背景所包含的各像素点的色值,以及筛选对应像素点数量最多的前十种色值。
54.步骤二、从十种色值中筛选饱和度不低于预设饱和度阈值且亮度不低于预设亮度阈值的色值,以排除饱和度过低或亮度过低的无效色或中立色。
55.步骤三、对筛选出的色值进行聚类,得到聚类结果。
56.步骤四、利用预设的色值-语义对应关系,查询聚类结果中的聚类簇所表示的语义。
57.现有技术中,仅基于图像embedding化的特征提取和表示方式无法解析出图像包
含的色系情感倾向、风格等创意设计特征,而创意设计特征是比较能传递视觉氛围和设计心智的,因此,仅基于图像embedding化的特征提取和表示方式预测出的推送图像可能并不符合用户当前的情感诉求和心智传达。基于此,通过结合图像embedding化的特征提取和图像对应的设计特征可以更全面的衡量图像和用户之间的匹配度,从而有助于提升推送图像的准确度,进而提升用户体验。
58.在本实施例的一些可选的实现方式中,设计特征可以包括以下至少一项:设计内容特征、设计表现特征。
59.其中,设计内容特征可以指呈现于内容方面的设计特征。例如,设计内容特征可以包括但不限于:logo(商标/徽标)、图像中呈现的对象、图像中呈现的字符(如文案)、图像中的各种控件(如按钮等)等等。
60.设计表现特征可以指视觉表现方面的设计特征。例如,设计表现特征包括但不限于:色系、布局、图像中呈现的对象的图、背景装饰、风格等等。
61.通过从内容和表现两方面解析并识别待推送图像的设计特征,可以对待推送图像的设计特征进行具象化,其能够通过这种方式比较全面且便捷地表示待推送图像的设计特征。
62.可选地,设计内容特征可以通过如下步骤确定:
63.步骤一、基于语义分割解析待推送图像的设计内容元素。
64.在本步骤中,可以采用现有的各种语义分割(semantic segmentation)方法,从待推送图像中识别其具有的各设计内容元素。
65.在一些情况下,可以根据需求预先设置设计内容元素集,此时,可以从待推送图像中识别其具有的、属于预设的设计内容元素集中的设计内容元素。
66.例如,可以利用预先训练的、基于语义分割实现的设计内容元素识别模型,从待推送图像中识别其具有的各设计内容元素。作为示例,可以识别待推送图像中的对象区域、字符区域、logo区域、空间区域等等。
67.步骤二、识别设计内容元素所表示的语义,得到识别结果,以及将得到的识别结果确定为设计内容特征。
68.该步骤的语义识别可以参考上文中的相关描述,在此不再赘述。
69.利用语义分割可以准确识别各设计元素,从而更准确地表示待推送图像的设计特征。
70.可选地,设计表现特征可以通过如下步骤确定:
71.步骤一、解析待推送图像的设计文件,得到待推送图像的设计表现元素。
72.在本步骤中,待推送图像的设计文件可以指待推送图像的设计过程形成的各种资料。例如,待推送图像是利用某设计工具或应用制作的,则可以将利用该设计工具或应用形成的文件作为待推送图像的设计文件。
73.不同类型的设计文件可以采用不用的解析方法。例如,可以先通过设计文件读取对应的图层数量、图层类别和图层尺寸等,然后再具体解析各图层的内容以确定待推送图像的设计元素。
74.步骤二、识别设计表现元素所表示的语义,得到识别结果,以及将得到的识别结果确定为设计表现特征。
75.该步骤的语义识别可以参考上文中的相关描述,在此不再赘述。
76.通过对待推送图像的设计文件的解析和识别可以了解原始的设计语义,从而更准确地表示设计特征。
77.在一些情况下,目标视觉特征可以对待推送图像进行处理得到,也可以利用向量嵌入对待推送图像对应的图像模板进行处理得到。例如,利用卷积神经网络从待推送图像对应的图像模板提取特征向量。其中,图像模板可以指待推送图像的设计模板,可以包括各设计元素,可以不包括各设计元素具体的内容。
78.此时,在确定用户对待推送图像的偏好度符合预设条件之后,可以在设计模板中补充待推送图像的设计特征指示的设计元素的内容,并将补充后得到的图像作为待推送图像,以及向用户推送得到的待推送图像。
79.现有的基于投后调优的图像推送,由于每次进行创意设计投放时可能缺乏足够的先验知识,因此通常需要先进行灰度实验再进行投放调优。但灰度实验期间通常采用流量均分的方式,导致无法实现流量使用效率最优化,容易出现较差的创意设计占用较多的流量比例的情况。
80.本公开的上述实施例提供的方法通过结合待推送图像的设计特征和利用图像embedding化得到的目标视觉特征确定用户对待推送图像的偏好度,进而基于偏好度进行图像推送,可以避免上述投后调优需要进行灰度实现投放等过程,而且在利用图像的高阶特征的基础上,进一步结合图像的设计特征所表达的色系情感倾向、风格等创意设计语义进行偏好度预测,有助于提升图像推送结果的准确度,使得推送的图像在设计方面更匹配用户的需求。
81.进一步参考图3,其示出了图像推送方法的又一个实施例的流程300。该图像推送方法的流程300,包括以下步骤:
82.步骤301,获取待推送图像的视觉特征。
83.步骤302,获取待推送图像的关联特征。
84.在本实施例中,关联特征可以指除视觉特征之外,与待推送图像相关联的各种特征。关联特征可以包括如下至少一项:属性特征、文本特征。
85.其中,文本特征可以表示待推送图像中的字符的特征。属性特征可以包括以下至少一项:用户的属性特征、待推送图像所描述的对象的属性特征。用户的属性特征可以包括用户的固有属性、行为属性等等。待推送图像所描述的对象可以是各种类型的对象。不同类型的对象可以具有不同的属性特征。
86.例如,待推送图像为某物品的介绍图,则待推送图像所描述的对象可以为该物品。此时,对象的属性特征即为该物品的属性特征(如成分、产地、保质期等等)。又例如,待推送图像为某服务的推广图,则待推送图像所描述的对象可以为该服务。此时,对象的属性特征即为该服务的属性特征(如开始时间、结束时间、地点等等)。
87.待推送图像的关联特征可以采用各种不同的方法确定。例如,对于属性特征,可以通过采集相关属性数据进行确定。又例如,对于文本特征,可以基于ocr(optical character recognition,光学字符识别)等方法从待推送图像中提取其中的字符,然后利用nlp(natural language processing,自然语言处理)等方法提取对应的文本特征。
88.例如,可以构建并训练长短期记忆网络(lstm,long short-term memory),并最后
全连接层的输出的embedding结果作为文案特征。
89.执行主体可以从本地或其他数据源获取待推送图像的关联特征。需要说明的是,待推送图像的关联特征可以由上述执行主体确定,也可以由其它电子设备确定。待推送图像的视觉特征和关联特征可以由同一电子设备确定,也可以由不同的电子设备确定。
90.步骤303,根据视觉特征和关联特征,确定用户对待推送图像的偏好度。
91.在本实施例中,可以综合待推送图像的视觉特征和关联特征,确定用户对待推送图像的偏好度。具体地,可以根据实际的应用需求采用各种各不同的偏好度确定方法。
92.例如,可以先根据待推送图像的视觉特征确定用户对待推送图像的第一偏好度,然后根据待推送图像的关联特征确定用户对待推送图像的第二偏好度。然后对第一偏好度和第二偏好度进行加权和等方式进行融合,并将融合结果确定为用户对待推送图像的偏好度。
93.又例如,可以利用各种基于深度学习的神经网络模型,根据待推送图像的视觉特征和关联特征,确定用户对待推送图像的偏好度。作为示例,可以预先训练偏好度确定模型,以待推送图像的视觉特征和关联特征作为输入,以用户对待推送图像的偏好度作为输出,从而利用偏好度确定模型得到用户对待推送图像的偏好度。
94.步骤304,响应于确定偏好度符合预设条件,向用户对应的终端推送该待推送图像。
95.在一些情况下,待推送图像的目标视觉特征、文本特征都可以基于神经网络模型来实现,以及偏好度预测和推送预测等都可以基于神经网络模型来实现。具体地,可以通过采集用户的历史行为记录等提取训练数据,以训练相关的神经网络模型。各个不同的神经网络模型可以独立训练,也可以在训练过程中进行多模态数据融合和较差等以实现多任务训练,以提升各神经网络模型的训练效果。例如,可以先训练基于向量嵌入提取特征向量的神经网络模型,此时,提取的特征向量可以表示目标视觉特征,同时训练提取文本特征的神经网络模型,然后将这些模型作为预训练模型,联合训练图像推送预测模型或偏好度预测模型等等。
96.本公开的上述实施例提供的方法通过结合待推送图像的视觉特征、文本特征和属性特征三种不同模态的特征数据,以进行图像推送,一般地,图像所描述的对象的属性、用户属性、视觉特征(如图像中呈现的对象展示图等)、文案等是比较容易吸引用户的几个方面,因此,利用视觉特征、文本特征和属性特征三种不同模态的特征数据可以全方面的考虑图像推送场景中影响推送效果的各种因素,从而有助于提升图像推送的效果。
97.进一步参考图4,其示出了图像推送方法的再一个实施例的流程400。该图像推送方法的流程400,包括以下步骤:
98.步骤401,获取待推送图像的视觉特征。
99.步骤402,根据视觉特征,确定用户对待推送图像的偏好度。
100.步骤403,响应于确定偏好度符合预设条件,向用户对应的终端推送该待推送图像。
101.步骤404,获取用户针对待推送图像的操作信息。
102.在本实施例中,操作信息可以用于表示用户执行的操作。操作信息指示的操作可以指用户在接收到该待推送图像之后,执行的各种操作。例如,用户的操作可以包括:点击/
未点击、浏览/未浏览、收藏/未收藏、评论/未评论等等。
103.一般地,可以由用户对应的终端采集用户针对待推送图像的操作信息,然后从用户对象的终端获取用户针对待推送图像的操作信息。
104.步骤405,根据操作信息,构建知识图谱。
105.在本实施例中,知识图谱可以用于记录用户针对视觉特征的偏好信息。偏好信息可以表示用户的偏好。一般地,可以根据用户的操作信息了解用户对推送的图像的偏好,进而进行记录以构建知识图谱。知识图谱记录的内容具体可以根据实际的应用需求灵活设置。
106.作为示例,若用户点击了用于呈现某物品的待推送图像,则可以记录用户标识、物品标识、设计元素、设计元素的语义和设计意图。其中,设计意图可以指设计人员设计待推送图像时的设计意图。此时,知识图谱的结构可以如表1所示:
107.如表1所示,可以构建知识图谱来记录物品、用户、设计元素、设计语义、场景意图之间的对应关系。以饱和度作为示例,饱和度的语义具体可以包括低饱和、中饱和和高饱和,这三种饱和度的顺序变化可以对应场景意图从年轻到成熟的变化。因此,若根据用户的操作者信息,确定用户偏好低饱和的设计语义,则可以在知识图谱中进行记录,以表示用户喜欢年轻的设计风格。
108.需要说明的是,知识图谱的构建通常是一个不断迭代和沉淀的过程,因此,可以在实际应用中根据持续地图像推送结果不断地更新知识图谱。
109.表1
[0110][0111]
现有的基于投后调优的图像推送,由于无法对创意设计进行解析,使得每次的创意设计预测都无法沉淀可复用的知识。基于图像embedding的图像推送,由于图像embedding本身是高阶特征,通常是以向量的形式参与计算,使得无法了解筛选出的较佳的创意设计是哪些因素或特征贡献的,从而也无法根据筛选出的创意设计指导之后的创意设计。
[0112]
针对这些情况,本公开的上述实施例提供的方法利用设计文件解析或基于语义分割的解析和设计语义识别,可以实现对待推送图像的可解释的低阶设计特征的抽取,从而解决图像embedding化所带来的不可解释的问题,而且通过构建知识图谱可以根据每次的推送效果进行知识记录、沉淀和转化,进而可以利用构建的知识图谱辅助于后续针对用户的图像推送、图像搜索等各种应用场景。
[0113]
下面参见图5,图5是根据本实施例的图像推送方法的一个示意性的应用场景500。在图5的应用场景中,对于指定物品的每个设计模板,可以先基于设计文件解析和语义分割等算法确定对应的设计特征5011,并记录该设计模板与其对应的设计特征之间的对应关系
504。同时,可以利用卷积神经网络提取该设计模板的特征向量来作为目标视觉特征5012,从而得到由设计特征5011和目标视觉特征5012组成的视觉特征501。
[0114]
此外,可以基于对ocr和nlp等技术提取该设计模板对应的文本特征502,以及预先基于统计分析获取用户属性特征5031和物品属性特征5032组成的属性特征503。
[0115]
之后,可以将视觉特征501、文本特征502和属性特征503输入至预先训练的点击率预测模型505,得到该设计模板对应的点击率506。然后可以根据各设计模板分别对应的点击率,选择点击率较大的设计模板,并在设计模板中添加该设计模板对应的设计特征形成图像推送至用户。
[0116]
进一步参考图6,作为对上述各图所示方法的实现,本公开提供了图像推送装置的一个实施例,该装置实施例与图2所示的方法实施例相对应,该装置具体可以应用于各种电子设备中。
[0117]
如图6所示,本实施例提供的图像推送装置600包括视觉特征获取单元601、偏好度确定单元602和推送单元603。其中,视觉特征获取单元601被配置成获取待推送图像的视觉特征,其中,视觉特征包括设计特征和目标视觉特征,目标视觉特征利用向量嵌入得到;偏好度确定单元602被配置成根据视觉特征,确定用户对待推送图像的偏好度;推送单元603被配置成响应于确定偏好度符合预设条件,向用户对应的终端推送该待推送图像。
[0118]
在本实施例中,图像推送装置600中:视觉特征获取单元601、偏好度确定单元602和推送单元603的具体处理及其所带来的技术效果可分别参考图2对应实施例中的步骤201、步骤202和步骤203的相关说明,在此不再赘述。
[0119]
在本实施例的一些可选的实现方式中,设计特征通过如下步骤确定:解析待推送图像的设计元素;识别设计元素所表示的语义,得到识别结果,以及将得到的识别结果确定为设计特征。
[0120]
在本实施例的一些可选的实现方式中,设计特征包括以下至少一项:设计内容特征、设计表现特征。
[0121]
在本实施例的一些可选的实现方式中,设计内容特征通过如下步骤确定:基于语义分割解析待推送图像的设计内容元素;识别设计内容元素所表示的语义,得到识别结果,以及将得到的识别结果确定为设计内容特征。
[0122]
在本实施例的一些可选的实现方式中,设计表现特征通过如下步骤确定:解析待推送图像的设计文件,得到待推送图像的设计表现元素;识别设计表现元素所表示的语义,得到识别结果,以及将得到的识别结果确定为设计表现特征。
[0123]
在本实施例的一些可选的实现方式中,上述图像推送装置还包括:关联特征获取单元(图中未示出),被配置成获取待推送图像的关联特征,其中,关联特征包括以下至少一项:属性特征、文本特征,属性特征包括以下至少一项:用户的属性特征、待推送图像描述的对象的属性特征;以及偏好度确定单元602进一步被配置成根据视觉特征和关联特征,确定用户对待推送图像的偏好度。
[0124]
在本实施例的一些可选的实现方式中,上述图像推送装置还包括:操作信息获取单元(图中未示出),被配置成获取用户针对待推送图像的操作信息;构建单元,被配置成根据操作信息,构建知识图谱,其中,知识图谱用于记录用户针对视觉特征的偏好信息。
[0125]
本公开的上述实施例提供的装置,通过视觉特征获取单元获取待推送图像的视觉
特征,其中,视觉特征包括设计特征和目标视觉特征,目标视觉特征利用向量嵌入得到;偏好度确定单元根据视觉特征,确定用户对待推送图像的偏好度;推送单元响应于确定偏好度符合预设条件,向用户对应的终端推送该待推送图像,可以在利用图像的高阶特征的基础上,进一步结合图像的设计特征所表达的色系情感倾向、风格等创意设计语义进行偏好度预测,有助于提升图像推送结果的准确度,使得推送的图像在设计方面更匹配用户的需求。
[0126]
下面参考图7,其示出了适于用来实现本公开的实施例的电子设备(例如图1中的服务器)700的结构示意图。图7示出的服务器仅仅是一个示例,不应对本公开的实施例的功能和使用范围带来任何限制。
[0127]
如图7所示,电子设备700可以包括处理装置(例如中央处理器、图形处理器等)701,其可以根据存储在只读存储器(rom)702中的程序或者从存储装置708加载到随机访问存储器(ram)703中的程序而执行各种适当的动作和处理。在ram 703中,还存储有电子设备700操作所需的各种程序和数据。处理装置701、rom 702以及ram703通过总线704彼此相连。输入/输出(i/o)接口705也连接至总线704。
[0128]
通常,以下装置可以连接至i/o接口705:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置706;包括例如液晶显示器(lcd)、扬声器、振动器等的输出装置707;包括例如磁带、硬盘等的存储装置708;以及通信装置709。通信装置709可以允许电子设备700与其他设备进行无线或有线通信以交换数据。虽然图7示出了具有各种装置的电子设备700,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图7中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
[0129]
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置709从网络上被下载和安装,或者从存储装置708被安装,或者从rom 702被安装。在该计算机程序被处理装置701执行时,执行本公开的实施例的方法中限定的上述功能。
[0130]
需要说明的是,本公开的实施例所述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以
发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、rf(射频)等等,或者上述的任意合适的组合。
[0131]
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:获取待推送图像的视觉特征,其中,视觉特征包括设计特征和目标视觉特征,目标视觉特征利用向量嵌入得到得到的特征向量;根据视觉特征,确定用户对待推送图像的偏好度;响应于确定偏好度符合预设条件,向用户对应的终端推送该待推送图像。
[0132]
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的实施例的操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如java、smalltalk、c ,还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(lan)或广域网(wan)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
[0133]
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
[0134]
描述于本公开的实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括视觉特征获取单元、偏好度确定单元和推送单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,视觉特征获取单元还可以被描述为“获取待推送图像的视觉特征的单元,其中,视觉特征包括设计特征和目标视觉特征,目标视觉特征利用向量嵌入得到”。
[0135]
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开的实施例中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献