一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

脸部数据的处理方法、装置、存储介质及计算机设备与流程

2022-04-30 02:03:47 来源:中国专利 TAG:


1.本发明涉及计算机领域,具体而言,涉及一种脸部数据的处理方法、装置、存储介质及计算机设备。


背景技术:

2.目前内容生成成为炙手可热的话题。在生成虚拟形象脸部过程中,普遍采用的方式是基于人脸线性基计算人脸身份分量,通过差值方式获得人脸表情部分,再借助深度学习模型驱动虚拟形象进行交互。但这样生成的表情部分可能存在不自然或有较大偏差的情况。例如,目前的捏脸系统通常通过工作人员(例如,美术设计师)制作捏脸混合形状模型和表情混合形状模型。由于用户捏脸自由度较高,在用户捏脸后,表情混合形状模型叠加生成的表情会有瑕疵,并不自然。特别在捏脸幅度较大时问题明显。
3.针对上述的问题,目前尚未提出有效的解决方案。


技术实现要素:

4.本发明实施例提供了一种脸部数据的处理方法、装置、存储介质及计算机设备,以至少解决相关技术中在对虚拟形象进行脸部变换时,存在表情不自然甚至表情错误的技术问题。
5.根据本发明实施例的一个方面,提供了一种脸部数据的处理方法,包括:将脸部进行区域划分,得到多个分区域;接收到脸型输入参数,根据所述脸型输入参数分别将所述多个分区域的初始网格数据变换成目标网格数据,其中,所述多个分区域的目标网格数据形成所述脸部的目标脸型;根据所述初始网格数据到所述目标网格数据的变换,分别对所述多个分区域的初始表情数据进行调整生成目标表情数据,其中,所述多个分区域的目标表情数据形成所述脸部的目标表情。
6.根据本发明实施例的另一个方面,提供了一种脸部数据的处理方法,包括:在交互界面上显示脸部的基础表情,其中,所述基础表情为预定的整套表情中的一个表情;如果所述交互界面的任意一个区域内检测到输入脸型输入参数的操作,触发将脸部进行区域划分,得到多个分区域,并根据所述脸型输入参数分别将所述多个分区域的初始网格数据变换成目标网格数据,其中,所述多个分区域的目标网格数据形成所述脸部的目标脸型;在所述交互界面上显示目标表情,其中,所述目标表情根据目标表情数据形成,所述目标表情数据根据所述初始网格数据到所述目标网格数据的变换,分别对所述基础表情中所述多个分区域的初始表情数据进行调整生成。
7.根据本发明实施例的一个方面,提供了一种脸部数据的处理方法,包括:在交互界面上显示脸部的基础表情,其中,所述基础表情为预定的整套表情中的一个表情;所述交互界面内感应到脸型输入参数的操作;响应所述操作,执行将脸部进行区域划分,得到多个分区域;在所述交互界面上输出选择页面,通过所述选择页面提供至少一个脸型输入参数选项,并根据所述脸型输入参数分别将所述多个分区域的初始网格数据变换成目标网格数
据,其中,所述多个分区域的目标网格数据形成所述脸部的目标脸型,不同的脸型输入参数用于表征不同的表情;在所述交互界面上显示目标表情,其中,所述目标表情根据目标表情数据形成,所述目标表情数据根据所述初始网格数据到所述目标网格数据的变换,分别对所述基础表情中所述多个分区域的初始表情数据进行调整生成。
8.根据本发明实施例的另一个方面,提供了一种脸部数据的处理方法,包括:前端客户端接收到脸部的基础表情,其中,所述基础表情为预定的整套表情中的一个表情;所述前端客户端将所述基础表情传输到后台服务器;所述前端客户端接收所述后台服务器返回的多个分区域,其中,所述多个分区域的为将脸部进行区域划分得到的;所述前端客户端接收到输入脸型输入参数的操作,并根据所述脸型输入参数分别将所述多个分区域的初始网格数据变换成目标网格数据,以及根据所述初始网格数据到所述目标网格数据的变换,分别对所述基础表情中所述多个分区域的初始表情数据进行调整生成目标表情数据,其中,所述多个分区域的目标网格数据形成所述脸部的目标脸型,所述多个分区域的目标表情数据形成所述脸部的目标表情。
9.根据本发明实施例的一个方面,提供了一种脸部数据的处理装置,包括:第一划分模块,用于将脸部进行区域划分,得到多个分区域;第一变换模块,用于接收到脸型输入参数,根据所述脸型输入参数分别将所述多个分区域的初始网格数据变换成目标网格数据,其中,所述多个分区域的目标网格数据形成所述脸部的目标脸型;第一调整模块,用于根据所述初始网格数据到所述目标网格数据的变换,分别对所述多个分区域的初始表情数据进行调整生成目标表情数据,其中,所述多个分区域的目标表情数据形成所述脸部的目标表情。
10.根据本发明实施例的另一个方面,提供了一种脸部数据的处理装置,包括:第一显示模块,用于在交互界面上显示脸部的基础表情,其中,所述基础表情为预定的整套表情中的一个表情;第二变换模块,用于如果所述交互界面的任意一个区域内检测到输入脸型输入参数的操作,触发将脸部进行区域划分,得到多个分区域,并根据所述脸型输入参数分别将所述多个分区域的初始网格数据变换成目标网格数据,其中,所述多个分区域的目标网格数据形成所述脸部的目标脸型;第二显示模块,用于在所述交互界面上显示目标表情,其中,所述目标表情根据目标表情数据形成,所述目标表情数据根据所述初始网格数据到所述目标网格数据的变换,分别对所述基础表情中所述多个分区域的初始表情数据进行调整生成。
11.根据本发明实施例的又一个方面,提供了一种脸部数据的处理装置,包括:第三显示模块,用于在交互界面上显示脸部的基础表情,其中,所述基础表情为预定的整套表情中的一个表情;感应模块,用于在所述交互界面内感应到脸型输入参数的操作;第二划分模块,用于响应所述操作,执行将脸部进行区域划分,得到多个分区域;输出模块,用于在所述交互界面上输出选择页面,通过所述选择页面提供至少一个脸型输入参数选项,并根据所述脸型输入参数分别将所述多个分区域的初始网格数据变换成目标网格数据,其中,所述多个分区域的目标网格数据形成所述脸部的目标脸型,不同的脸型输入参数用于表征不同的表情;第四显示模块,用于在所述交互界面上显示目标表情,其中,所述目标表情根据目标表情数据形成,所述目标表情数据根据所述初始网格数据到所述目标网格数据的变换,分别对所述基础表情中所述多个分区域的初始表情数据进行调整生成。
12.根据本发明实施例的再一个方面,提供了一种脸部数据的处理装置,包括:第一接收模块,用于前端客户端接收到脸部的基础表情,其中,所述基础表情为预定的整套表情中的一个表情;传输模块,用于所述前端客户端将所述基础表情传输到后台服务器;第二接收模块,用于所述前端客户端接收所述后台服务器返回的多个分区域,其中,所述多个分区域的为将脸部进行区域划分得到的;第二调整模块,用于所述前端客户端接收到输入脸型输入参数的操作,并根据所述脸型输入参数分别将所述多个分区域的初始网格数据变换成目标网格数据,以及根据所述初始网格数据到所述目标网格数据的变换,分别对所述基础表情中所述多个分区域的初始表情数据进行调整生成目标表情数据,其中,所述多个分区域的目标网格数据形成所述脸部的目标脸型,所述多个分区域的目标表情数据形成所述脸部的目标表情。
13.根据本发明实施例的一个方面,提供了一种存储介质,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行上述任意一项所述的脸部数据的处理方法。
14.根据本发明实施例的另一个方面,提供了一种计算机设备,包括:存储器和处理器,所述存储器存储有计算机程序;所述处理器,用于执行所述存储器中存储的计算机程序,所述计算机程序运行时使得所述处理器执行上述任意一项所述的脸部数据的处理方法。
15.在本发明实施例中,采用对脸部进行区域分解,得到多个分区域的方式,通过在接收到脸型输入参数时,分别将所述多个分区域的初始网格数据变换成目标网格数据,以及根据所述初始网格数据到所述目标网格数据的变换,分别对所述多个分区域的初始表情数据进行调整生成目标表情数据,达到了对脸部进行分区域网格变换,以及分区域表情调整的目的,从而实现了对脸部进行变化时,能够生成更加自然的表情的技术效果,进而解决了相关技术中在对虚拟形象进行脸部变换时,存在表情不自然甚至表情错误的技术问题。
附图说明
16.此处所说明的附图用来提供对本发明的进一步理解,构成本技术的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
17.图1示出了一种用于实现脸部数据的处理方法的计算机终端的硬件结构框图;
18.图2是根据本发明实施例1的脸部数据的处理方法一的流程图;
19.图3是根据本发明实施例1的脸部数据的处理方法二的流程图;
20.图4是根据本发明实施例1的脸部数据的处理方法三的流程图;
21.图5是根据本发明实施例1的脸部数据的处理方法四的流程图;
22.图6是根据本发明可选实施方式的脸部数据的处理方法的示意图;
23.图7是根据本发明实施例提供的脸部数据的处理装置一的结构框图;
24.图8是根据本发明实施例提供的脸部数据的处理装置二的结构框图;
25.图9是根据本发明实施例提供的脸部数据的处理装置三的结构框图;
26.图10是根据本发明实施例提供的脸部数据的处理装置四的结构框图;
27.图11是根据本发明实施例的一种计算机终端的结构框图。
具体实施方式
28.为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
29.需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
30.首先,在对本技术实施例进行描述的过程中出现的部分名词或术语适用于如下解释:
31.捏脸系统:用户通过调整不同参数值,实现调整人脸形状的目的。比如,调整鼻梁高度参数,则虚拟形象的鼻梁会相应变高或者变低。用户调整人脸参数后,通过系统中的人脸混合模型或者骨骼系统调整模型顶点位置,达到调整人脸形状的效果。
32.人脸混合模型:这一项动画技术普遍应用在maya\blender等3d软件中。首先制作中性人脸(不带表情的平均脸模型),并制作不同表情在中性脸上的变形形状,形成表情混合模型。制作人脸动画时,通过软件指定每一帧动画不同表情权重值,来实现人脸表情动画。
33.实施例1
34.根据本发明实施例,还提供了一种脸部数据的处理方法的方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
35.本技术实施例1所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。图1示出了一种用于实现脸部数据的处理方法的计算机终端(或移动设备)的硬件结构框图。如图1所示,计算机终端10(或移动设备10)可以包括一个或多个(图中采用102a、102b,
……
,102n来示出)处理器102(处理器102可以包括但不限于微处理器mcu或可编程逻辑器件fpga等的处理装置)、用于存储数据的存储器104、以及用于通信功能的传输装置。除此以外,还可以包括:显示器、输入/输出接口(i/o接口)、通用串行总线(usb)端口(可以作为bus总线的端口中的一个端口被包括)、网络接口、电源和/或相机。本领域普通技术人员可以理解,图1所示的结构仅为示意,其并不对上述电子装置的结构造成限定。例如,计算机终端10还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。
36.应当注意到的是上述一个或多个处理器102和/或其他数据处理电路在本文中通常可以被称为“数据处理电路”。该数据处理电路可以全部或部分的体现为软件、硬件、固件
或其他任意组合。此外,数据处理电路可为单个独立的处理模块,或全部或部分的结合到计算机终端10(或移动设备)中的其他元件中的任意一个内。如本技术实施例中所涉及到的,该数据处理电路作为一种处理器控制(例如与接口连接的可变电阻终端路径的选择)。
37.存储器104可用于存储应用软件的软件程序以及模块,如本发明实施例中的脸部数据的处理方法对应的程序指令/数据存储装置,处理器102通过运行存储在存储器104内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的应用程序的漏洞检测方法。存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器104可进一步包括相对于处理器102远程设置的存储器,这些远程存储器可以通过网络连接至计算机终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
38.传输装置用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端10的通信供应商提供的无线网络。在一个实例中,传输装置包括一个网络适配器(network interface controller,nic),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输装置可以为射频(radio frequency,rf)模块,其用于通过无线方式与互联网进行通讯。
39.显示器可以例如触摸屏式的液晶显示器(lcd),该液晶显示器可使得用户能够与计算机终端10(或移动设备)的用户界面进行交互。
40.此处需要说明的是,在一些可选实施例中,上述图1所示的计算机设备(或移动设备)可以包括硬件元件(包括电路)、软件元件(包括存储在计算机可读介质上的计算机代码)、或硬件元件和软件元件两者的结合。应当指出的是,图1仅为特定具体实例的一个实例,并且旨在示出可存在于上述计算机设备(或移动设备)中的部件的类型。
41.在上述运行环境下,本技术提供了如图2所示的脸部数据的处理方法。图2是根据本发明实施例1的脸部数据的处理方法一的流程图,如图2所示,该脸部数据的处理方法包括如下步骤:
42.步骤s202,将脸部进行区域划分,得到多个分区域;
43.步骤s204,接收到脸型输入参数,根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型;
44.步骤s206,根据初始网格数据到目标网格数据的变换,分别对多个分区域的初始表情数据进行调整生成目标表情数据,其中,多个分区域的目标表情数据形成脸部的目标表情。
45.通过上述处理,采用对脸部进行区域分解,得到多个分区域的方式,通过在接收到脸型输入参数时,分别将多个分区域的初始网格数据变换成目标网格数据,以及根据初始网格数据到目标网格数据的变换,分别对多个分区域的初始表情数据进行调整生成目标表情数据,达到了对脸部进行分区域网格变换,以及分区域表情调整的目的,从而实现了对脸部进行变化时,能够生成更加自然的表情的技术效果,进而解决了相关技术中在对虚拟形象进行脸部变换时,存在表情不自然甚至表情错误的技术问题。
46.作为一种可选的实施例,将脸部进行区域划分,得到多个分区域时,可以采用以下方式:获取脸部的结构特征,其中,脸部的结构特征采用脸部的网格上对应的特征点表征;根据脸部的结构特征,构建每个分区域的特征点集合;基于每个分区域的特征点集合,分别
得到多个分区域。因此,对脸部进行区域划分时,可以采用多种依据,例如,可以将脸部的五官作为划分依据,也可以将脸部各个部分的特点(例如,是否凸出等)作为划分依据。以脸部的五官作为划分依据为例,获取脸部的五官结构,根据该五官结构,分别构建左眼、右眼、鼻子、嘴部和脸部的特征点集合,以及分别得到左眼分区域,右眼分区域,鼻子分区域,嘴部分区域和脸部分区域。
47.作为一种可选的实施例,脸部通过网格的方式表征脸部的立体性。多个分区域的初始网格数据可以形成脸部的平均脸,多个分区域的初始表情数据形成脸部的基础表情,基础表情为预定的整套表情中的一个表情。其中,脸部的初始状态可以认为是平均脸上附有该基础表情。需要说明的是,上述基础表情可以是一种基于网格建立的3d模型,该模型中包括的初始表情数据可以是用于对该分区域的表情进行表征的数据。例如,可以是该分区域内所包括的特征点的参数的取值,其中,该参数也可以包括多种,例如,大小,位置和旋转度等。另外,该模型通过表情数据参数来体现表情,并且同一表情数据参数可以对应一个参数取值范围,或者参数的取值。例如,表情数据可以是大小,位置和旋转度等,而针对大小比如可以分为三档:一档最大,二档其次,三档最小等。
48.作为一种可选的实施例,在基于每个分区域的特征点集合,分别得到多个分区域时,可以采用多种方式,例如,可以先对每个分区域内的特征点集合分别进行网格正则化处理,得到正则化处理后的每个分区域的特征点集合;之后,将正则化处理后的每个分区域的特征点集合进行主成分分析(principle component analysis,简称为pca)处理,分别得到多个分区域。通过对特征点集合进行网格正则化处理,能够在一定程度上统一每个分区域的脸部网格结构,进而实现分区域的表情对应表情数据的准确性。
49.作为一种可选的实施例,接收到脸型输入参数,根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,包括:接收到对脸部进行捏脸操作的脸型输入参数;根据脸型输入参数分别将多个分区域的初始网格数据生成捏脸后对应的目标网格数据。在本可选实施例中,脸型输入参数是用于实现捏脸操作的,因而根据该脸型输入参数生成的目标网格数据是捏脸后对应的目标网格数据。
50.作为一种可选的实施例,在根据脸型输入参数分别将多个分区域的初始网格数据生成捏脸后对应的目标网格数据之后,还包括:对捏脸后对应的目标网格数据进行优化,其中,对捏脸后对应的目标网格数据进行优化可以采用多种方式,例如,可以采用以下方式实现:将捏脸后的每个分区域的目标网格数据与捏脸前的每个分区域的初始网格数据进行比对,获取每个分区域的变化数据,其中,变化数据包括如下至少之一:每个分区域的旋转数据、平移数据和缩放数据;基于每个分区域的变化数据对每个分区域的捏脸后对应的目标网格数据进行优化,生成优化后的目标网格数据。通过每个分区域的旋转数据、平移数据和缩放数据分别对每个分区域的捏脸后的目标网格数据进行优化,得到优化后的目标网格数据。
51.其中,上述旋转数据可以通过旋转矩阵来获得,平移数据可以通过平移矩阵来获得,缩放数据可以通过缩放矩阵来获得等。基于旋转矩阵,平移矩阵和缩放矩阵进行优化方程计算,得到每个分区域的旋转数据,平移数据和缩放数据,其中,旋转矩阵由发生捏脸后的每个分区域中的旋转结果生成,平移矩阵由发生捏脸后的每个分区域中的平移结果生成,缩放矩阵由发生捏脸后的每个分区域中的缩放结果生成。
52.作为一种可选的实施例,基于每个分区域的变化数据对每个分区域的捏脸后对应的目标网格数据进行优化,生成优化后的目标网格数据时,由于对脸部进行捏脸操作,脸部划分后每个分区域的变化幅度可能是不同的,为了对应不同的变化幅度可以对每个分区域设置不同的权重。例如,可以分别确定每个分区域的变化权重,其中,变化权重用于表征对应分区域的变换幅度;根据变化权重,以及每个分区域的变化数据对每个分区域的捏脸后对应的目标网格数据进行优化,生成优化后的目标网格数据。即针对不同分区域可以设置不同的变化权重,例如,在动作变化幅度较大的分区域(例如,脸部的某个部位),该变化权重可以设置较高。采用上述处理,可以给捏脸操作时变化幅度大的分区域设置较大的变化权重,变换幅度小的分区域设置较小的变换权重,实现区别化地对各个分区域进行处理。
53.作为一种可选的实施例,根据初始网格数据到目标网格数据的变换,分别对多个分区域的初始表情数据进行调整生成目标表情数据,可以包括:根据初始网格数据到目标网格数据的变换,构造表情调整的能量方程,其中,能量方程包括多个用于依据网格数据变换适应调整表情的能量项;根据能量方程,分别对多个分区域的初始表情数据进行调整生成目标表情数据。其中,能量项可以包括多种,例如,能量项可以包括:用于保持每个分区域中部分特征点对在网格变换前后距离不变的能量项,用于确定每个分区域中的特征点在旋转缩放变换后位置的能量项。通过上述处理,在对脸部进行捏脸操作后,可以依据捏脸后的效果,对捏脸的表情表现尺度进行适应地调整,使得捏脸后的表情对应于捏脸后的脸部。另外,通过增加一些能量项来实现解决表情随捏脸变化前后,表情幅度也需要优化的问题。
54.图3是根据本发明实施例1的脸部数据的处理方法二的流程图,如图3所示,该脸部数据的处理方法二包括如下步骤:
55.步骤s302,在交互界面上显示脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;
56.步骤s304,如果交互界面的任意一个区域内检测到输入脸型输入参数的操作,触发将脸部进行区域划分,得到多个分区域,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型;
57.步骤s306,在交互界面上显示目标表情,其中,目标表情根据目标表情数据形成,目标表情数据根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成。
58.通过上述处理,采用交互界面的任意一个区域内检测到输入脸型输入参数的操作,将脸部进行区域划分,得到多个分区域方式,通过在交互界面上显示目标表情,达到了对脸部进行分区域网格变换,并基于多个分区域显示目标表情的目的,从而实现了对脸部进行变化时,能够在交互界面上生成更加自然的表情的技术效果,进而解决了相关技术中在对虚拟形象进行脸部变换时,存在表情不自然甚至表情错误的技术问题。
59.图4是根据本发明实施例1的脸部数据的处理方法三的流程图,如图4所示,该脸部数据的处理方法三包括如下步骤:
60.步骤s402,在交互界面上显示脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;
61.步骤s404,交互界面内感应到脸型输入参数的操作;
62.步骤s406,响应操作,执行将脸部进行区域划分,得到多个分区域;
63.步骤s408,在交互界面上输出选择页面,通过选择页面提供至少一个脸型输入参数选项,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型,不同的脸型输入参数用于表征不同的表情;
64.步骤s410,在交互界面上显示目标表情,其中,目标表情根据目标表情数据形成,目标表情数据根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成。
65.通过上述处理,采用交互界面内感应到脸型输入参数的操作,对脸部进行区域划分,得到多个分区域的方式,通过在交互界面上提供至少一个脸型输入参数选项,以及显示目标表情,达到了对脸部进行分区域网格变换,并基于多个分区域显示目标表情的目的,从而实现了对脸部进行变化时,能够在交互界面上生成更加自然的表情的技术效果,进而解决了相关技术中在对虚拟形象进行脸部变换时,存在表情不自然甚至表情错误的技术问题。
66.图5是根据本发明实施例1的脸部数据的处理方法四的流程图,如图5所示,该脸部数据的处理方法四包括如下步骤:
67.步骤s502,前端客户端接收到脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;
68.步骤s504,前端客户端将基础表情传输到后台服务器;
69.步骤s506,前端客户端接收后台服务器返回的多个分区域,其中,多个分区域的为将脸部进行区域划分得到的;
70.步骤s508,前端客户端接收到输入脸型输入参数的操作,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,以及根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成目标表情数据,其中,多个分区域的目标网格数据形成脸部的目标脸型,多个分区域的目标表情数据形成脸部的目标表情。
71.通过上述处理,采用前端客户端与后台服务器交互方式,通过前端客户端接收到输入脸型输入参数的操作,对后台服务器对脸部进行区域划分得到多个分区域,达到了对脸部进行分区域网格变换,并基于多个分区域生成与目标表情对应的目标表情数据的目的,从而实现了通过前端客户端与后台服务器的交互,完成了对脸部进行变化时,能够表情更加自然的技术效果,进而解决了相关技术中在对虚拟形象进行脸部变换时,存在表情不自然甚至表情错误的技术问题。
72.在相关技术中,可能会使用基于人脸混合模型的捏脸系统,在捏脸后需要根据捏脸程度重新生成表情,才能适应不同人物脸部变化,在后续表情动画中呈现的效果才会比较自然。为了减少工作人员的工作量,在有限的输入情况下(只有一组基础表情和中性脸),通过算法生成不同脸型对应的表情,达到的结果预期也仅仅是:在一定限度内保持生成表情自然,在极限情况下保证不出现严重表情动画错误。
73.因此,使用人工方式调整人脸捏脸混合模型和表情模型;通过工作人员手工调整捏脸混合模型数值和表情模型数值,控制捏脸混合模型权重上下限,使得捏脸后,表情在一定范围内可控。缺点是:耗费大量人力,需要有经验的工作人员调整以月为单位起的时间。
生成结果复用性不强,基础模型改变后需要对每个表情进行重新调整。
74.而在相关技术中,也有使用基于网格变形的技术生成基础表情模型,之后基于deformation transfer for triangle meshes的方式生成捏脸后表情,但是使用此方式,只是将基础表情变化的幅度迁移到捏脸模型上,无法根据捏脸效果,调整表情的幅度。此外算法在整张脸部顶点进行计算,无法兼顾人脸不同五官对于动画表情精细化调整的需求。
75.在本可选实施方式中,规避了高成本的工作人员的反复建模,仅需要建模一套基础表情模型,有效地简化了工作人员的工作量,并能生成较自然的表情,而且,带来了更好的用户体验。
76.图6是根据本发明可选实施方式的脸部数据的处理方法的示意图,如图6所示,该方法包括以下处理:
77.1、预先制作的基础表情模型作为算法输入,基础平均脸为m(分割出的区域表示为m
seg
);
78.2、根据制作模型拓扑的需求以及不同表情脸部顶点变化幅度的差异,将人脸区域划分为5个区域(如图6中所示);并根据人脸模型构建结构特征选定网格上对应特征点;按照分区域构建人脸表情模型,即将不同表情对应区域模型如图所示进行分隔,将1-5组网格正则化后,分别进行主成分分析(principle component analysis,简称为pca)处理,构成表情数据参数;需要说明的是,此处所指的网格正则化是指将网格mesh的所有顶点计算中心位置;随后将整个mesh平移,使得中心位置移动到坐标轴原点。pca,即主成分分析法,是特征降维的最常用手段。pca能从冗余特征中提取主要成分,在不太损失模型质量的情况下,提升了模型训练速度。
79.3、用户进行捏脸交互,生成捏脸后模型m_deform(md_seg);
80.4、根据m和m_deform进行计算,分区域优化:
81.4.1获得5个区域相对于m的旋转矩阵r和平移矩阵t;通过求解优化方程计算每个区域的旋转和平移:
[0082][0083]
其中,wv表示针对不同顶点v的预设权重,在动作变化幅度较大的部位,顶点权重较高;rp表示对于区域p在空间中的旋转矩阵,vdeform表示m_deform模型的顶点;tp表示第p个部分的平移向量;v表示基础平均脸区域p中的顶点位置。
[0084]
4.2在计算好4.1数据后,将m_seg经过rt进行旋转,通过bounding box和md_seg计算放缩矩阵s;
[0085]
mesh deform部分参考deformation transfer for triangle meshes:
[0086]
在平均脸拓扑m上,对于三角形面片fi(v1,v2,v3),可以计算得到:
[0087][0088]
则对于平均脸表情ai(i=1

n)和生成捏脸表情bi(i=1

n);假设在平均脸拓扑m上总共有nf个三角面片,对于从m变换到m
deform
,第i个三角面片fi(v1,v2,v3)产生了如下的空间变换和使得fi(v1,v2,v3)面片变换到位置则
[0089]
v=[v
2-v1,v
3-v1,v
4-v1]
[0090][0091][0092]
与此类似,对于从表情ai变换到对应捏脸后表情bi,第i个三角面片的旋转和平移矩阵表示为和需要优化以下能量方程:
[0093][0094]
且满足约束:
[0095][0096]
其中k表示共享顶点vi的所有面的集合;
[0097][0098]
其中(ci,di)为一组点,在程序中限定这组点对在变型后距离等比例变换;
[0099]
在4.1计算的分割区域p的旋转平移矩阵r
p
和t
p
后,在平均脸表情ai上的分割区域p中包含的特征点为(l1…
l
p
),则对应生成结果bi上的特征点位置为
[0100]
由4.1求解的scale矩阵可以表示为
[0101][0102]

[0103][0104]
则根据平均脸表情ai(i=1

n)生成捏脸后对应表情bi(i=1

n)需要求解以下能量方程:
[0105]edf
=w
stest
w
pep
waea[0106]
其中,e
st
,e
p
和ea表示如前,w
st
,w
p
和wa表示对应能量项的权重。其中e
p
的作用是保持部分点对在网格变换前后距离不变的能量项;ea表示在网格每个区域m_seg的局部坐标系中,用于确定旋转放缩之后特征点的目标位置的能量项;
[0107]
通过增加ep项和ea项,能够解决表情随捏脸变化前后,表情幅度也需要优化的问题。
[0108]
5、通过上述优化过程得到生成表情数据。
[0109]
通过上述可选实施方式,在相关技术中,使用人工方式调整人脸捏脸混合模型和表情模型主要达到的目的就是防止捏脸后生成表情不自然;通过本可选实施方式,能够在捏脸后重新生成表情,替代人工进行调整的步骤,减少耗时。
[0110]
另外,在相关技术中,使用基于网格变形的技术生成基础表情模型:基于deformation transfer for triangle meshes,在生成表情时,并不会考虑到捏脸后表情
是否要成比例变化,比如捏大眼睛后,闭眼表情无法闭合;捏小眼睛后,闭眼穿模;通过本可选实施方式,通过增加ep和ea能量项能够避免上述情况。此外由于考虑到分区域进行建模,在脸部较大程度捏脸时,能够生成更加自然的表情,克服放缩和旋转带来的计算误差。
[0111]
因此,在本可选实施方式中,构建基于分区域的人脸混合形状模型,考虑到人脸不同区域运动特点增加权重项,能够特显局部特征;另外,在网格优化过程中增加额外能量项,能够更好的处理人捏脸带来的旋转和放缩尺度上的差异,提高生成人脸表情模型效果。
[0112]
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
[0113]
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例的方法。
[0114]
实施例2
[0115]
根据本发明实施例,还提供了一种用于实施上述脸部数据的处理方法一的装置,图7是根据本发明实施例提供的脸部数据的处理装置一的结构框图,如图7所示,该装置包括:第一划分模块72,第一变换模块74和第一调整模块76,下面对该装置进行说明。
[0116]
第一划分模块72,用于将脸部进行区域划分,得到多个分区域;第一变换模块74,连接至上述第一划分模块72,用于接收到脸型输入参数,根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型;第一调整模块76,连接至上述第一变换模块74,用于根据初始网格数据到目标网格数据的变换,分别对多个分区域的初始表情数据进行调整生成目标表情数据,其中,多个分区域的目标表情数据形成脸部的目标表情。
[0117]
此处需要说明的是,上述第一划分模块72,第一变换模块74和第一调整模块76对应于实施例1中的步骤s202至步骤s206,上述模块与对应的步骤所实现的实例和应用场景相同,但不限于上述实施例1所公开的内容。需要说明的是,上述模块作为装置的一部分可以运行在实施例1提供的计算机终端10中。
[0118]
根据本发明实施例,还提供了一种用于实施上述脸部数据的处理方法二的装置,图8是根据本发明实施例提供的脸部数据的处理装置二的结构框图,如图8所示,该装置包括:第一显示模块82,第二变换模块84和第二显示模块86,下面对该装置进行说明。
[0119]
第一显示模块82,用于在交互界面上显示脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;第二变换模块84,连接至上述第一显示模块82,用于如果交互界面的任意一个区域内检测到输入脸型输入参数的操作,触发将脸部进行区域划分,得到多个分区域,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型;第二显示模块86,连接至上述第二
变换模块84,用于在交互界面上显示目标表情,其中,目标表情根据目标表情数据形成,目标表情数据根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成。
[0120]
此处需要说明的是,上述第一显示模块82,第二变换模块84和第二显示模块86对应于实施例1中的步骤s302至步骤s306,上述模块与对应的步骤所实现的实例和应用场景相同,但不限于上述实施例1所公开的内容。需要说明的是,上述模块作为装置的一部分可以运行在实施例1提供的计算机终端10中。
[0121]
根据本发明实施例,还提供了一种用于实施上述脸部数据的处理方法三的装置,图9是根据本发明实施例提供的脸部数据的处理装置三的结构框图,如图9所示,该装置包括:第三显示模块92,感应模块94,第二划分模块96,输出模块98和第四显示模块910,下面对该装置进行说明。
[0122]
第三显示模块92,用于在交互界面上显示脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;感应模块94,连接至上述第三显示模块92,用于在交互界面内感应到脸型输入参数的操作;第四生成模块96,连接至上述感应模块94,用于响应该操作,执行将脸部进行区域划分,得到多个分区域;输出模块98,连接至上述第二划分模块96,用于在交互界面上输出选择页面,通过选择页面提供至少一个脸型输入参数选项,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型,不同的脸型输入参数用于表征不同的表情;第四显示模块910,连接至上述输出模块98,用于在交互界面上显示目标表情,其中,目标表情根据目标表情数据形成,目标表情数据根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成。
[0123]
此处需要说明的是,上述第三显示模块92,感应模块94,第二划分模块96,输出模块98和第四显示模块910对应于实施例1中的步骤s402至步骤s410,上述模块与对应的步骤所实现的实例和应用场景相同,但不限于上述实施例1所公开的内容。需要说明的是,上述模块作为装置的一部分可以运行在实施例1提供的计算机终端10中。
[0124]
根据本发明实施例,还提供了一种用于实施上述脸部数据的处理方法四的装置,图10是根据本发明实施例提供的脸部数据的处理装置四的结构框图,如图10所示,该装置包括:第一接收模块102,传输模块104,第二接收模块106和第二调整模块108,下面对该装置进行说明。
[0125]
第一接收模块102,用于前端客户端接收到脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;传输模块104,连接至上述第一接收模块102,用于前端客户端将基础表情传输到后台服务器;第二接收模块106,连接至上述传输模块104,用于前端客户端接收后台服务器返回的多个分区域,其中,多个分区域的为将脸部进行区域划分得到的;第二调整模块108,连接至上述第二接收模块106,用于前端客户端接收到输入脸型输入参数的操作,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,以及根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成目标表情数据,其中,多个分区域的目标网格数据形成脸部的目标脸型,多个分区域的目标表情数据形成脸部的目标表情。
[0126]
此处需要说明的是,上述第一接收模块102,传输模块104,第二接收模块106和第
二调整模块108对应于实施例1中的步骤s502至步骤s508,上述模块与对应的步骤所实现的实例和应用场景相同,但不限于上述实施例1所公开的内容。需要说明的是,上述模块作为装置的一部分可以运行在实施例1提供的计算机终端10中。
[0127]
实施例3
[0128]
本发明的实施例可以提供一种计算机终端(设备),该计算机终端可以是计算机终端群中的任意一个计算机终端设备。可选地,在本实施例中,上述计算机终端也可以替换为移动终端等终端设备。
[0129]
可选地,在本实施例中,上述计算机终端可以位于计算机网络的多个网络设备中的至少一个网络设备。
[0130]
在本实施例中,上述计算机终端可以执行应用程序的脸部数据的处理方法中以下步骤的程序代码:将脸部进行区域划分,得到多个分区域;接收到脸型输入参数,根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型;根据初始网格数据到目标网格数据的变换,分别对多个分区域的初始表情数据进行调整生成目标表情数据,其中,多个分区域的目标表情数据形成脸部的目标表情。
[0131]
可选地,图11是根据本发明实施例的一种计算机终端的结构框图。如图11所示,该计算机终端可以包括:一个或多个(图中仅示出一个)处理器112、存储器114等。
[0132]
其中,存储器可用于存储软件程序以及模块,如本发明实施例中的脸部数据的处理方法和装置对应的程序指令/模块,处理器通过运行存储在存储器内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的脸部数据的处理方法。存储器可包括高速随机存储器,还可以包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器可进一步包括相对于处理器远程设置的存储器,这些远程存储器可以通过网络连接至计算机终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
[0133]
处理器可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:将脸部进行区域划分,得到多个分区域;接收到脸型输入参数,根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型;根据初始网格数据到目标网格数据的变换,分别对多个分区域的初始表情数据进行调整生成目标表情数据,其中,多个分区域的目标表情数据形成脸部的目标表情。
[0134]
可选的,上述处理器还可以执行如下步骤的程序代码:将脸部进行区域划分,得到多个分区域,包括:获取脸部的结构特征,其中,脸部的结构特征采用脸部的网格上对应的特征点表征;根据脸部的结构特征,构建每个分区域的特征点集合;基于每个分区域的特征点集合,分别得到多个分区域。
[0135]
可选的,上述处理器还可以执行如下步骤的程序代码:多个分区域的初始网格数据形成脸部的平均脸,多个分区域的初始表情数据形成脸部的基础表情,基础表情为预定的整套表情中的一个表情。
[0136]
可选的,上述处理器还可以执行如下步骤的程序代码:基于每个分区域的特征点集合,分别得到多个分区域,包括:对每个分区域内的特征点集合分别进行网格正则化处理,得到正则化处理后的每个分区域的特征点集合;将正则化处理后的每个分区域的特征
点集合进行主成分分析处理,分别得到多个分区域。
[0137]
可选的,上述处理器还可以执行如下步骤的程序代码:接收到脸型输入参数,根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,包括:接收到对脸部进行捏脸操作的脸型输入参数;根据脸型输入参数分别将多个分区域的初始网格数据生成捏脸后对应的目标网格数据。
[0138]
可选的,上述处理器还可以执行如下步骤的程序代码:在根据脸型输入参数分别将多个分区域的初始网格数据生成捏脸后对应的目标网格数据之后,还包括:对捏脸后对应的目标网格数据进行优化,其中,对捏脸后对应的目标网格数据进行优化包括:将捏脸后的每个分区域的目标网格数据与捏脸前的每个分区域的初始网格数据进行比对,获取每个分区域的变化数据,其中,变化数据包括如下至少之一:每个分区域的旋转数据、平移数据和缩放数据;基于每个分区域的变化数据对每个分区域的捏脸后对应的目标网格数据进行优化,生成优化后的目标网格数据。
[0139]
可选的,上述处理器还可以执行如下步骤的程序代码:基于每个分区域的变化数据对每个分区域的捏脸后对应的目标网格数据进行优化,生成优化后的目标网格数据,包括:分别确定每个分区域的变化权重,其中,变化权重用于表征对应分区域的变换幅度;根据变化权重,以及每个分区域的变化数据对每个分区域的捏脸后对应的目标网格数据进行优化,生成优化后的目标网格数据。
[0140]
可选的,上述处理器还可以执行如下步骤的程序代码:根据初始网格数据到目标网格数据的变换,分别对多个分区域的初始表情数据进行调整生成目标表情数据,包括:根据初始网格数据到目标网格数据的变换,构造表情调整的能量方程,其中,能量方程包括多个用于依据网格数据变换适应调整表情的能量项;根据能量方程,分别对多个分区域的初始表情数据进行调整生成目标表情数据。
[0141]
可选的,上述处理器还可以执行如下步骤的程序代码:能量项包括:用于保持每个分区域中部分特征点对在网格变换前后距离不变的能量项,用于确定每个分区域中的特征点在旋转缩放变换后位置的能量项。
[0142]
处理器可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:在交互界面上显示脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;如果交互界面的任意一个区域内检测到输入脸型输入参数的操作,触发将脸部进行区域划分,得到多个分区域,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型;在交互界面上显示目标表情,其中,目标表情根据目标表情数据形成,目标表情数据根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成。
[0143]
处理器可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:在交互界面上显示脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;交互界面内感应到脸型输入参数的操作;响应操作,执行将脸部进行区域划分,得到多个分区域;在交互界面上输出选择页面,通过选择页面提供至少一个脸型输入参数选项,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型,不同的脸型输入参数用于表征不同的表情;在交互界面上显示目标表情,其中,目标表情根据目标表情数据形成,目标表情数据根据初始网格数
据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成。
[0144]
处理器可以通过传输装置调用存储器存储的信息及应用程序,以执行下述步骤:前端客户端接收到脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;前端客户端将基础表情传输到后台服务器;前端客户端接收后台服务器返回的多个分区域,其中,多个分区域的为将脸部进行区域划分得到的;前端客户端接收到输入脸型输入参数的操作,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,以及根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成目标表情数据,其中,多个分区域的目标网格数据形成脸部的目标脸型,多个分区域的目标表情数据形成脸部的目标表情
[0145]
采用本发明实施例,采用对脸部进行区域分解,得到多个分区域的方式,通过在接收到脸型输入参数时,分别将多个分区域的初始网格数据变换成目标网格数据,以及根据初始网格数据到目标网格数据的变换,分别对多个分区域的初始表情数据进行调整生成目标表情数据,达到了对脸部进行分区域网格变换,以及分区域表情调整的目的,从而实现了对脸部进行变化时,能够生成更加自然的表情的技术效果,进而解决了相关技术中在对虚拟形象进行脸部变换时,存在表情不自然甚至表情错误的技术问题。
[0146]
本领域普通技术人员可以理解,图11所示的结构仅为示意,计算机终端也可以是智能手机(如android手机、ios手机等)、平板电脑、掌声电脑以及移动互联网设备(mobile internet devices,mid)、pad等终端设备。图11其并不对上述电子装置的结构造成限定。例如,计算机终端11还可包括比图11中所示更多或者更少的组件(如网络接口、显示装置等),或者具有与图11所示不同的配置。
[0147]
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:闪存盘、只读存储器(read-only memory,rom)、随机存取器(random access memory,ram)、磁盘或光盘等。
[0148]
实施例4
[0149]
本发明的实施例还提供了一种存储介质。可选地,在本实施例中,上述存储介质可以用于保存上述实施例1所提供的脸部数据的处理方法所执行的程序代码。
[0150]
可选地,在本实施例中,上述存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中,或者位于移动终端群中的任意一个移动终端中。
[0151]
可选地,在本实施例中,存储介质被设置为存储用于执行以下步骤的程序代码:将脸部进行区域划分,得到多个分区域;接收到脸型输入参数,根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型;根据初始网格数据到目标网格数据的变换,分别对多个分区域的初始表情数据进行调整生成目标表情数据,其中,多个分区域的目标表情数据形成脸部的目标表情。
[0152]
可选地,在本实施例中,存储介质还被设置为存储用于执行以下步骤的程序代码:将脸部进行区域划分,得到多个分区域,包括:获取脸部的结构特征,其中,脸部的结构特征采用脸部的网格上对应的特征点表征;根据脸部的结构特征,构建每个分区域的特征点集合;基于每个分区域的特征点集合,分别得到多个分区域。
[0153]
可选地,在本实施例中,存储介质还被设置为存储用于执行以下步骤的程序代码:
多个分区域的初始网格数据形成脸部的平均脸,多个分区域的初始表情数据形成脸部的基础表情,基础表情为预定的整套表情中的一个表情。
[0154]
可选地,在本实施例中,存储介质还被设置为存储用于执行以下步骤的程序代码:基于每个分区域的特征点集合,分别得到多个分区域,包括:对每个分区域内的特征点集合分别进行网格正则化处理,得到正则化处理后的每个分区域的特征点集合;将正则化处理后的每个分区域的特征点集合进行主成分分析处理,分别得到多个分区域。
[0155]
可选地,在本实施例中,存储介质还被设置为存储用于执行以下步骤的程序代码:接收到脸型输入参数,根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,包括:接收到对脸部进行捏脸操作的脸型输入参数;根据脸型输入参数分别将多个分区域的初始网格数据生成捏脸后对应的目标网格数据。
[0156]
可选地,在本实施例中,存储介质还被设置为存储用于执行以下步骤的程序代码:在根据脸型输入参数分别将多个分区域的初始网格数据生成捏脸后对应的目标网格数据之后,还包括:对捏脸后对应的目标网格数据进行优化,其中,对捏脸后对应的目标网格数据进行优化包括:将捏脸后的每个分区域的目标网格数据与捏脸前的每个分区域的初始网格数据进行比对,获取每个分区域的变化数据,其中,变化数据包括如下至少之一:每个分区域的旋转数据、平移数据和缩放数据;基于每个分区域的变化数据对每个分区域的捏脸后对应的目标网格数据进行优化,生成优化后的目标网格数据。
[0157]
可选地,在本实施例中,存储介质还被设置为存储用于执行以下步骤的程序代码:基于每个分区域的变化数据对每个分区域的捏脸后对应的目标网格数据进行优化,生成优化后的目标网格数据,包括:分别确定每个分区域的变化权重,其中,变化权重用于表征对应分区域的变换幅度;根据变化权重,以及每个分区域的变化数据对每个分区域的捏脸后对应的目标网格数据进行优化,生成优化后的目标网格数据。
[0158]
可选地,在本实施例中,存储介质还被设置为存储用于执行以下步骤的程序代码:根据初始网格数据到目标网格数据的变换,分别对多个分区域的初始表情数据进行调整生成目标表情数据,包括:根据初始网格数据到目标网格数据的变换,构造表情调整的能量方程,其中,能量方程包括多个用于依据网格数据变换适应调整表情的能量项;根据能量方程,分别对多个分区域的初始表情数据进行调整生成目标表情数据。
[0159]
可选地,在本实施例中,存储介质还被设置为存储用于执行以下步骤的程序代码:能量项包括:用于保持每个分区域中部分特征点对在网格变换前后距离不变的能量项,用于确定每个分区域中的特征点在旋转缩放变换后位置的能量项。
[0160]
可选地,在本实施例中,存储介质被设置为存储用于执行以下步骤的程序代码:在交互界面上显示脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;如果交互界面的任意一个区域内检测到输入脸型输入参数的操作,触发将脸部进行区域划分,得到多个分区域,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型;在交互界面上显示目标表情,其中,目标表情根据目标表情数据形成,目标表情数据根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成。
[0161]
可选地,在本实施例中,存储介质被设置为存储用于执行以下步骤的程序代码:在交互界面上显示脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;交互界
面内感应到脸型输入参数的操作;响应操作,执行将脸部进行区域划分,得到多个分区域;在交互界面上输出选择页面,通过选择页面提供至少一个脸型输入参数选项,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,其中,多个分区域的目标网格数据形成脸部的目标脸型,不同的脸型输入参数用于表征不同的表情;在交互界面上显示目标表情,其中,目标表情根据目标表情数据形成,目标表情数据根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成。
[0162]
可选地,在本实施例中,存储介质被设置为存储用于执行以下步骤的程序代码:前端客户端接收到脸部的基础表情,其中,基础表情为预定的整套表情中的一个表情;前端客户端将基础表情传输到后台服务器;前端客户端接收后台服务器返回的多个分区域,其中,多个分区域的为将脸部进行区域划分得到的;前端客户端接收到输入脸型输入参数的操作,并根据脸型输入参数分别将多个分区域的初始网格数据变换成目标网格数据,以及根据初始网格数据到目标网格数据的变换,分别对基础表情中多个分区域的初始表情数据进行调整生成目标表情数据,其中,多个分区域的目标网格数据形成脸部的目标脸型,多个分区域的目标表情数据形成脸部的目标表情。
[0163]
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
[0164]
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
[0165]
在本技术所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
[0166]
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
[0167]
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
[0168]
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:u盘、只读存储器(rom,read-only memory)、随机存取存储器(ram,random access memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
[0169]
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人
员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献