美妆系统、美妆镜、控制方法、数据处理方法及移动设备与流程

1.本技术涉及电子设备技术领域，尤其涉及一种美妆系统、美妆镜、控制方法、数据处理方法及移动设备。


背景技术：

2.化妆或护肤时会使用到美妆镜。美妆镜不但具有普通镜子的功能，镜子边缘还设置了灯光(通常情况下镜子边缘的灯光称为补光灯)可照亮面部，使用起来更加方便。
3.假如使用美妆镜的用户想要边看美妆教程，边对着镜子学着化妆。用户就需要看一下放置在美妆镜旁的手机、平板电脑或计算机，再对着美妆镜化妆，头部需要来回扭动或移动，使用起来并不方便。


技术实现要素：

4.本技术实施例提供能够解决或改善现有技术中存在问题的一种美妆系统、美妆镜、控制方法、数据处理方法及移动设备。
5.本技术的一个实施例提供了一种美妆系统。该美妆系统包括：
6.美妆镜，具有镜面；
7.连接器，设置在所述美妆镜上；
8.移动设备，通过所述连接器连接在所述美妆镜上，用于采集美妆镜镜面侧的数据，以基于所述数据执行相应的任务和/或控制所述美妆镜工作。
9.本技术的另一个实施例提供了一种美妆镜。该美妆镜包括：
10.镜面组件；
11.连接器，设置在所述镜面组件上，用于连接移动设备，以将所述移动设备连接在所述镜面组件上，便于所述移动设备采集美妆镜镜面侧的数据，并基于所述数据执行相应的任务和/或控制所述美妆镜工作。
12.本技术的又一个实施例提供了一种美妆镜控制方法。该方法适用于移动设备，所述移动设备通过连接器设置在所述美妆镜上。具体的，所述方法包括：
13.采集美妆镜镜面侧的环境光照信息；
14.根据所述环境光照信息，通过无线通信组件或所述连接器向所述美妆镜发送调光指令，以便所述美妆镜按照所述调光指令调节色温和/或亮度。
15.本技术的又一个实施例提供了一种美妆镜控制方法。该方法适用于移动设备，所述移动设备通过连接器设置在所述美妆镜上。具体的，所述方法包括：
16.采集所述美妆镜镜面侧的人脸图像；
17.对所述人脸图像进行图像处理，生成脸部带有虚拟妆容的合成图像；
18.显示所述合成图像。
19.本技术的又一个实施例提供了一种移动设备。该移动设备包括存储器及处理器，其中，
20.所述存储器，用于存储程序；
21.所述处理器，与所述存储器耦合，用于执行所述存储器中存储的所述程序，以用于：
22.采集美妆镜镜面侧的环境光照信息；
23.根据所述环境光照信息，通过无线通信组件或所述连接器向所述美妆镜发送调光指令，以便所述美妆镜按照所述调光指令调节色温和/或亮度。
24.本技术的又一个实施例提供了一种移动设备。该移动设备包括存储器及处理器，其中，
25.所述存储器，用于存储程序；
26.所述处理器，与所述存储器耦合，用于执行所述存储器中存储的所述程序，以用于：
27.采集所述美妆镜镜面侧的人脸图像；
28.对所述人脸图像进行图像处理，生成脸部带有虚拟妆容的合成图像；
29.显示所述合成图像。
30.本技术实施例提供的技术方案中设置了连接器；该连接器可将移动设备(如手机、平安电脑或智能穿戴设备)连接在美妆镜上，这样移动设备便可采集美妆镜镜面侧的数据，以基于所述数据执行相应的任务和/或控制所述美妆镜工作；比如，采集美妆镜镜面侧的环境光照信息，以控制所述美妆镜调节光照色温和/或亮度；或者，采集美妆镜镜面侧的人脸图像，执行肤质测试、妆容合成、播放化妆教程视频、直播美妆镜镜面侧用户的化妆视频等任务；因移动设备通过连接器设置了在美妆镜上，用户在使用美妆镜时，可同时看到移动设备上播放的内容，头部无需大幅度的扭转或移动。可见，本实施例提供的技术方案，通过连接器将美妆镜与移动设备进行了软硬件的结合，利用了移动设备强大的硬件(摄像头、传感器、处理器等等)和软件功能，增强了美妆镜的功能，对现有美妆镜硬件的改造小，以较低的改造成本，大幅的提升了美妆镜性能。
附图说明
31.为了更清楚地说明本技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
32.图1为本技术一实施例提供的美妆系统的安装示意图；
33.图2为本技术实施例提供的美妆系统完成安装后正面示意图；
34.图3为本技术实施例提供的美妆系统完成安装后侧面示意图；
35.图4为本技术实施例提供的美妆系统完成安装后背面示意图；
36.图5为本技术实施例提供的美妆系统中移动设备位于美妆镜边缘上方的示意图；
37.图6为本技术实施例提供的美妆系统中移动设备位于美妆镜边缘左侧的示意图；
38.图7为本技术实施例提供的美妆系统中移动设备控制美妆镜调光的示意图；
39.图8为用户使用美妆系统进行直播、测肤或虚拟妆容合成等时的使用状态示意图；
40.图9为连接器的第一种实现结构的示意图；
41.图10为美妆镜镜面背部的示意图；
42.图11为连接器上的支撑架支撑移动设备的示意图；
43.图12为连接器上的支撑部为插槽的示意图；
44.图13为连接器的插槽内设有第一电连接端的示意图；
45.图14为本技术一实施例提供的美妆镜控制方法的流程示意图；
46.图15为本技术一实施例提供的数据处理方法的流程示意图；
47.图16为本技术一实施例提供的移动设备的结构示意图。
具体实施方式
48.随着生活水平的提高，人们对时尚的追求越来越高，不但要求穿着配饰紧跟潮流，还需要打造精致的妆容。光线对化妆来说太重要，美妆镜就很好的解决了光线问题，美妆镜的镜面边缘一圈的补光灯可提供多种色温、亮度的光线。
49.目前，有些美妆镜还具有语音交互功能，用户可声控调节美妆镜补光灯的色温或亮度；还可声控让美妆镜播放音乐、化妆指导音频或护肤指导音频等等。音频指导，用户只能听到声音，并不能看到图像，对于大多数初学者来说学起来还是比较困难的。跟着视频学习就容易的多。现实情况是，用户若需要化妆指导，就必须借助另外的智能设备(如手机、平板电脑等)，用户需频繁扭头看一眼视频，再照着美妆镜学着化妆，使用起来不太方便。
50.为此，本技术提供了如下各实施例，以解决或改善上述问题。为了使本技术领域的人员更好地理解本技术方案，下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行清楚、完整地描述。
51.在本技术的说明书、权利要求书及上述附图中描述的一些流程中，包含了按照特定顺序出现的多个操作，这些操作可以不按照其在本文中出现的顺序来执行或并行执行。操作的序号如101、102等，仅仅是用于区分各个不同的操作，序号本身不代表任何的执行顺序。另外，这些流程可以包括更多或更少的操作，并且这些操作可以按顺序执行或并行执行。需要说明的是，本文中的“第一”、“第二”等描述，是用于区分不同的部件、模块、设备等，不代表先后顺序，也不限定“第一”和“第二”是不同的类型。此外，下述各实施例仅仅是本技术一部分实施例，而不是全部的实施例。基于本技术中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本技术保护的范围。
52.图1、图2、图3和图4示出了本技术一实施例提供的美妆系统的结构示意图。如图1、图2、图3和图4所示，所述美妆系统包括：美妆镜1、连接器2及移动设备3。其中，移动设备3可以是手机、平板电脑、智能穿戴设备(如智能手表等)，本实施例对此不作具体限定。如图1、图2、图3和图4所示，所述美妆镜1具有可成像的镜面11。连接器2设置在所述美妆镜1上。移动设备3通过所述连接器2连接在所述美妆镜1上，用于采集美妆镜1镜面侧的数据，以基于所述数据执行相应的任务和/或控制所述美妆镜1工作。
53.所述连接器2可设置在美妆镜1的不影响镜面使用的任意位置处。比如，如图1至4所示的实施例，所述连接器2设置在所述美妆镜1的镜面背部，使得所述移动设备3一部分显露于外，另一部分被所述美妆镜1遮挡。
54.或者，如图5和图6所示的实施例，所述连接器2设置在所述美妆镜1的镜面边缘，使得所述移动设备3位于镜面边缘。图5示出了移动设备1通过连接器2设置在所述美妆镜1的
镜面上方的情况，图6示出了移动设备1通过连接器2设置在所述美妆镜1的镜面左方的情况。当然，所述移动设备1也可通过连接器2设置在所述美妆镜1的镜面右方的情况，本实施例不一一例举。
55.如图1至6所示，所述移动设备包括显示屏；所述显示屏外露，未被所述美妆镜遮挡，且与所述镜面位于同侧。这样用户可使用移动设备播放化妆或护肤指导视频，用户通过显示屏边观看指导视频，边对着美妆镜学着化妆，因移动设备就在美妆镜上，用户仅需要动动眼睛，无需扭动头部或是大幅度扭动，便可边看视频边对着美妆镜化妆。
56.进一步的，如图7所示，所述移动设备3包括光线传感器31。所述光线传感器31用于采集环境光照信息，并根据所述环境光照信息，向所述美妆镜1发送调光指令。所述美妆镜1包括补光灯组件12及控制器(图中未示出)，所述控制器用于按照接收到的所述调光指令，控制所述补光灯组件12工作以调节色温和/或亮度。具体实施时，所述控制器可设置在美妆镜1的底座13内。
57.这样用户在使用美妆镜化妆或护肤时，移动设备可根据光线传感器31采集到的环境光照信息，控制美妆镜的色温和/或亮度，用户无需手动调节，这将大大的提高了使用方便度。比如，用户当前正在涂抹护肤品或底妆，手上有护肤品或底妆液，若无本方案的自动调节功能，用户只能用手背来调节，或用手调节致使调节控件粘上护肤品或底妆液。又比如，有些美妆镜具有声孔调节色温和/或亮度的功能，但这种声控调节是对应一定档位的，即亮度分为三挡、四挡或五档等。用户说“亮一点”，美妆镜会基于当前亮度所在档位，上调一档，调节后的亮度若不符合用户要求，用户还需再说一次“亮一点”。而本实施例提供的方案，是基于环境光照信息，控制美妆镜的色温和/或亮度，无需用户参与，用户在无感知的情况下便可获得满意的光照亮度、色温。
58.参见图8所示，所述移动设备可包括摄像头31、处理器(图中未示出)及显示屏32。其中，摄像头31用于采集所述美妆镜1镜面侧的人脸图像。处理器用于对所述人脸图像进行图像处理，生成脸部带有虚拟妆容的合成图像。显示屏32用于显示所述合成图像。
59.进一步的，所述移动设备还用于响应于用户针对所述合成图像触发的视频播放指令，获取所述合成图像对应的视频，播放所述视频。具体实施时，所述移动设备上安装有相应的应用(app)，该app提供虚拟试妆功能。用户开启虚拟试妆功能后，移动设备3的摄像头31便采集美妆镜1镜面侧的人脸图像；应用对应的交互界面上展示有多种妆容，如韩式妆容、日式妆容、欧美妆容、中式妆容等等对应的控件。假设用户点击了韩式妆容对应的控件，则应用程序便启动虚拟试妆程序，对摄像头31采集到的人脸图像进行处理，以生成脸部带有韩式妆容的合成图像。移动设备3的显示屏32显示该合成图像。用户若不满意，觉得韩式妆容不适合自己，还可点击其他妆容对应的控件，以便用户查找适合自己或喜欢的妆容。假设用户满意韩式妆容，用户便可点击或通过声控的方式，触发播放韩式妆容指导视频的指令。移动设备3在监测到该指令后，可从服务端或移动设备本地获取韩式妆容对应的视频，并在显示屏上进行播放。用户便可边看着美妆镜边缘显示屏上播放的指导视频，边照着美妆镜学着化妆。
60.移动设备3除了能播放视频外，还可对用户的肤质进行检测并提出改善方案。继续参见图8所示，用户对着美妆镜，移动设备3的摄像头31便可采集到美妆镜镜面侧的人脸图像。移动设备3的处理器从所述人脸图像中提取皮肤图像，对所述皮肤图像进行肤质分类得
到肤质类型；并根据所述肤质类型确定改善方案。移动设备3的显示屏32，用于显示所述肤质类型及所述改善方案。用户可照着美妆镜检查自己的肤质状态。
61.本实施例提供的美妆系统还可用于直播。比如，用户为美妆达人，经常在网络上直播各种化妆教程。直播用户使用本实施例提供的美妆系统进行直播，不需要很多辅助设备，比如手机或平板电脑支架、美妆镜、补光设备等等；也不需要来回调整各设备间的位置等来找寻合适角度进行直播。具体的，继续参见图8所示，所述移动设备3通过连接器2连接在美妆镜1上。用户使用移动设备3开始直播后，移动设备3的摄像头31，用于采集所述美妆镜1镜面侧的人物视频。移动设备3的通信组件(图中未示出)用于将所述人物视频发送至服务端(如直播平台对应的服务器、服务器集群或虚拟服务器等)，以便于至少一个客户端从所述服务端获取所述人物视频；还用于从所述服务端获取所述至少一个客户端发送的互动信息。移动设备3的显示屏32用于显示所述人物视频及所述互动信息。
62.本实施例中连接器2可以只是一个起连接和支撑作用的机械结构件。连接件可包括连接部及支撑部。其中，连接部用于连接所述美妆镜。支撑部用于支撑所述移动设备，以保持所述移动设备与所述美妆镜的相对位置关系。具体实施时，所述连接部可以是吸盘，通过吸盘吸附在所述美妆镜上。或者，所述连接部上设有粘性材质层，通过粘性材质层粘在美妆镜上。又或者，所述连接部与所述美妆镜通过卡扣卡槽结构实现连接，比如，连接部上设有卡槽，所述美妆镜上设有卡扣，所述卡扣卡入所述卡槽内，实现所述连接部与所述美妆镜的连接。又或者，参见图9所示，所述连接部上设有至少一个凸起，所述至少一个凸起21可以是图9中所示的“t”形凸起；相应的，参见图10所示，所述美妆镜1上设有与至少一个凸起21适配的至少一个插孔13。具体的，所述插孔13为“t”形插孔，为避免凸起21从插孔13脱出，所述插孔内还含有暗槽，所述“t”形凸起从插孔13的入口插入后，沿图10中y方向进入暗槽(图10中虚线部分)，这样“t”形凸起的横向直杆部分便卡入暗槽内，不会从插孔13内脱出。拆除时，只需沿y方向反方向移动凸起至插孔13入口，然后从插孔13入口处拔出即可。
63.所述支撑部包括但不限于如下中的任一种：支撑架22(如图11所示)、可伸缩夹持机构23(如图5所示)、插槽24(如图12所示)。具体的，参见图11所示，连接器2的连接部(如凸起)连接到美妆镜1上后，手机或平板电脑可置于连接器2上，支撑架22起到支撑作用，以托住手机或平板电脑的后部。参见图5所示的结构，连接器2的连接部(如凸起)连接到美妆镜1上后，用户可先撑开可伸缩夹持机构23的两个夹持臂，以便将手机或平板电脑放入，然后，用户再将可伸缩夹持机构23的两个夹持臂朝相向的方向施力或者两个夹持臂在自身回复力的作用回位，将两个夹持臂间的手机或平板电脑夹紧。参见图12所示，所述连接器2的连接部(如凸起21)连接到美妆镜1上后，用户可将手机或平板电脑插入插槽25内，支撑插槽的后侧槽壁起到支撑作用。
64.本实施例提供的美妆系统中，所述美妆镜与移动设备可采用无线方式进行通信连接，比如蓝牙、wifi等。具体的，所述美妆镜上设有无线通信组件；所述美妆镜通过所述无线通信组件与所述移动设备通信连接，以接收所述移动设备发送的控制指令。
65.当然，本实施例提供的所述美妆镜与移动设备除了可以采用无线方式通信外，也可采用有线的方式通信。即，上述实施例中提及的连接器除了具有机械结构上的连接功能外，还具有电连接美妆镜与移动设备的功能。即，所述连接器包括：连接体及电连接电路。其中，连接体上设有用于连接所述美妆镜的连接结构。电连接电路，设置在所述连接体上，且
具有第一电连接端25及第二电连接端，如图9和图13所示，所述第一电连接端25用于电连接所述移动设备，所述第二电连接端用于电连接所述美妆镜。
66.在一种可实现的技术方案中，如图9和图13所示，所述连接结构包括至少一个凸起21；所述至少一个凸起21中至少部分凸起上设有所述第二电连接端(图中未示出)；如图10所示，所述美妆镜1上设有与所述至少一个凸起21适配的至少一个插孔13；所述至少一个插孔13中至少部分插孔上设有第三电连接端(图中未示出)；所述至少一个凸起21插入所述至少一个插孔13内，所述第二电连接端与所述第三电连接端电连接。具体实施时，所述第二电连接端和所述第三电连接端可以是金属导电端子，两个金属导电端子接触，便可实现电连接。
67.继续参见图9和图13所示，所述第一电连接端25为电连接插头；所述电连接插头与所述移动设备3的充电接口适配。这样，所述美妆镜通过所述连接器为所述移动设备提供充电电能。当然，所述移动设备也可通过所述连接器向所述美妆镜发送控制指令。
68.上述实施例提供的美妆系统实施例阐述了美妆镜与移动设备的协同工作，可达到诸多有益效果。实际上，通过连接器可将各类移动设备连接在美妆镜上，美妆镜也可与多种类型的移动设备进行通信。下面实施例提供一种带有连接器的美妆镜。该连接器可作为美妆镜的一个配件。具体的，美妆镜包括：镜面组件及连接器。其中，连接器，设置在所述镜面组件上，用于连接移动设备，以将所述移动设备连接在所述镜面组件上，便于所述移动设备采集美妆镜镜面侧的数据，并基于所述数据执行相应的任务和/或控制所述美妆镜工作。
69.所述连接器设置在所述镜面组件的镜面边缘，使得所述移动设备位于镜面边缘；或者所述连接器设置在所述镜面组件的镜面背部，使得所述移动设备一部分显露于外，另一部分被所述镜面组件遮挡。
70.一种实现方案是，所述连接器包括：连接体及电连接电路。其中，连接体，其上设有用于连接所述美妆镜的连接结构。电连接电路，设置在所述连接体上，且具有第一电连接端及第二电连接端，所述第一电连接端用于电连接所述移动设备，所述第二电连接端用于电连接所述美妆镜。
71.这里需要说明的是：有关连接器、美妆镜及移动设备的连接结构，以及可实现的各种功能场景，可参见上述实施例中的相应内容，此处不作赘述。
72.具体的，镜面组件包括：镜面、安装壳、补光灯组件、导光板及控制器。其中，安装壳，用于安装所述镜面，所述安装壳上设有所述连接器。补光灯组件，设置在所述镜面与所述安装壳间的空间内，用于发光。所述导光板设置在所述镜面上，用于将所述补光灯组件发出的光线进行反射和散射成为面光源。控制器，用于按照所述移动设备发送的调光指令，控制所述补光灯组件工作以调节色温和/或亮度。
73.美妆镜可包括：镜面组件、转轴组件和底座。其中，镜面组件通过转轴组件与底座连接。
74.所述底座上设有智能控制模块、麦克风模块、无线通信模块和扬声器模块。其中，智能控制模块分别与麦克风模块、无线通信模块、扬声器模块相连。
75.智能控制模块用于接收麦克风模块采集的用户语音指令，并根据用户语音指令生成需求信号，将需求信号发送至无线通信模块，并接收无线通信模块发送的需求反馈信息，控制扬声器播放需求反馈信息；需求反馈信息由服务器根据需求信号得到，并发送至无线
通信模块。
76.用户发出语音指令，如“给我推荐一个欧美风的妆容步骤”，被麦克风模块采集到即发送到智能控制模块，智能控制模块将根据该语音指令生成对应的需求信号，并将该需求信号发送至无线通信模块，由无线通信模块上传至服务器，服务器在网络中搜索并获取对应的需求反馈信息，即“欧美风妆容步骤”，并将该需求反馈信息通过无线通信模块反馈至智能控制模块。智能控制模块控制扬声器模块播放该需求反馈信息，从而实现用户与美妆镜之间的语音互动，给予用户需要的妆容指导，解放双手的同时，提高化妆效率。
77.其中，镜面组件包括：镜面、补光灯模块及导光板。补光灯模块包括至少两个光源，导光板固定在镜面上，用于将光源发出的光线进行反射和散射从而成为面光源。补光灯模块与智能控制模块相连，用于接收智能控制模块发出的灯光控制信号，根据灯光控制信号调节光源的色温和亮度大小，灯光控制信号由智能控制模块根据麦克风模块采集的灯光控制指令生成。
78.镜面可添加与智能控制模块相连接的补光模块，补光模块中可包括多个不同色温的led灯，并可以按照一定形式进行组合，形成多种可调节的模式。由智能控制模块根据麦克风模块采集到的灯光控制指令进行色温和亮度的调节；也可以再增设导光板，固定在镜面上，对led灯发出的光线进行发射和散射，使之成为面光源，均匀照亮用户面部，起到补光的功能，更好地辅助用户的化妆过程。
79.转轴组件包括转轴和连接杆，转轴分别与镜面组件、连接杆相连，用于将镜面组件调整至预设角度。转轴使镜面与连接杆活动连接，用户可根据需要转动镜面调节角度。
80.可选地，底座组件还可包括无线通信模块相连接的供电模块，用于为无线通信模块供电。供电模块开启后，无线通信模块即开始工作并广播匹配信息。
81.供电模块开始供电，智能美妆镜开始工作，首先，无线通信模块广播匹配信息，用户即可使用智能终端与智能美妆镜建立网络连接，从而连接到服务器。
82.底座组件还包括触控模块，触控模块包括电源按键：触控模块与智能控制模块相连，电源按键用于控制供电模块的开闭。
83.触控模块还包括灯光调节按键，用于调节光源的色温和亮度大小。触控模块还可以增设灯光调节按键，使用灯光调节按键来调节光源的色温和亮度大小。同样的，也可以设置音量调节按键用于调节扬声器的音量大小，设置禁麦按键用于在不需要语音功能的时候禁用麦克风模块。
84.具体的，补光灯模块中包括多个不同色温的led灯，并按照一定形式进行组合，形成多种可调节的亮度模式。三种光源可分别为自然光(5500k)，冷光(7000k)，暖光(4000k)，每种模式下的色温均能进行五档亮度调节，由智能控制模块根据麦克风模块采集到的灯光控制指令进行亮度调节。
85.本技术各实施例提供的方案，将美妆镜和移动设备进行软硬件结合，可利用移动设备的传感器，摄像头和ar(增强现实)技术(上文中虚拟试妆功能中便会用到ar技术)形成软硬一体化的用户体验，同时此方案对现有硬件，特别是美妆镜的改造小，实现成本低。
86.其中，ar是增强现实(augmented reality的简称)，是在虚拟现实的基础上发展起来的新技术，也被称之为混合现实，是通过计算机系统提供的信息增加用户对现实世界感知的技术，将虚拟的信息应用到真实世界，并将计算机生成的虚拟物体、场景或系统提示信
息叠加到真实场景中，从而实现对现实的增强。更通俗一点的说法是，它是一种全新的人机交互技术，利用摄像头，传感器，实时计算和匹配技术，将真实的人脸图像和虚拟的妆容实时地叠加到人脸图像上，生成带有妆容的合成图像。用户可以通过虚拟现实系统感受到上妆后“身临其境”的逼真感。
87.总结来说，本技术实施例提供的技术方案可实现“智能调光、智能试妆、一键测肤、快速直播”等功能。智能调光功能实现时，通过移动设备的光线传感器感测到的环境光照信息，自动调节美妆镜补光灯色温和/或亮度。比如，手机的光线传感器检测环境光照，将检测到的环境光照发送至美妆镜补光灯，美妆镜补光灯进行智能调节补光。智能化妆功能实现时，通过移动设备的前置摄像头进行ar试妆，并提供化妆教程。比如，手机前置摄像头采集人脸图像，ar合成妆容，显示妆后图像。用户确认想要该妆容对应的化妆教程时，手机播放化妆教程，用户可对着镜子进行化妆。一键测肤功能实现时，用户仅需要面对美妆镜，移动设备便可利用自身的摄像头及处理能力进行ai肤质检测，给出肤质报告和改善建议。比如，手机前置摄像头扫描面对美妆镜的面部，手机屏幕展示肤质分析报告及改善建议。用户可对着美妆镜检查肤质状态。快速直播时，用户只需对着美妆镜化妆、说话等，连接在美妆镜上的移动设备的摄像头拍摄用户化妆的视频，麦克风采集用户说话的音频，将视频和音频发送至服务端，以便网络侧的用户观看。网络侧用户也可向服务端发送互动信息，直播用户在对着美妆镜化妆的同时，抬眼便可看到移动设备上显示的网络侧用户的互动信息。除此之外，本技术实施例提供的技术方案还可实现“产品推荐”的功能，比如，针对当前播放的美妆教程视频，推荐该美妆教程视频中所使用的化妆用品，比如：粉底、睫毛膏、腮红、眉笔、口红等等。在下面的实施例中将会详细说明。
88.上述各实施例是从硬件结构的角度来对方案进行说明。下面将以移动设备为执行主体，对美妆镜控制方法进行说明。即本实施例所述方法的执行主体移动设备通过连接器设置在所述美妆镜上。具体的，如图14所示，所述方法包括：
89.s11、采集美妆镜镜面侧的环境光照信息；
90.s12、根据所述环境光照信息，通过无线通信组件或所述连接器向所述美妆镜发送调光指令，以便所述美妆镜按照所述调光指令调节色温和/或亮度。
91.上述s12中，按照环境光照信息调节色温和/或亮度的过程，可依据预置的调节策略实现。本实施例对调节策略不作具体限定，可根据实际的设计需求来设定。
92.本技术还提供了数据处理方法的实施例。图15示出了所述数据处理方法的流程示意图。同样的，本实施例提供的所述方法的执行主体可以是移动设备。该移动设备通过连接器设置在所述美妆镜上。具体的，所述方法包括：
93.s21、采集所述美妆镜镜面侧的人脸图像；
94.s22、对所述人脸图像进行图像处理，生成脸部带有虚拟妆容的合成图像；
95.s23、显示所述合成图像。
96.上述s22，可采用ar技术实现，本实施例对于ar技术的具体实现过程不作具体限定。
97.进一步的，所述方法还可包括如下步骤：
98.s24、响应于用户针对所述合成图像触发的视频播放指令，获取所述合成图像对应的视频；
99.s25、播放所述视频。
100.上述s24中所述合成图像对应的教程可从服务端获取，也可从执行主体(如手机、平板电脑等)本地获取。
101.除显示合成图像供用户参考、播放合成图像对应视频指导用户实际操作外，还可为用户推荐相应的产品信息。比如，画出合成图像中的妆容需使用到的化妆品、工具等。即本实施例提供的所述方法还可包括如下步骤：
102.s26、获取所述虚拟妆容相关的产品信息；
103.s27、显示所述产品信息。
104.其中，所述产品信息可包括产品名称、产品描述、购买产品的链接、二维码等等。用户只需触控屏幕上显示的产品购买链接，便可进入相应购买界面完成下单操作。或者，用户通过识别该显示的二维码，便可进入该产品相应的购买界面完成下单操作。假设虚拟妆容为韩式妆容，可从服务端获取该韩式妆容所需使用到的产品信息，如化妆品(如口红色号、睫毛膏、眉笔等等)、工具(睫毛夹、美妆蛋等)。这样可方便用户购买相应产品，无需用户记住产品信息然后进入相应电商平台或线下购买。
105.进一步的，所述方法还可包括如下步骤：
106.s28、采集所述美妆镜镜面侧的人脸图像；
107.s29、从所述人脸图像中提取皮肤图像；
108.s30、对所述皮肤图像进行肤质识别，得到肤质类型；
109.s31、根据所述肤质类型确定改善方案；
110.s32、显示所述肤质类型及所述改善方案。
111.上述步骤s29中，可基于椭圆皮肤模型来提取皮肤图像，更确切的说，应该是提取人脸图像中皮肤对应的像素点，所有皮肤像素点的集合便组合成了皮肤图像。简单理解就是，仅提取人脸图像中皮肤部分，眼镜、头发、嘴部等均不属于提取对象。具体实施时，可将皮肤信息映射到ycrcb空间，在crcb二维空间中这些皮肤像素点近似成一个椭圆分布，得到了一个crcb的椭圆，下次来一个坐标(cr，cb)只需要判断它是否在椭圆内(包括边界)，如果是，则判断其为皮肤，否则就是非皮肤像素点。
112.上述s30，可利用深度学习算法实现。比如，利用训练样本，对深度学习模型进行训练，以得到优化好(即完成学习)的深度学习模型。然后，将皮肤图像作为该深度学习模型的入参，执行该深度学习模型，得到肤质类型。其中，肤质类型可包括中性、油性、干性、混合性、青春痘肌等等。当然，得到的肤质类型可包括一个或多个，很多人的皮肤混合有很多肤质类型，比如属于油性皮肤，还是青春痘肌。
113.上述s31，可利用专家系统或知识图谱等，实现根据所述肤质类型确定改善方案。有关专家系统及知识图谱的内容，可参见现有技术中的相关内容，本文不作赘述。
114.上述步骤s32在具体实现时，还可交替显示未采取改善方案和采取改善方案后的脸部图像。
115.进一步的，所述方法还可包括如下步骤：
116.s33、采集所述美妆镜镜面侧的人物视频；
117.s34、将所述人物视频发送至服务端，以便于至少一个客户端从所述服务端获取所述人物视频；
118.s35、从所述服务端获取所述至少一个客户端发送的互动信息；
119.s36、显示所述人物视频及所述互动信息。
120.上述内容中介绍了在用户试妆(即使用虚拟妆容)时为用户推荐相关产品信息的方案，实际上在用户自己使用美妆镜化妆时，也可为用户推荐相应的数据。即本实施例提供的所述方法还可包括如下步骤：
121.s37、获取所述美妆镜镜面侧的至少一个用户图像，其中，所述至少一个用户图像为视频中的至少一帧图像或至少一个时刻采集到的图像；
122.s38、对所述至少一个用户图像进行分析，得到分析结果；
123.s39、根据所述分析结果，获取推荐数据；
124.s40、显示所述推荐数据。
125.上述s38中，可利用神经网络模型来实现对至少一个用户图像的分析。该神经网络模型可采用美妆相关的训练样本进行训练。美妆相关的训练样本可包括：图像及美妆行为标签。该分析可以用户行为分析或是用户潜在需求分析。比如，图像为用户拿眉笔画眉毛，对应的美妆行为标签为画眉或者用户潜在需求为购买眉笔；图像为用户双手在脸颊上拍打的动作，对应的美妆行为标签为擦爽肤水或者用户潜在需求为购买爽肤水；图像为用户使用美妆蛋涂抹脸部，对应的美妆行为标签为涂粉底或用户潜在需求为购买粉底液；等等。将上述各训练样本中的图像作为待训练模型的入参，执行所述待训练模型得到输出结果；根据所述输出结果与所述图像对应的美妆行为标签，对所述待训练模型进行优化，直至所述待训练模型满足优化停止条件，比如基于输出结果与图像对应的美妆行为标签计算出的损失函数小于一预设值时，满足所述优化停止条件。
126.在神经网络模型完成训练后，便可将所述至少一个用户图像作为该神经网络模型的入参，执行该神经网络模型便可得到分析结果。
127.上述s39在具体实施时可由服务端来实现。即，s39“根据所述分析结果，获取推荐数据”包括：将所述用户行为数据发送至服务端，以便所述服务端获取与所述用户行为数据相关的推荐数据；接收所述服务端反馈的所述推荐数据。
128.继续以美妆行为举例，假设分析结果为“涂粉底”，则可获取与该分析结果相关的产品信息作为推荐数据，如美妆蛋、粉底液、粉底霜等。又比如，分析结果为“画眉”，则可获取与“画眉”相关的产品信息作为推荐数据，如眉笔、眉粉、眉粉刷等等。
129.在实际实施时，可将分析结果与相关产品标识预先建立关联关系，将建立好的关系列表存储在存储器中。在需要推荐时，可通过查询该关系列表来获取某一分析结果相关的推荐数据。
130.当然，用户行为数据除了美妆行为外，还可以是其他行为，比如，照镜子时拨弄头发，可将头发塑性的产品，如发胶、发蜡等，作为推荐数据。
131.除了上面的各场景外，现实中还可以存在如下场景。比如，店铺内陈列有待出售的美妆镜，用户或店员可将自己的手机通过连接器连接在美妆镜上，美妆镜检测到有手机连接，可与手机建立通信连接，并向手机发送美妆镜的描述信息，比如美妆镜的使用引导、功能说明、价格、同品牌不同型号的美妆镜介绍(比如功能区别)等等。即本实施例提供的所述方法还可包括如下步骤：
132.s41、与所述美妆镜建立通信连接后，获取并显示所述美妆镜的描述信息。
133.其中，所述描述信息可存储于美妆镜本地，比如美妆镜内部设置有存储介质(如存储器)，其内存储有描述信息。在美妆镜成功与手机建立通信连接后，将描述信息发送至手机，以在手机上进行显示。或者，所述手机在与美妆镜建立通信连接后，获取所述美妆镜标识(如型号)，将所述美妆镜标识发送至服务器，以便服务器根据所述美妆镜标识获取对应的描述信息。该描述信息可包括：使用引导信息、价格信息、功能介绍、同品牌不同型号的美妆镜介绍(比如功能区别)等等。
134.图16示出了本技术一实施例提供的一种移动设备的结构示意图。如图16所示，所述移动设备包括存储器101及处理器102。存储器101可被配置为存储其它各种数据以支持在移动设备上的操作。这些数据的示例包括用于在移动设备上操作的任何应用程序或方法的指令。存储器101可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(sram)，电可擦除可编程只读存储器(eeprom)，可擦除可编程只读存储器(eprom)，可编程只读存储器(prom)，只读存储器(rom)，磁存储器，快闪存储器，磁盘或光盘。
135.所述处理器102，与所述存储器101耦合，用于执行所述存储器中存储的所述程序，以用于：
136.采集美妆镜镜面侧的环境光照信息；
137.根据所述环境光照信息，通过无线通信组件或所述连接器向所述美妆镜发送调光指令，以便所述美妆镜按照所述调光指令调节色温和/或亮度。
138.其中，处理器102在执行存储器101中的程序时，除了上面的功能之外，还可实现其它功能，具体可参见前面各实施例的描述。
139.进一步，如图16所示，电子设备还包括：通信组件103、电源组件104及显示器105等其它组件。图16中仅示意性给出部分组件，并不意味着移动设备只包括图16所示组件。
140.相应地，本技术实施例还提供一种存储有计算机程序的计算机可读存储介质，所述计算机程序被计算机执行时能够实现上述各实施例提供的美妆镜控制方法步骤或功能。
141.本技术一实施例还提供另一个移动设备，该移动设备的结构同上述图16类似。具体的，所述移动设备包括：存储器和处理器。存储器用于存储程序。所述处理器，与所述存储器耦合，用于执行所述存储器中存储的所述程序，以用于：
142.采集所述美妆镜镜面侧的人脸图像；
143.对所述人脸图像进行图像处理，生成脸部带有虚拟妆容的合成图像；
144.显示所述合成图像。
145.其中，处理器在执行存储器中的程序时，除了上面的功能之外，还可实现其它功能，具体可参见前面各实施例的描述。
146.进一步，如图16所示，移动设备还包括：通信组件、电源组件及显示器等其它组件。图16中仅示意性给出部分组件，并不意味着移动设备只包括图16所示组件。
147.相应地，本技术实施例还提供一种存储有计算机程序的计算机可读存储介质，所述计算机程序被计算机执行时能够实现上述各实施例提供的数据处理方法步骤或功能。
148.通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该
计算机软件产品可以存储在计算机可读存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
149.最后应说明的是：以上实施例仅用以说明本技术的技术方案，而非对其限制；尽管参照前述实施例对本技术进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本技术各实施例技术方案的精神和范围。