屏幕解锁方法和电子设备与流程

1.本技术涉及智能终端技术领域，特别涉及屏幕解锁方法和电子设备。


背景技术：

2.很多电子设备具有屏幕锁定功能。屏幕锁定后，如果用户希望再次操作电子设备，需要对屏幕进行解锁。目前主流的屏幕解锁方式有人脸解锁以及指纹解锁等。但是，这些屏幕解锁方式在某些恶劣条件下，容易出现用户连续多次解锁屏幕不成功、甚至完全无法解锁屏幕的情况，屏幕解锁效率低，降低了用户体验。


技术实现要素：

3.本技术提供了一种屏幕解锁方法和电子设备，能够提高恶劣条件下电子设备的屏幕解锁效率，提升用户体验。
4.第一方面，本技术实施例提供一种屏幕解锁方法，应用于电子设备，包括：获取第一解锁图像；如果根据解锁图像解锁失败，确定第一解锁图像所属的第一图像类别，第一图像类别用于描述获取第一解锁图像时所述电子设备所处的场景；统计第一图像类别的解锁失败次数；获取第二解锁图像；根据第二解锁图像解锁屏幕，获取第一图像类别的解锁失败次数，当第一图像类别的解锁失败次数超过第一阈值，显示第一提示信息，第一提示信息用于提示用户更新第一图像类别的解锁图像。该方法中，统计第一图像类别的解锁失败次数，如果解锁失败次数超过第一阈值，提示用户更新第一图像类别的解锁图像，从而使得用户下一次处于该图像类别对应的场景时，能够提高屏幕解锁的成功率，从而提高了屏幕解锁效率，提升了用户体验。
5.在一种可能的实现方式中，确定第一解锁图像所属的第一图像类别，包括：使用预设第一模型检测第一解锁图像所属的图像类别，得到第一图像类别；预设第一模型用于检测解锁图像所属的图像类别。
6.在一种可能的实现方式中，获取第一解锁图像之前，还包括：判断用户设置的解锁图像中不存在第二图像类别的解锁图像，根据用户设置的解锁图像生成第二图像类别的解锁图像。
7.在一种可能的实现方式中，根据用户设置的解锁图像生成第二图像类别的解锁图像，包括：从用户设置的解锁图像中获取第三图像类别的解锁图像，根据第三图像类别的解锁图像生成第二图像类别的解锁图像。
8.第二方面，本技术实施例提供一种屏幕解锁方法，应用于电子设备，包括：获取第一解锁图像；若根据第一解锁图像解锁失败，确定第一解锁图像所属的第一图像类别，第一图像类别用于描述获取第一解锁图像时所述电子设备所处的场景；统计第一图像类别的解锁失败次数；获取第二解锁图像；根据第二解锁图像解锁所述屏幕，获取第一图像类别的解锁失败次数，当第一图像类别的解锁失败次数超过第一阈值时，根据预设解锁图像生成第一图像类别的解锁图像。
9.在一种可能的实现方式中，确定第一解锁图像所属的第一图像类别，包括：使用预设第一模型检测第一解锁图像所属的图像类别，得到第一图像类别；预设第一模型用于检测解锁图像所属的图像类别。
10.在一种可能的实现方式中，根据预设解锁图像生成第一图像类别的解锁图像，包括：如果预设解锁图像中不存在第一图像类别的解锁图像，根据预设解锁图像生成第一图像类别的解锁图像；如果预设解锁图像中存在第一图像类别的解锁图像，且第一图像类别的解锁图像是用户设置的解锁图像，根据预设解锁图像生成第一图像类别的解锁图像；如果预设解锁图像中存在第一图像类别的解锁图像，且第一图像类别的解锁图像是根据第一预设解锁图像生成的解锁图像，根据第二预设解锁图像生成第一图像类别的解锁图像。
11.在一种可能的实现方式中，根据预设解锁图像生成第一图像类别的解锁图像，包括：从预设解锁图像中获取第四图像类别的解锁图像，根据第四图像类别的解锁图像生成第一图像类别的解锁图像。
12.第三方面，本技术实施例提供一种电子设备，包括处理器和存储器，存储器用于存储计算机程序，当处理器执行计算机程序时，使得电子设备执行第一方面任一项的方法。
13.第四方面，本技术实施例提供一种电子设备，包括处理器和存储器，存储器用于存储计算机程序，当处理器执行计算机程序时，使得电子设备执行第二方面任一项的方法
14.第五方面，本技术实施例提供一种计算机可读存储介质，计算机可读存储介质中存储有计算机程序，当其在计算机上运行时，使得计算机执行第一方面任一项的方法。
15.第六方面，本技术实施例提供一种计算机可读存储介质，计算机可读存储介质中存储有计算机程序，当其在计算机上运行时，使得计算机执行第二方面任一项的方法。
16.第七方面，本技术提供一种计算机程序，当计算机程序被计算机执行时，用于执行第一方面的方法。
17.在一种可能的设计中，第七方面中的程序可以全部或者部分存储在与处理器封装在一起的存储介质上，也可以部分或者全部存储在不与处理器封装在一起的存储器上。
附图说明
18.图1a为本技术实施例电子设备的结构示意图；
19.图1b为本技术实施例电子设备的软件结构示意图；
20.图2为本技术屏幕解锁方法一个实施例的流程示意图；
21.图3a为本技术屏幕解锁方法中预先设置阶段的ui界面图；
22.图3b为本技术屏幕解锁方法中解锁阶段的ui界面图；
23.图3c为本技术屏幕解锁方法另一个实施例的流程示意图；
24.图4为本技术屏幕解锁方法又一个实施例的流程示意图
25.图5为本技术屏幕解锁方法又一个实施例的流程示意图；
26.图6为本技术屏幕解锁方法又一个实施例的流程示意图；
27.图7为本技术电子设备另一个实施例的结构示意图。
具体实施方式
28.本技术的实施方式部分使用的术语仅用于对本技术的具体实施例进行解释，而非
旨在限定本技术。
29.目前，对于人脸解锁的屏幕解锁方式，一般由用户在电子设备中预先设置用户的人脸图像作为屏幕解锁的比对标准；当用户触发屏幕解锁时，电子设备采集用户的人脸图像，将其与电子设备中预设的人脸图像比对，比对结果为一致，则解锁屏幕，否则不解锁屏幕。人脸解锁能否成功与用户和电子设备所处场景相关，上述场景包括用户和电子设备所在环境的客观条件例如光照条件、以及用户面部特征等。如果用户解锁屏幕时的光照条件和人脸图像设置时的光照条件相近，且用户面部未发生大的改变，电子设备在触发屏幕解锁时采集到的人脸图像和用户预先设置的人脸图像相近，则电子设备能够解锁屏幕，用户解锁屏幕成功。但是，如果用户解锁屏幕时的光照条件与用户预先设置人脸图像时的光照条件相差较大，比如光线强度相对较小或者相对较大、人脸逆光等等，或者，用户面部发生改变例如出现遮挡等情况，则电子设备在触发屏幕解锁时采集到的人脸图像可能与用户预先设置的人脸图像存在较大差别，从而电子设备无法解锁屏幕，用户解锁屏幕失败。如果电子设备采集人脸图像的场景不改变，就可能出现用户多次解锁屏幕无法成功的情况，降低屏幕解锁效率，降低用户体验。
30.同样的，对于指纹解锁的屏幕解锁方式，一般由用户在电子设备中预存用户的若干个指纹图像作为屏幕解锁的比对标准，当用户触发屏幕解锁时，电子设备采集用户的指纹图像，将其与预存的指纹图像比对，比对结果为一致，则屏幕解锁成功，否则屏幕解锁失败。正常情况下，用户可以通过输入指纹的方式解锁屏幕，但是，用户的手指指纹可能出现干指纹、湿指纹、裂指纹、或者低温下指纹等情况，导致屏幕解锁失败，这些情况与用户场景相关，上述场景包括用户和电子设备所在环境的客观条件例如温度条件、以及用户指纹特征等。干指纹是指用户的手指过干；湿指纹是指用户的手指过湿；低温下指纹是指用户的手指温度过低，这三种情况下电子设备采集到的指纹图像容易出现与实际指纹纹路不匹配的问题，从而与用户预先设置的指纹图像无法比对一致，造成解锁失败；上述裂指纹是指用户的手指指纹由于皲裂、受伤等情况而出现裂痕，此时，由于用户手指指纹本身出现变化，电子设备采集到的指纹图像与用户预先设置的指纹图像也无法比对一致，造成解锁失败。如果手指指纹出现的上述情况无法缓解，就会导致用户连续多次解锁屏幕失败、甚至完全无法解锁屏幕，降低屏幕解锁效率，降低用户体验。
31.可见，不管是人脸解锁还是指纹解锁，都会出现由于场景下的条件恶劣导致的屏幕解锁失败的问题，从而使得电子设备的屏幕解锁效率低，用户体验差。
32.为此，本技术实施例提供一种屏幕解锁方法和电子设备，能够提高恶劣条件下的屏幕解锁效率，提升用户体验。
33.图1a示意了一种电子设备100的结构示意图。
34.电子设备100可以包括手机、可折叠电子设备、平板电脑、桌面型计算机、膝上型计算机、手持计算机、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer，umpc)、上网本、蜂窝电话、个人数字助理(personal digital assistant，pda)、增强现实(augmented reality，ar)设备、虚拟现实(virtual reality，vr)设备、人工智能(artificial intelligence,ai)设备、可穿戴式设备、车载设备、智能家居设备、或智慧城市设备中的至少一种。本技术实施例对该电子设备100的具体类型不作特殊限制。
35.电子设备100可以包括处理器110，外部存储器接口120，内部存储器121，通用串行
总线(universal serial bus，usb)接头130，充电管理模块140，电源管理模块141，电池142，天线1，天线2，移动通信模块150，无线通信模块160，音频模块170，扬声器170a，受话器170b，麦克风170c，耳机接口170d，传感器模块180，按键190，马达191，指示器192，摄像模组193，显示屏194，以及用户标识模块(subscriber identification module，sim)卡接口195等。其中传感器模块180可以包括压力传感器180a，陀螺仪传感器180b，气压传感器180c，磁传感器180d，加速度传感器180e，距离传感器180f，接近光传感器180g，指纹传感器180h，温度传感器180j，触摸传感器180k，环境光传感器180l，骨传导传感器180m等。
36.可以理解的是，本技术实施例示意的结构并不构成对电子设备100的具体限定。在本技术另一些实施例中，电子设备100可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。
37.处理器110可以包括一个或多个处理单元，例如：处理器110可以包括应用处理器(application processor，ap)，调制解调处理器，图形处理器(graphics processing unit，gpu)，图像信号处理器(image signal processor，isp)，控制器，视频编解码器，数字信号处理器(digital signal processor，dsp)，基带处理器，和/或神经网络处理器(neural-network processing unit，npu)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。
38.处理器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。
39.处理器110中还可以设置存储器，用于存储指令和数据。在一些实施例中，处理器110中的存储器可以为高速缓冲存储器。该存储器可以保存处理器110用过或使用频率较高的指令或数据。如果处理器110需要使用该指令或数据，可从该存储器中直接调用。避免了重复存取，减少了处理器110的等待时间，因而提高了系统的效率。
40.在一些实施例中，处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit，i2c)接口，集成电路内置音频(inter-integrated circuit sound，i2s)接口，脉冲编码调制(pulse code modulation，pcm)接口，通用异步收发传输器(universal asynchronous receiver/transmitter，uart)接口，移动产业处理器接口(mobile industry processor interface，mipi)，通用输入输出(general-purpose input/output，gpio)接口，用户标识模块(subscriber identity module，sim)接口，和/或通用串行总线(universal serial bus，usb)接口等。处理器110可以通过以上至少一种接口连接触摸传感器、音频模块、无线通信模块、显示器、摄像头等模块。
41.可以理解的是，本技术实施例示意的各模块间的接口连接关系，只是示意性说明，并不构成对电子设备100的结构限定。在本技术另一些实施例中，电子设备100也可以采用上述实施例中不同的接口连接方式，或多种接口连接方式的组合。
42.usb接头130是一种符合usb标准规范的接口，可以用于连接电子设备100和外围设备，具体可以是mini usb接头，micro usb接头，usb type c接头等。usb接头130可以用于连接充电器，实现充电器为该电子设备100充电，也可以用于连接其他电子设备，实现电子设备100与其他电子设备之间传输数据。也可以用于连接耳机，通过耳机输出电子设备中存储的音频。该接头还可以用于连接其他电子设备，例如vr设备等。在一些实施例中，通用串行
总线的标准规范可以为usb1.x、usb2.0、usb3.x和usb4。
43.充电管理模块140用于接收充电器的充电输入。其中，充电器可以是无线充电器，也可以是有线充电器。在一些有线充电的实施例中，充电管理模块140可以通过usb接口130接收有线充电器的充电输入。在一些无线充电的实施例中，充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时，还可以通过电源管理模块141为电子设备供电。
44.电源管理模块141用于连接电池142，充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入，为处理器110，内部存储器121，显示屏194，摄像模组193，和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量，电池循环次数，电池健康状态(漏电，阻抗)等参数。在其他一些实施例中，电源管理模块141也可以设置于处理器110中。在另一些实施例中，电源管理模块141和充电管理模块140也可以设置于同一个器件中。
45.电子设备100的无线通信功能可以通过天线1，天线2，移动通信模块150，无线通信模块160，调制解调处理器以及基带处理器等实现。
46.天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用，以提高天线的利用率。例如：可以将天线1复用为无线局域网的分集天线。在另外一些实施例中，天线可以和调谐开关结合使用。
47.移动通信模块150可以提供应用在电子设备100上的包括2g/3g/4g/5g等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器，开关，功率放大器，低噪声放大器(low noise amplifier，lna)等。移动通信模块150可以由天线1接收电磁波，并对接收的电磁波进行滤波，放大等处理，传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大，经天线1转为电磁波辐射出去。在一些实施例中，移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中，移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
48.调制解调处理器可以包括调制器和解调器。其中，调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后，被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170a，受话器170b等)输出声音信号，或通过显示屏194显示图像或视频。在一些实施例中，调制解调处理器可以是独立的器件。在另一些实施例中，调制解调处理器可以独立于处理器110，与移动通信模块150或其他功能模块设置在同一个器件中。
49.无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wireless local area networks，wlan)(如无线保真(wireless fidelity，wi-fi)网络)，蓝牙(bluetooth，bt)，蓝牙低功耗(bluetooth low energy，ble)，超宽带(ultra wide band，uwb),全球导航卫星系统(global navigation satellite system，gnss)，调频(frequency modulation，fm)，近距离无线通信技术(near field communication，nfc)，红外技术(infrared，ir)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波，将电磁波信号调频以及滤波处理，将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发
送的信号，对其进行调频，放大，经天线2转为电磁波辐射出去。
50.在一些实施例中，电子设备100的天线1和移动通信模块150耦合，天线2和无线通信模块160耦合，使得电子设备100可以通过无线通信技术与网络和其他电子设备通信。该无线通信技术可以包括全球移动通讯系统(global system for mobile communications，gsm)，通用分组无线服务(general packet radio service，gprs)，码分多址接入(code division multiple access，cdma)，宽带码分多址(wideband code division multiple access，wcdma)，时分码分多址(time-division code division multiple access，td-scdma)，长期演进(long term evolution，lte)，bt，gnss，wlan，nfc，fm，和/或ir技术等。该gnss可以包括全球卫星定位系统(global positioning system，gps)，全球导航卫星系统(global navigation satellite system，glonass)，北斗卫星导航系统(beidou navigation satellite system，bds)，准天顶卫星系统(quasi-zenith satellite system，qzss)和/或星基增强系统(satellite based augmentation systems，sbas)。
51.电子设备100可以通过gpu，显示屏194，以及应用处理器等实现显示功能。gpu为图像处理的微处理器，连接显示屏194和应用处理器。gpu用于执行数学和几何计算，用于图形渲染。处理器110可包括一个或多个gpu，其执行程序指令以生成或改变显示信息。
52.显示屏194用于显示图像，视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display，lcd)，有机发光二极管(organic light-emitting diode，oled)，有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的，amoled)，柔性发光二极管(flex light-emitting diode，fled)，miniled，microled，micro-oled，量子点发光二极管(quantum dot light emitting diodes，qled)等。在一些实施例中，电子设备100可以包括1个或多个显示屏194。
53.电子设备100可以通过摄像模组193，isp，视频编解码器，gpu，显示屏194以及应用处理器ap、神经网络处理器npu等实现摄像功能。
54.摄像模组193可用于采集拍摄对象的彩色图像数据以及深度数据。isp可用于处理摄像模组193采集的彩色图像数据。例如，拍照时，打开快门，光线通过镜头被传递到摄像头感光元件上，光信号转换为电信号，摄像头感光元件将该电信号传递给isp处理，转化为肉眼可见的图像。isp还可以对图像的噪点，亮度，肤色进行算法优化。isp还可以对拍摄场景的曝光，色温等参数优化。在一些实施例中，isp可以设置在摄像模组193中。
55.在一些实施例中，摄像模组193可以由彩色摄像模组和3d感测模组组成。
56.在一些实施例中，彩色摄像模组的摄像头的感光元件可以是电荷耦合器件(charge coupled device，ccd)或互补金属氧化物半导体(complementary metal-oxide-semiconductor，cmos)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给isp转换成数字图像信号。isp将数字图像信号输出到dsp加工处理。dsp将数字图像信号转换成标准的rgb，yuv等格式的图像信号。
57.在一些实施例中，3d感测模组可以是(time of flight，tof)3d感测模块或结构光(structured light)3d感测模块。其中，结构光3d感测是一种主动式深度感测技术，结构光3d感测模组的基本零组件可包括红外线(infrared)发射器、ir相机模等。结构光3d感测模组的工作原理是先对被拍摄物体发射特定图案的光斑(pattern)，再接收该物体表面上的光斑图案编码(light coding)，进而比对与原始投射光斑的异同，并利用三角原理计算出
物体的三维坐标。该三维坐标中就包括电子设备100距离被拍摄物体的距离。其中，tof 3d感测可以是主动式深度感测技术，tof 3d感测模组的基本组件可包括红外线(infrared)发射器、ir相机模等。tof 3d感测模组的工作原理是通过红外线折返的时间去计算tof 3d感测模组跟被拍摄物体之间的距离(即深度)，以得到3d景深图。
58.结构光3d感测模组还可应用于人脸识别、体感游戏机、工业用机器视觉检测等领域。tof 3d感测模组还可应用于游戏机、增强现实(augmented reality，ar)/虚拟现实(virtual reality，vr)等领域。
59.在另一些实施例中，摄像模组193还可以由两个或更多个摄像头构成。这两个或更多个摄像头可包括彩色摄像头，彩色摄像头可用于采集被拍摄物体的彩色图像数据。这两个或更多个摄像头可采用立体视觉(stereo vision)技术来采集被拍摄物体的深度数据。立体视觉技术是基于人眼视差的原理，在自然光源下，透过两个或两个以上的摄像头从不同的角度对同一物体拍摄影像，再进行三角测量法等运算来得到电子设备100与被拍摄物之间的距离信息，即深度信息。
60.在一些实施例中，电子设备100可以包括1个或多个摄像模组193。具体的，电子设备100可以包括1个前置摄像模组193以及1个后置摄像模组193。其中，前置摄像模组193通常可用于采集面对显示屏194的拍摄者自己的彩色图像数据以及深度数据，后置摄像模组可用于采集拍摄者所面对的拍摄对象(如人物、风景等)的彩色图像数据以及深度数据。
61.在一些实施例中，处理器110中的cpu或gpu或npu可以对摄像模组193所采集的彩色图像数据和深度数据进行处理。在一些实施例中，npu可以通过骨骼点识别技术所基于的神经网络算法，例如卷积神经网络算法(cnn)，来识别摄像模组193(具体是彩色摄像模组)所采集的彩色图像数据，以确定被拍摄人物的骨骼点。cpu或gpu也可来运行神经网络算法以实现根据彩色图像数据确定被拍摄人物的骨骼点。在一些实施例中，cpu或gpu或npu还可用于根据摄像模组193(可以是3d感测模组)所采集的深度数据和已识别出的骨骼点来确认被拍摄人物的身材(如身体比例、骨骼点之间的身体部位的胖瘦情况)，并可以进一步确定针对该被拍摄人物的身体美化参数，最终根据该身体美化参数对被拍摄人物的拍摄图像进行处理，以使得该拍摄图像中该被拍摄人物的体型被美化。后续实施例中会详细介绍如何基于摄像模组193所采集的彩色图像数据和深度数据对被拍摄人物的图像进行美体处理，这里先不赘述。
62.数字信号处理器用于处理数字信号，还可以处理其他数字信号。例如，当电子设备100在频点选择时，数字信号处理器用于对频点能量进行傅里叶变换等。
63.视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样，电子设备100可以播放或录制多种编码格式的视频，例如：动态图像专家组(moving picture experts group，mpeg)1，mpeg2，mpeg3，mpeg4等。
64.npu为神经网络(neural-network，nn)计算处理器，通过借鉴生物神经网络结构，例如借鉴人脑神经元之间传递模式，对输入信息快速处理，还可以不断的自学习。通过npu可以实现电子设备100的智能认知等应用，例如：图像识别，人脸识别，语音识别，文本理解等。
65.外部存储器接口120可以用于连接外部存储卡，例如micro sd卡，实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信，实现数据存储功
能。例如将音乐，视频等文件保存在外部存储卡中。或将音乐，视频等文件从电子设备传输至外部存储卡中。
66.内部存储器121可以用于存储计算机可执行程序代码，该可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统，至少一个功能所需的应用程序(比如声音播放功能，图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据，电话本等)等。此外，内部存储器121可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(universal flash storage，ufs)等。处理器110通过运行存储在内部存储器121的指令，和/或存储在设置于处理器中的存储器的指令，执行电子设备100的各种功能方法或数据处理。
67.电子设备100可以通过音频模块170，扬声器170a，受话器170b，麦克风170c，耳机接口170d，以及应用处理器等实现音频功能。例如音乐播放，录音等。
68.音频模块170用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中，音频模块170可以设置于处理器110中，或将音频模块170的部分功能模块设置于处理器110中。
69.扬声器170a，也称“喇叭”，用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170a收听音乐，或输出免提通话的音频信号。
70.受话器170b，也称“听筒”，用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时，可以通过将受话器170b靠近人耳接听语音。
71.麦克风170c，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，用户可以通过人嘴靠近麦克风170c发声，将声音信号输入到麦克风170c。电子设备100可以设置至少一个麦克风170c。在另一些实施例中，电子设备100可以设置两个麦克风170c，除了采集声音信号，还可以实现降噪功能。在另一些实施例中，电子设备100还可以设置三个，四个或更多麦克风170c，实现采集声音信号，降噪，还可以识别声音来源，实现定向录音功能等。
72.耳机接口170d用于连接有线耳机。耳机接口170d可以是usb接口130，也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform，omtp)标准接口，美国蜂窝电信工业协会(cellular telecommunications industry association of the usa，ctia)标准接口。
73.压力传感器180a用于感受压力信号，可以将压力信号转换成电信号。在一些实施例中，压力传感器180a可以设置于显示屏194。压力传感器180a
74.的种类很多，如电阻式压力传感器，电感式压力传感器，电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180a，电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194，电子设备100根据压力传感器180a检测该触摸操作强度。电子设备100也可以根据压力传感器180a的检测信号计算触摸的位置。在一些实施例中，作用于相同触摸位置，但不同触摸操作强度的触摸操作，可以对应不同的操作指令。例如：当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时，执行查看短消息的指令。当有
触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时，执行新建短消息的指令。
75.陀螺仪传感器180b可以用于确定电子设备100的运动姿态。在一些实施例中，可以通过陀螺仪传感器180b确定电子设备100围绕三个轴(即，x，y和z轴)的角速度。陀螺仪传感器180b可以用于拍摄防抖。示例性的，当按下快门，陀螺仪传感器180b检测电子设备100抖动的角度，根据角度计算出镜头模组需要补偿的距离，控制镜头反向运动抵消电子设备100的抖动，实现防抖。陀螺仪传感器180b还可以用于导航，体感游戏场景。
76.气压传感器180c用于测量气压。在一些实施例中，电子设备100根据气压传感器180c测得的气压值计算海拔高度，辅助定位和导航。
77.磁传感器180d包括霍尔传感器。电子设备100可以利用磁传感器180d检测翻盖皮套的开合。当电子设备为可折叠电子设备，磁传感器180d可以用于检测电子设备的折叠或展开，或折叠角度。在一些实施例中，当电子设备100是翻盖机时，电子设备100可以根据磁传感器180d检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态，设置翻盖自动解锁等特性。
78.加速度传感器180e可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态，应用于横竖屏切换，计步器等应用。
79.距离传感器180f，用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中，拍摄场景，电子设备100可以利用距离传感器180f测距以实现快速对焦。
80.接近光传感器180g可以包括例如发光二极管(led)和光检测器，例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到的反射光的强度大于阈值时，可以确定电子设备100附近有物体。当检测到的反射光的强度小于阈值时，电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180g检测用户手持电子设备100贴近耳朵通话，以便自动熄灭屏幕达到省电的目的。接近光传感器180g也可用于皮套模式，口袋模式自动解锁与锁屏。
81.环境光传感器180l可以用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180l也可用于拍照时自动调节白平衡。环境光传感器180l还可以与接近光传感器180g配合，检测电子设备100是否被遮挡，例如电子设备在口袋里。当检测到电子设备被遮挡或在口袋里，可以使部分功能(例如触控功能)处于禁用状态，以防误操作。
82.指纹传感器180h用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁，访问应用锁，指纹拍照，指纹接听来电等。
83.温度传感器180j用于检测温度。在一些实施例中，电子设备100利用温度传感器180j检测的温度，执行温度处理策略。例如，当通过温度传感器180j检测的温度超过阈值，电子设备100执行降低处理器的性能，以便降低电子设备的功耗以实施热保护。在另一些实施例中，当通过温度传感器180j检测的温度低于另一阈值时，电子设备100对电池142加热。在其他一些实施例中，当温度低于又一阈值时，电子设备100可以对电池142的输出电压升压。
84.触摸传感器180k，也称“触控器件”。触摸传感器180k可以设置于显示屏194，由触摸传感器180k与显示屏194组成触摸屏，也称“触控屏”。触摸传感器180k用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器，以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中，触摸传感器180k也可以设置于电子设备100的表面，与显示屏194所处的位置不同。
85.骨传导传感器180m可以获取振动信号。在一些实施例中，骨传导传感器180m可以获取人体声部振动骨块的振动信号。骨传导传感器180m也可以接触人体脉搏，接收血压跳动信号。在一些实施例中，骨传导传感器180m也可以设置于耳机中，结合成骨传导耳机。音频模块170可以基于该骨传导传感器180m获取的声部振动骨块的振动信号，解析出语音信号，实现语音功能。应用处理器可以基于该骨传导传感器180m获取的血压跳动信号解析心率信息，实现心率检测功能。
86.按键190可以包括开机键，音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入，产生与电子设备100的用户设置以及功能控制有关的键信号输入。
87.马达191可以产生振动提示。马达191可以用于来电振动提示，也可以用于触摸振动反馈。例如，作用于不同应用(例如拍照，音频播放等)的触摸操作，可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作，马达191也可对应不同的振动反馈效果。不同的应用场景(例如：时间提醒，接收信息，闹钟，游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
88.指示器192可以是指示灯，可以用于指示充电状态，电量变化，也可以用于指示消息，未接来电，通知等。
89.sim卡接口195用于连接sim卡。sim卡可以通过插入sim卡接口195，或从sim卡接口195拔出，实现和电子设备100的接触和分离。电子设备100可以支持1个或多个sim卡接口。sim卡接口195可以支持nano sim卡，micro sim卡，sim卡等。同一个sim卡接口195可以同时插入多张卡。多张卡的类型可以相同，也可以不同。sim卡接口195也可以兼容不同类型的sim卡。sim卡接口195也可以兼容外部存储卡。电子设备100通过sim卡和网络交互，实现通话以及数据通信等功能。在一些实施例中，电子设备100采用esim，即：嵌入式sim卡。esim卡可以嵌在电子设备100中，不能和电子设备100分离。
90.电子设备100的软件系统可以采用分层架构，事件驱动架构，微核架构，微服务架构，或云架构。本技术实施例以分层架构的android系统为例，示例性说明电子设备100的软件结构。
91.图1b是本技术实施例的电子设备100的软件结构框图。
92.分层架构将软件分成若干个层，每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中，将android系统分为五层，从上至下分别为应用程序层，应用程序框架层，安卓运行时(android runtime，art)和原生c/c 库，硬件抽象层(hardware abstract layer，hal)以及内核层。
93.应用程序层可以包括一系列应用程序包。
94.如图1b所示，应用程序包可以包括相机，图库，日历，通话，地图，导航，wlan，蓝牙，音乐，视频，短信息等应用程序。
95.应用程序框架层为应用程序层的应用程序提供应用编程接口(application programming interface，api)和编程框架。应用程序框架层包括一些预先定义的函数。
96.如图1b所示，应用程序框架层可以包括窗口管理器，内容提供器，视图系统，资源管理器，通知管理器,活动管理器，输入管理器等。
97.窗口管理器提供窗口管理服务(window manager service，wms),wms可以用于窗口管理、窗口动画管理、surface管理以及作为输入系统的中转站。
98.内容提供器用来存放和获取数据，并使这些数据可以被应用程序访问。该数据可以包括视频，图像，音频，拨打和接听的电话，浏览历史和书签，电话簿等。
99.视图系统包括可视控件，例如显示文字的控件，显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如，包括短信通知图标的显示界面，可以包括显示文字的视图以及显示图片的视图。
100.资源管理器为应用程序提供各种资源，比如本地化字符串，图标，图片，布局文件，视频文件等等。
101.通知管理器使应用程序可以在状态栏中显示通知信息，可以用于传达告知类型的消息，可以短暂停留后自动消失，无需用户交互。比如通知管理器被用于告知下载完成，消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知，例如后台运行的应用程序的通知，还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息，发出提示音，电子设备振动，指示灯闪烁等。
102.活动管理器可以提供活动管理服务(activity manager service，ams)，ams可以用于系统组件(例如活动、服务、内容提供者、广播接收器)的启动、切换、调度以及应用进程的管理和调度工作。
103.输入管理器可以提供输入管理服务(input manager service，ims)，ims可以用于管理系统的输入，例如触摸屏输入、按键输入、传感器输入等。ims从输入设备节点取出事件，通过和wms的交互，将事件分配至合适的窗口。
104.安卓运行时包括核心库和安卓运行时。安卓运行时负责将源代码转换为机器码。安卓运行时主要包括采用提前(ahead or time，aot)编译技术和及时(just in time，jit)编译技术。
105.核心库主要用于提供基本的java类库的功能，例如基础数据结构、数学、io、工具、数据库、网络等库。核心库为用户进行安卓应用开发提供了api。。
106.原生c/c 库可以包括多个功能模块。例如：表面管理器(surface manager)，媒体框架(media framework)，libc，opengl es、sqlite、webkit等。
107.其中，表面管理器用于对显示子系统进行管理，并且为多个应用程序提供了2d和3d图层的融合。媒体框架支持多种常用的音频，视频格式回放和录制，以及静态图像文件等。媒体库可以支持多种音视频编码格式，例如:mpeg4，h.264，mp3，aac，amr，jpg，png等。opengl es提供应用程序中2d图形和3d图形的绘制和操作。sqlite为电子设备100的应用程序提供轻量级关系型数据库。
108.硬件抽象层运行于用户空间(user space)，对内核层驱动进行封装，向上层提供调用接口。
109.内核层是硬件和软件之间的层。内核层至少包含显示驱动，摄像头驱动，音频驱
动，传感器驱动。
110.下面结合捕获拍照场景，示例性说明电子设备100软件以及硬件的工作流程。
111.当触摸传感器180k接收到触摸操作，相应的硬件中断被发给内核层。内核层将触摸操作加工成原始输入事件(包括触摸坐标，触摸操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件，识别该输入事件所对应的控件。以该触摸操作是触摸单击操作，该单击操作所对应的控件为相机应用图标的控件为例，相机应用调用应用框架层的接口，启动相机应用，进而通过调用内核层启动摄像头驱动，通过摄像模组193捕获静态图像或视频。
112.为了便于理解，本技术以下实施例将以具有图1a和图1b所示结构的电子设备为例，结合附图和应用场景，对本技术实施例提供的方法进行具体说明。
113.在进行电子设备的屏幕解锁时，屏幕解锁方式包括人脸解锁、指纹解锁、虹膜解锁等，不同的屏幕解锁方式中使用的解锁图像不同。人脸图像和虹膜图像可以由摄像头拍摄得到，指纹图像可以由指纹传感器采集得到。本技术实施例中主要以人脸解锁和指纹解锁为例。
114.图2是本技术屏幕解锁方法一个实施例的流程图，如图2所示，该方法可以包括：
115.步骤201：电子设备获取第一解锁图像。
116.用户通过对电子设备进行指定操作，触发电子设备执行屏幕解锁流程，相应的，电子设备可以根据用户触发的屏幕解锁方式，获取对应的解锁图像，例如，用户触发的屏幕解锁方式是指纹解锁，则第一解锁图像可以是指纹图像，用户触发的屏幕解锁方式是人脸解锁，则第一解锁图像可以是人脸图像。
117.步骤202：若根据第一解锁图像解锁失败，电子设备确定第一解锁图像所属的第一图像类别，第一图像类别用于描述获取第一解锁图像时电子设备所处场景。
118.本技术实施例中，针对于不同的屏幕解锁方式，可以对该屏幕解锁方式下电子设备可能遇到的场景进行分类，具体分类标准本技术实施例不作限定。例如基于前述描述，可以将人脸解锁时的场景划分为正常、暗光、遮挡、强光、逆光、其他等图像类别，则如果第一解锁图像是人脸图像，第一图像类别可以是上述正常、暗光、遮挡、强光、逆光、其他等图像类别之一，可以将指纹解锁时的场景划分为干指纹、湿指纹、冷指纹、强光指纹、暗光指纹、裂指纹和其他等图像类别，则如果第一解锁图像是指纹图像，第一图像类别可以是上述干指纹、湿指纹、冷指纹、强光指纹、暗光指纹、裂指纹和其他等图像类别之一。
119.步骤203：电子设备统计第一图像类别的解锁失败次数。
120.第一图像类别的解锁失败次数用于记录第一时间段内使用属于第一图像类别的人脸图像解锁屏幕失败的次数，第一时间段可以是以步骤203的执行时间作为结束时间点的预设时长的时间段，第一时间段的具体时长本技术实施例不作限定。电子设备中可以记录每次解锁失败的发生时间、以及解锁失败所使用的人脸图像所属的图像类别，则电子设备可以方便的统计第一时间段内使用属于第一图像类别的人脸图像解锁屏幕失败的次数。
121.步骤204：电子设备获取第二解锁图像。
122.用户通过对电子设备进行指定操作，触发电子设备执行屏幕解锁流程，相应的，电子设备可以根据用户触发的屏幕解锁方式，获取对应的解锁图像，例如，用户触发的屏幕解锁方式是指纹解锁，则第二解锁图像可以是指纹图像，用户触发的屏幕解锁方式是人脸解
锁，则第二解锁图像可以是人脸图像。
123.第一解锁图像和第二解锁图像是用户触发电子设备执行两次屏幕解锁流程时分别获取的解锁图像，因此，第一解锁图像和第二解锁图像可以是相同或者不同屏幕解锁方式下的解锁图像，本技术实施例不作限定。例如，假设用户第一次触发了人脸解锁，相应的，电子设备获取的第一解锁图像是人脸图像，假设用户第二次触发了指纹解锁，相应的，电子设备获取的第二解锁图像是指纹图像；或者，假设用户第一次触发了人脸解锁，相应的，电子设备获取的第一解锁图像是人脸图像，假设用户第二次也触发了人脸解锁，相应的，电子设备获取的第二解锁图像是人脸图像。需要说明的是，用户触发第一次屏幕解锁和第二次屏幕解锁的时间间隔本技术实施例不作限定，两次屏幕解锁之间用户是否触发电子设备进行了屏幕解锁本技术实施例不做限定。
124.步骤205：电子设备根据第二解锁图像解锁屏幕，获取第一图像类别的解锁失败次数，当第一图像类别的解锁失败次数超过第一阈值，显示第一提示信息，第一提示信息用于提示用户更新第一图像类别的解锁图像。
125.其中，第一阈值的具体取值本技术实施例不作限定。
126.该方法中，统计第一图像类别的解锁失败次数，如果解锁失败次数超过第一阈值，提示用户更新第一图像类别的解锁图像，从而使得用户下一次处于该图像类别对应的场景时，能够提高电子设备屏幕解锁的成功率，从而提高了电子设备的屏幕解锁效率，提升了用户体验。
127.以下以解锁图像是人脸图像为例，通过实例对本技术屏幕解锁方法的实现进行更为详细的说明。
128.本技术实施例提供的屏幕解锁方法可以适用于人脸解锁的屏幕解锁方式。本技术实施例提供的屏幕解锁方法可以包括预先设置阶段、以及解锁阶段两个阶段。
129.在预先设置阶段，电子设备中预设图像库，图像库用于存储各种图像类别的人脸图像。本技术图像库中可以设置至少两种图像类别的人脸图像，每种图像类别可以设置至少一个人脸图像。设置的人脸图像例如可以是电子设备拥有者例如机主的人脸图像。人脸图像的图像类别用于描述电子设备获取人脸图像时所处的场景。例如在图3a中以预设正常、暗光、遮挡、强光、逆光、其他共6种图像类别为例。上述6种图像类别与用户使用人脸解锁方式解锁屏幕时用户和电子设备所处场景相关。例如上述的“暗光”、“强光”、“逆光”三种图像类别主要与场景中的光线强度和光照方向相关，图像类别“遮挡”是指遮挡用户的面部信息，与场景中用户自身面部遮挡情况相关，图像类别“正常”是用户日常解锁的场景，该场景中光线强度、光照方向以及用户自身面部情况都在某一标准内，图像类别“其他”对应于上述图像类别对应场景之外的场景。除非用户定制电子设备，电子设备未被用户使用时，图像库中每种图像类别下存储的人脸图像可以为空，等待用户使用电子设备后自主设置。
130.参见图3a，为用户设置图像库中人脸图像的用户界面(user interface，ui)示例图，其中，
131.用户如果需要启动人脸解锁，可以进入电子设备的解锁密码设定界面210，选择“人脸”控件进入人脸设置界面220。在人脸设置界面220中展示图像库中为人脸图像预设的上述6种图像类别，用户可以根据自身意愿以及场景条件(如设置时环境中的光线强度、光照方向、面部是否遮挡等)来选择设置哪些图像类别的人脸图像，或者，电子设备也可以指
定用户必须设置某个图像类别(如类别“正常”)的人脸图像；以图3a为例，用户选择图像类别“正常”对应的“设置”控件，进入“正常”这一类别的人脸图像设置界面230。用户可以在人脸图像设置界面230中执行“正常”类别人脸图像的编辑操作，上述编辑操作可以包括但不限于：新增人脸图像、删除人脸图像等操作。新增人脸图像的具体过程图3a中未示出，举例来说，用户选择“添加新人脸”控件，相应的，电子设备检测到人脸图像添加操作，启动摄像头拍摄图像，从拍摄的图像中检测到人脸图像，存储检测到的人脸图像从而完成人脸图像的设置。
132.需要说明的是，每一种图像类别设置的人脸图像的数量本技术不作限定。如果用户希望启动人脸解锁，用户需要在上述图像类别中的至少一个图像类别设置至少一个人脸图像，举例来说，用户在正常这一图像类别设置人脸图像“人脸1”，之后，电子设备才可以启动人脸解锁。
133.需要说明的是，用户不仅可以在上述启动人脸解锁的过程中打开人脸设置界面220，进行人脸id的设置，在启动人脸解锁后也可以随时打开人脸设置界面220对各图像类别的人脸图像进行新增、删除等编辑操作。
134.需要说明的是，界面220为可选界面。用户如果需要启动人脸解锁，也可以进入电子设备的解锁密码设定界面210，选择“人脸”控件，相应的，电子设备向用户展示人脸图像设置界面230，人脸图像设置界面230中可以展示图像库中的所有人脸图像。在该实现方式下，电子设备在人脸图像设置界面中可以不向用户提示人脸图像所属图像类别，仅列出用户设置的人脸图像，供用户对人脸图像进行编辑操作。
135.在预先设置阶段，电子设备中预设第一模型，第一模型用于检测人脸图像所属的图像类别。例如以上述6种图像类别为例，第一模型可以用于检测出人脸图像属于上述6种图像类别中的哪一种图像类别。
136.第一模型可以是训练好的n分类器，n是图像类别的总数量，延续上述6种图像类别的举例，则n的取值为6。在训练第一模型时，可以预设一n分类器，将不同场景下拍摄的人脸图像标注场景对应的图像类别后作为训练样本对n分类器进行训练，可以得到上述第一模型。第一模型的输入是人脸图像，输出是人脸图像属于n种图像类别中每一种图像类别的概率，概率值最高的图像类别可以认为是第一模型的输出结果，也即人脸图像所属图像类别。n分类器的算法本技术不作限定，例如可以是相关深度学习算法。
137.如果用户设置时不展示界面220，则用户在人脸图像设置界面230设置的人脸图像，可以由上述第一模型检测出图像类别后，存储至图像库中。
138.解锁阶段的ui界面图如图3b所示，假设用户仅设置电子设备中“正常”图像类别的至少一个人脸图像，则，如果用户和电子设备处于暗光场景下，也即光线亮度较低的场景下，因为电子设备在暗光场景下，其获取到的用户的人脸图像容易与用户预先在正常场景下设置的人脸图像之间存在差异，从而电子设备无法将暗光场景下采集的人脸图像与电子设备中预设的人脸图像比对成功，也即电子设备对采集的人脸图像验证失败，进而屏幕解锁失败，从而用户可能会碰到多次无法使用人脸解锁方式解锁电子设备的情况。在用户在暗光场景下多次无法使用人脸解锁方式解锁电子设备的情况下，如果电子设备统计的“暗光”图像类别的解锁失败次数满足预设条件，那么，在用户对电子设备的屏幕解锁成功后，例如用户从暗光场景移动到正常场景下通过人脸解锁成功解锁电子设备的屏幕后，电子设
备可以向用户展示提示信息，提示信息用于提示用户更新“暗光”图像类别的人脸图像。
139.需要说明的是，上述提示信息的具体表述方式本技术不作限定。例如图3b中以电子设备中未预先在图像库中设置“暗光”图像类别的人脸图像为例，从而提示信息可以用于提示用户新增“暗光”图像类别的人脸图像，如果图像库中已经设置有“暗光”图像类别的人脸图像，也可能出现图3b中所示的用户多次无法使用人脸解锁方式解锁电子设备的情况，此时，电子设备向用户展示的提示信息可以用于提示用户增加“暗光”图像类别的人脸图像或者替换已有的“暗光”图像类别的人脸图像。
140.图3b所示的ui界面示例图，还可以扩展至其他图像类别对应的场景下。例如将图3b中的暗光场景替换为强光场景，则电子设备中的提示信息可以替换为提示用户对强光类别的人脸图像进行更新。
141.参见图3c，为解锁阶段的流程示意图，如图3c所示，可以包括以下步骤：
142.步骤301：电子设备接收到解锁请求操作，获取第一人脸图像。
143.电子设备一般预设有按键或者指定手势，用于用户触发屏幕解锁。因此，如果电子设备处于屏幕锁定状态，检测到针对于指定按键的按压操作、或者检测到电子设备的屏幕上的指定手势操作，则电子设备接收到解锁请求操作。举例来说，假设预设按压电子设备的电源键用于触发电子设备触发屏幕解锁的人脸识别，则，如果用户在电子设备屏幕锁定的情况下按压电子设备电源键，电子设备可以启动摄像头拍摄用户图像，从拍摄到的用户图像中获取用户的第一人脸图像。
144.步骤302：电子设备将第一人脸图像与图像库中存储的人脸图像依次进行比对，如果第一人脸图像与图像库中的某一人脸图像的比对结果为一致，则电子设备解锁屏幕成功；如果与图像库中所有人脸图像的比对结果均为不一致，则电子设备解锁屏幕失败，执行步骤303。
145.电子设备解锁屏幕成功后，用户即可以使用电子设备完成所需操作，后续处理本技术不赘述。
146.步骤303：电子设备确定第一人脸图像所属的第一图像类别。
147.本步骤中，电子设备可以使用上述的第一模型确定人脸图像所属的第一图像类别。
148.第一图像类别的可能取值应与图像库中人脸图像的可能图像类别一致，也即如果图像库中人脸图像划分为正常、暗光、遮挡、强光、逆光、其他共6种图像类别，则，第一图像类别的可能取值可以为正常、暗光、遮挡、强光、逆光、或者其他。
149.步骤304：电子设备统计第一图像类别的解锁失败次数。
150.本步骤的实现可以参考步骤203，这里不赘述。
151.步骤305：电子设备判断第一图像类别的解锁失败次数是否超过第一阈值，如果超过，执行步骤306，如果未超过，本分支流程结束。
152.不管解锁失败次数是否超过第一阈值，电子设备仍然处于屏幕锁定状态，未解锁成功。
153.步骤306：电子设备接收到解锁请求操作，获取第二解锁图像，根据第二解锁图像解锁屏幕，展示第一提示信息。
154.其中，步骤305中的判断步骤也可以在电子设备解锁屏幕后执行，在判断结果为超
过第一阈值时，展示第一提示信息。
155.本步骤中第二解锁图像可以是指纹图像、或者人脸图像、或者虹膜图像等等，本技术实施例不作限定。
156.第一提示信息用于提示用户更新第一图像类别的人脸图像。可选地，电子设备在展示第一提示信息之前，可以判断是否存在第一图像类别的人脸图像；如果存在第一图像类别的人脸图像，说明该人脸图像可能存在问题，第一提示信息可以具体用于提示用户第一图像类别的人脸图像不准确，请用户重新设置第一图像类别的人脸图像，如果用户重新设置了第一图像类别的人脸图像，可以提高用户后续在该场景下成功解锁屏幕的可能性；如果不存在第一图像类别的人脸图像，第一提示信息可以具体用于提示用户新增第一图像类别的人脸图像，如果用户新增第一图像类别的人脸图像，则下一次在相同的环境条件下，用户使用人脸解锁时可以解锁成功，提高了解锁成功率，提升用户体验。
157.在图3b所示的方法中，对用户在一定时间内使用各个图像类别的人脸图像进行屏幕解锁的失败次数进行记录，如果某一图像类别对应的失败次数超过第一阈值，提示用户更新该图像类别的人脸图像，从而使得用户下一次处于该图像类别对应的场景时，能够提高屏幕解锁的成功率，从而提高了屏幕解锁效率，提升了用户体验。
158.在另一个实施例中，在预先设置阶段中用户设置至少一个图像类别的至少一个人脸图像后，电子设备判断用户设置的人脸图像中不存在第二图像类别的人脸图像，可以根据图像库中预设人脸图像生成第二图像类别的人脸图像。上述预设人脸图像可以是用户设置的人脸图像，也可以是根据用户设置的人脸图像生成的某个图像类别的人脸图像。相较于使用生成的人脸图像再生成的新的人脸图像，使用用户设置的人脸图像生成的新的人脸图像相对更为准确，因此，电子设备可以根据图像库中用户设置的人脸图像生成上述第二图像类别的人脸图像。通过依次对图像库中每个预设的图像类别执行上述处理，可以使得图像库中存储有每个预设的图像类别的人脸图像，从而提高用户在不同场景下的屏幕解锁效率。
159.电子设备根据用户设置的人脸图像生成第二图像类别的人脸图像时，可以使用预先指定的某个图像类别的人脸图像作为生成新的人脸图像的依据，例如，正常情况下，用户更容易在图像库中添加“正常”图像类别的人脸图像，基于此，电子设备根据用户设置的人脸图像生成第二图像类别的人脸图像具体可以包括：
160.从用户设置的人脸图像中获取第三图像类别的人脸图像，根据第三图像类别的人脸图像生成第二图像类别的人脸图像。
161.例如第三图像类别可以是上述举例中的“正常”图像类别。
162.第二图像类别可以是用户未设置人脸图像的图像类别，延续前述举例，如果第三图像类别是“正常”图像类别，第二图像类别可以是“正常”图像类别之外的图像类别，例如暗光、强光、逆光、遮挡等。
163.根据第三图像类别的人脸图像生成第二图像类别的人脸图像的方法举例如下：
164.可以预先训练一图像生成模型，用于根据第三图像类别的人脸图像生成第二图像类别的人脸图像。图像生成模型的训练样本可以是：若干个人脸图像对，每一个人脸图像对中包括：根据同一人脸生成的第三图像类别的人脸图像以及第二图像类别的人脸图像，预设的初始模型可以是神经网络模型，通过使用训练样本对初始模型进行训练，得到上述图
像生成模型，该图像生成模型的输入可以是第三图像类别的人脸图像，输出是第二图像类别的人脸图像。上述的神经网络模型具体可以是循环生成对抗网络(cyclegan)、unit、或者生成对抗网络(stargan)等。
165.此时图3b所示的步骤306中展示的第一提示信息可以具体用于提示用户更新第一图像类别的人脸图像。
166.由于用户在一定时间内使用第一图像类别的人脸图像进行屏幕解锁的失败次数超过第一阈值，说明电子设备的图像库中用户设置的第一图像类别的人脸图像不够准确或者是根据图像库中人脸图像生成的第一图像类别的人脸图像不够准确，也即第一图像类别的人脸图像可能与第一图像类别对应场景下电子设备实际获取到的人脸图像存在较大差异，通过用户重新设置第一图像类别的人脸图像，可以使得图像库中第一图像类别的人脸图像更为准确，从而提升用户使用第一图像类别的人脸图像进行屏幕解锁的效率，提升用户体验。
167.上述实施例中在预设阶段由电子设备根据图像库中预设的人脸图像来生成第二图像类别的人脸图像，与上述实施例不同的是，本实施例中不是在预设阶段根据图像库中预设的人脸图像生成新的人脸图像，而是在步骤305之后根据图像库中预设的人脸图像生成新的人脸图像，上述预设的人脸图像可以是用户设置的人脸图像，也可以是电子设备根据某一用户设置的人脸图像生成的人脸图像；此时，参见图4所示，相对于图3c所示实施例，可以将步骤306替换为以下的步骤401：
168.步骤401：电子设备接收到解锁请求操作，获取第二解锁图像，根据第二解锁图像解锁屏幕，根据图像库中预设人脸图像生成第一图像类别的人脸图像。
169.其中，步骤305中的判断步骤也可以在电子设备解锁屏幕后执行，在判断结果为超过第一阈值时，根据图像库中预设人脸图像生成第一图像类别的人脸图像。
170.可选地，本步骤中电子设备根据图像库中预设人脸图像生成第一图像类别的人脸图像，可以包括：
171.如果预设人脸图像中不存在第一图像类别的人脸图像，根据预设人脸图像生成第一图像类别的人脸图像；
172.如果预设人脸图像中存在第一图像类别的人脸图像，且第一图像类别的人脸图像是用户设置的人脸图像，根据预设人脸图像生成第一图像类别的人脸图像；
173.如果预设人脸图像中存在第一图像类别的人脸图像，且第一图像类别的人脸图像是根据第一预设人脸图像生成的人脸图像，根据第二预设人脸图像生成第一图像类别的人脸图像。
174.可选地，第一预设人脸图像和第二预设人脸图像不同。第一预设人脸图像和第二预设人脸图像分别是图像库中已有的人脸图像。
175.如果电子设备的图像库中预设的人脸图像中不存在第一图像类别的人脸图像，则可以使用图像库中预设的人脸图像生成第一图像类别的人脸图像，以便于用户后续再处于第一图像类别对应的场景时，能够提高屏幕解锁效率。
176.可选地，电子设备可以根据图像库中预先指定的第四图像类别的人脸图像来生成第一图像类别的人脸图像，此时，上述根据预设解锁图像生成第一图像类别的解锁图像可以包括：从预设人脸图像中获取第四图像类别的人脸图像，根据第四图像类别的人脸图像
生成第一图像类别的人脸图像。
177.可选地，相较于使用生成的人脸图像再生成的新的人脸图像，使用用户设置的人脸图像生成的新的人脸图像相对更为准确，因此，电子设备可以优先根据预设人脸图像中用户设置的人脸图像生成第一图像类别的人脸图像。进而，结合前述实现，电子设备可以根据用户设置的第四图像类别的人脸图像生成第一图像类别的人脸图像。
178.正常情况下，用户更容易在图像库中添加正常场景下的人脸图像，基于此，本步骤中的第四图像类别可以是上述举例中的“正常”图像类别。
179.如果图像库中存在第一图像类别的人脸图像，而且第一图像类别的人脸图像是用户设置的人脸图像，说明用户设置的第一图像类别的人脸图像可能与对应场景下电子设备采集的人脸图像存在偏差，因此，可以使用图像库中预设的人脸图像生成第一图像类别的人脸图像，以便于用户后续再处于第一图像类别对应的场景时，能够提高屏幕解锁效率；相较于使用生成的人脸图像再生成的新的人脸图像，使用用户设置的人脸图像生成的新的人脸图像相对更为准确，因此，电子设备可以优先根据图像库中用户设置的人脸图像生成第一图像类别的人脸图像，该用户设置的人脸图像可以是第一图像类别的人脸图像，也可以是其他图像类别的人脸图像。可选地，除了优先选择用户设置的人脸图像，还可以优先选择某一指定图像类别的人脸图像，或者两者结合，优先选择某一指定图像类别且用户设置的人脸图像。
180.如果图像库中存在第一图像类别的人脸图像，而且第一图像类别的人脸图像是根据图像库中第一预设人脸图像生成的人脸图像，此时，说明图像库中已有的根据第一预设人脸图像生成的人脸图像与第一图像类别对应场景下电子设备采集的人脸图像存在偏差，因此，可以使用图像库中上述第一预设人脸图像之外的第二预设人脸图像生成第一图像类别的人脸图像，以便于电子设备后续再处于第一图像类别对应的场景时，能够提高屏幕解锁效率；相较于使用生成的人脸图像再生成的新的人脸图像，使用用户设置的人脸图像生成的新的人脸图像相对更为准确，因此，上述第二预设人脸图像优选为图像库中用户设置的人脸图像，上述第二预设人脸图像可以是第一图像类别的人脸图像，也可以是其他图像类别的人脸图像。
181.图4所示的方法中，仅需要用户向电子设备中输入至少一个图像类别的至少一个人脸图像，即可以自动生成其他图像类别的人脸图像，无需用户在不同图像类别对应的物理场景下添加人脸图像，在提高屏幕解锁效率的基础上，进一步减少了用户对于人脸图像的设置操作，提升了用户体验。
182.需要说明的是，上述实施例也可以适用于指纹解锁的屏幕解锁方式下，区别仅在于，将上述实施例中的人脸替换为指纹，将针对于人脸图像的图像类别替换为针对于指纹图像的图像类别，例如针对于指纹图像的图像类别可以包括：干指纹、湿指纹、冷指纹、强光指纹、暗光指纹、裂指纹和其他。
183.例如，参见图5所示，可以将图3c中的人脸图像替换为指纹图像，此时，该方法可以包括：
184.步骤501：电子设备接收到解锁请求操作，获取第一指纹图像。
185.步骤502：电子设备将第一指纹图像与图像库中的指纹图像依次进行比对，如果第一指纹图像与图像库中一指纹图像的比对结果为一致，则电子设备解锁屏幕成功；如果与
图像库中所有指纹图像的比对结果均为不一致，则电子设备解锁屏幕失败，执行步骤503。
186.步骤503：电子设备确定第一指纹图像所属的第一图像类别。
187.步骤504：电子设备统计第一图像类别的解锁失败次数。
188.步骤505：电子设备判断第一图像类别对应的解锁失败次数是否超过第一阈值，如果超过，执行步骤506，如果未超过，本分支流程结束。
189.步骤506：电子设备接收到解锁请求操作，获取第二解锁图像，根据第二解锁图像解锁屏幕，展示第一提示信息。
190.其中，步骤505中的判断步骤也可以在电子设备解锁屏幕后执行，在判断结果为超过第一阈值时，展示第一提示信息。
191.图5所示方法的实现请参见图3c中的对应描述，这里不赘述。
192.参见图6所示，可以将图4中的人脸图像替换为指纹图像，此时，图6所示的方法与图5所示方法的区别仅在于：将步骤506替换为以下的步骤601。具体的，
193.步骤601：电子设备接收到解锁请求操作，获取第二解锁图像，根据第二解锁图像解锁屏幕，根据图像库中预设指纹图像生成第一图像类别的指纹图像。
194.图6所示方法的实现可以参见图4中的对应描述，这里不赘述。
195.同样的，上述实施例也可以适用于虹膜解锁的屏幕解锁方式下，区别仅在于，将上述人脸替换为虹膜，将针对于人脸图像的图像类别替换为针对于虹膜图像的图像类别，例如虹膜图像的图像类别可以与人脸图像的图像类别相似，包括：正常、暗光、强光、逆光、遮挡以及其他。
196.可以理解的是，上述实施例中的部分或全部步骤或操作仅是示例，本技术实施例还可以执行其它操作或者各种操作的变形。此外，各个步骤可以按照上述实施例呈现的不同的顺序来执行，并且有可能并非要执行上述实施例中的全部操作。
197.图7为本技术电子设备一个实施例的结构图，如图7所示，该电子设备700可以包括：处理器710、摄像头720、传感器模块730、显示屏740，其中，
198.摄像头720用于采集用户的人脸图像或者虹膜图像；传感器模块730可以是指纹传感器，用于采集用户的指纹图像；显示屏740用于向用户展示图像或者视频；处理器710用于执行图2、图3c～图6任一实施例提供的方法。
199.本技术实施例还提供一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，当其在计算机上运行时，使得计算机执行本技术图2、图3c～图6任一实施例提供的方法。
200.本技术实施例还提供一种计算机程序产品，该计算机程序产品包括计算机程序，当其在计算机上运行时，使得计算机执行本技术图2、图3c～图6任一实施例提供的方法。
201.本技术实施例中，“至少一个”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，a和/或b，可以表示单独存在a、同时存在a和b、单独存在b的情况。其中a，b可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项”及其类似表达，是指的这些项中的任意组合，包括单项或复数项的任意组合。例如，a，b和c中的至少一项可以表示：a，b，c，a和b，a和c，b和c或a和b和c，其中a，b，c可以是单个，也可以是多个。
202.本领域普通技术人员可以意识到，本文中公开的实施例中描述的各单元及算法步
骤，能够以电子硬件、计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本技术的范围。
203.所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
204.在本技术所提供的几个实施例中，任一功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本技术各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(read-only memory；以下简称：rom)、随机存取存储器(random access memory；以下简称：ram)、磁碟或者光盘等各种可以存储程序代码的介质。
205.以上所述，仅为本技术的具体实施方式，任何熟悉本技术领域的技术人员在本技术揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本技术的保护范围之内。本技术的保护范围应以所述权利要求的保护范围为准。