一种人脸嘴部识别方法、装置、系统及存储介质与流程

技术特征：
1.一种人脸嘴部识别方法，其特征在于，包括：获取客户端的目标视频；根据所述目标视频，获取与所述目标视频对应的面部平均模板；利用所述面部平均模板进行所述目标视频中的人脸对齐，得到对齐图像信息；对所述对齐图像信息进行嘴部区域裁切，得到所述嘴部区域对应的识别图像，以便于对所述识别图像进行识别。2.如权利要求1所述人脸嘴部识别方法，其特征在于，所述根据所述目标视频，获取与所述目标视频对应的面部平均模板，包括：对所述目标视频进行逐帧读取，获得待处理视频帧；根据所述待处理视频帧获得所述平均模板。3.如权利要求2所述人脸嘴部识别方法，其特征在于，所述根据所述待处理视频帧获得所述平均模板，包括：基于人脸检测算法对所述待处理视频帧进行识别，获得所述平均模板。4.如权利要求3所述人脸嘴部识别方法，其特征在于，所述基于人脸检测算法对所述待处理视频帧进行识别，获得所述平均模板，包括：基于人脸检测算法，对每一帧的所述待处理视频帧进行识别，得到所述待处理视频帧对应的预设数量的面部特征点；将所述目标视频中所有的所述待处理视频帧的帧间的所述面部特征点构成特征点序列；对所述特征点序列进行均值计算，得到所述平均模板。5.如权利要求1所述人脸嘴部识别方法，其特征在于，所述根据所述目标视频，获取与所述目标视频对应的面部平均模板之前，还包括：将所述目标视频根据预视频流统一规格，转换为对应格式的目标视频。6.如权利要求5所述人脸嘴部识别方法，其特征在于，所述视频流统一规格包括预设编码格式和预设封装格式。7.如权利要求1所述人脸嘴部识别方法，其特征在于，所述利用所述面部平均模板进行所述目标视频中的人脸对齐，得到对齐图像信息，包括：根据所述面部平均模板与现有的所述目标视频的人脸模板之间建立映射，得到映射矩阵；利用所述映射矩阵对所述目标视频中的人脸对齐，得到对齐图像信息。8.如权利要求7所述人脸嘴部识别方法，其特征在于，所述利用所述映射矩阵对所述目标视频中的人脸对齐，得到对齐图像信息，包括：应用所述映射矩阵对所述目标视频的所有待处理视频帧和每个所述待处理视频帧对应的面部特征点进行映射转换，得到所述对齐图像信息。9.如权利要求8所述人脸嘴部识别方法，其特征在于，所述应用所述映射矩阵对所述目标视频的所有待处理视频帧和每个所述待处理视频帧对应的面部特征点进行映射转换，得到所述对齐图像信息，包括：利用所述映射矩阵对所述目标视频的每个所述待处理视频帧进行逐帧映射，得到目标尺寸的视频帧序列；以及，
使用所述映射矩阵对每个所述待处理视频帧进行针对所述面部特征点的映射，得到目标尺寸的对应的目标特征点；将所述视频帧序列和所述目标特征点作为所述对齐图像信息。10.如权利要求9所述人脸嘴部识别方法，其特征在于，所述对所述对齐图像信息进行嘴部区域裁切，得到所述嘴部区域对应的识别图像，包括：基于所述对齐图像信息，获取每个所述待处理视频帧的特征点序列；根据所述特征点序列进行嘴部区域裁切，得到所述识别图像。11.如权利要求10所述人脸嘴部识别方法，其特征在于，所述基于所述对齐图像信息，获取每个所述待处理视频帧的特征点序列，包括：基于所述对齐图像信息中的所有视频帧序列，逐帧计算所述视频帧序列中每一帧的roi，得到所述特征点序列。12.如权利要求11所述人脸嘴部识别方法，其特征在于，所述根据所述特征点序列进行嘴部区域裁切，得到所述识别图像，包括：计算所有所述特征点序列的均值，得到特征均值；根据所述特征均值对应的尺寸，对所述视频帧序列中每一帧进行裁切，得到所述识别图像。13.如权利要求1所述人脸嘴部识别方法，其特征在于，所述对所述对齐图像信息进行嘴部区域裁切，得到所述嘴部区域对应的识别图像，以便于对所述识别图像进行识别之后，还包括：获取所述识别图像；对所述识别图像中的特征点进行聚类，得到聚类结果；利用训练好的识别模型对所述聚类结果进行识别，得到识别标签；判断预设身份数据库中是否有所述识别标签对应的身份信息；若是，则判定所述客户端的所述识别标签匹配成功，通过识别流程。14.一种人脸嘴部识别装置，其特征在于，包括：获取模块，用于获取客户端的目标视频；所述获取模块，还用于根据所述目标视频，获取与所述目标视频对应的面部平均模板；对比模块，用于利用所述面部平均模板进行所述目标视频中的人脸对齐，得到对齐图像信息；裁切模块，用于对所述对齐图像信息进行嘴部区域裁切，得到所述嘴部区域对应的识别图像，以便于对所述识别图像进行识别。15.一种人脸嘴部识别系统，其特征在于，包括存储器以及处理器，所述存储器中存储有人脸嘴部识别程序，所述处理器运行所述人脸嘴部识别程序以使所述人脸嘴部识别系统执行如权利要求1-13任一项所述的人脸嘴部识别方法。16.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有人脸嘴部识别程序，所述人脸嘴部识别程序被处理器执行时实现如权利要求1-13任一项所述的人脸嘴部识别方法。

技术总结
本发明提供了一种人脸嘴部识别方法、装置、系统及存储介质，涉及人脸识别及金融科技技术领域。所述人脸嘴部识别方法包括：获取客户端的目标视频；获取对应的面部平均模板；进行目标视频中人脸对齐得到对齐图像信息；对对齐图像信息进行嘴部区域裁切得到识别图像。本发明通过获取到目标视频的平均模板并对人脸对齐后，再进行特定区域的裁切，从而得到进一步识别的嘴部区域的识别图像，实现了在不同清晰度与分辨率图片输入下都能保证有稳定大小的脸部区域输出，使得分割的嘴部区域更有匹配性，相较于常规的直接测出坐标值的方式更加合理可靠，同时预备多个检测模型，满足不同硬件条件下的支持，提高了兼容性和准确性。提高了兼容性和准确性。提高了兼容性和准确性。


技术研发人员：李邦茂 何盛华 黄炎鑫
受保护的技术使用者：平安银行股份有限公司
技术研发日：2023.07.03
技术公布日：2023/8/3