一种用于辅助盲人人际交流的人脸识别系统及方法与流程

技术特征：
1.一种用于辅助盲人人际交流的人脸识别系统，其特征在于，包括：人脸检测模块、人脸配准模块、人脸属性识别模块、语音播放模块、人脸向量化模块和人脸检索模块；其中：所述人脸检测模块，用于获取当前交流对象的人脸图像和人脸关键点；所述人脸配准模块，用于根据所述当前交流对象的人脸图像和所述人脸关键点获取摆正后的人脸图像；人脸属性识别模块，用于根据所述摆正后的人脸图像识别人脸属性，所述人脸属性包括但不限于所述当前交流对象的性别、年龄、表情，并通过所述语音播放模块播报所述人脸属性；人脸向量化模块，用于将所述摆正后的人脸图像进行编码，生成特征向量；人脸检索模块，用于根据所述特征向量，将所述特征向量与数据库中的存储的特征向量进行比对；如果比对结果为所述特征向量已存在记录，则调出相应信息记录通过所述语音播放模块播报语音信息，所述语音信息包括但不限于何时遇见过所述当前交流对象，何地遇见过所述当前交流对象；如果比对结果为所述特征向量不存在信息记录，则以所述特征向量为键，同时调取时空信息，所述时空信息包括：gps的地点信息和时钟的当前时刻信息，以键值对的形式关联所述特征向量和所述时空信息并存入所述数据库中。2.根据权利要求1所述的系统，其特征在于，所述人脸检测模块基于cascade-haar检测器、mtcnn检测器或retinaface检测器实现。3.根据权利要求1所述的系统，其特征在于，所述人脸配准模块基于aam算法、asm算法、clm算法、或cascade regression算法实现。4.根据权利要求1所述的系统，其特征在于，人脸属性识别模块基于经训练的多分类/回归头残差网络实现，所述网络实现包括以下分类：所述当前交流对象性别、所述当前交流对象表情、预测得到的所述当前交流对象年龄。5.根据权利要求1所述的系统，其特征在于，人脸向量化模块基于经训练的残差神经网络实现，所述网络输出512维向量。6.根据权利要求1所述的系统，其特征在于，人脸检索模块基于向量度量算法、knn算法或ann算法实现。7.根据权利要求6所述的系统，其特征在于，所述向量度量算法包括但不限于：欧氏距离度量方法、余弦距离度量方法或内积度量方法。8.根据权利要求7所述的系统，其特征在于，所述人脸检索模块通过如下方式将所述特征向量与数据库中的存储的特征向量进行比对，以及所述如果比对结果为所述特征向量已存在记录：所述数据库以键值对的形式存在，所述特征向量为键，所述当前交流对象的信息记录为值，如果存在已记录向量与输入向量度量距离低于设定阈值，则认为该对象存在记录。9.一种用于辅助盲人人际交流的人脸识别方法，其特征在于，包括：所述人脸检测模块获取当前交流对象的人脸图像和人脸关键点；所述人脸配准模块根据所述当前交流对象的人脸图像和所述人脸关键点获取摆正后的人脸图像；人脸属性识别模块根据所述摆正后的人脸图像识别人脸属性，所述人脸属性包括但不限于所述当前交流对象的性别、年龄、表情，并通过语音播放模块播报所述人脸属性；
人脸向量化模块将所述摆正后的人脸图像进行编码，生成特征向量；人脸检索模块根据所述特征向量，基于向量度量算法，将所述特征向量与数据库中的存储的特征向量进行比对；如果比对结果为所述特征向量已存在记录，则调出相应信息记录通过所述语音播放模块播报语音信息，所述语音信息包括但不限于何时遇见过所述当前交流对象，何地遇见过所述当前交流对象；如果比对结果为所述特征向量不存在信息记录，则以所述特征向量为键，同时调取时空信息，所述时空信息包括：gps的地点信息和时钟的当前时刻信息，以键值对的形式关联所述特征向量和所述时空信息并存入所述数据库中。

技术总结
本发明提供了一种用于辅助盲人人际交流的人脸识别系统及方法，包括人脸属性识别技术和人脸检索技术，辅助盲人与陌生人进行人际交流。通过人脸属性识别技术协助盲人建立对交流对象的印象，通过人脸检索技术协助盲人记忆对交流对象的印象，提升盲人人际交往的效率和体验，同时也可以达到安全保护，确认交流对象身份，防止上当受骗的效果。防止上当受骗的效果。防止上当受骗的效果。


技术研发人员：盛邱煬 俞益洲 李一鸣 乔昕
受保护的技术使用者：杭州深睿博联科技有限公司
技术研发日：2022.01.28
技术公布日：2022/6/10