一种情绪识别方法、装置、设备及介质与流程

技术特征：
1.一种情绪识别方法，其特征在于，所述方法包括：获取目标对象的目标脸部图像；利用特征提取模型对所述目标脸部图像进行特征提取，得到图像特征向量；将所述图像特征向量输入关键点检测模型，得到人脸关键点信息；其中，所述人脸关键点表征人脸部位上与情绪关联的关键点；利用情绪识别模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息。2.根据权利要求1所述的方法，其特征在于，所述利用情绪识别模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息之前，所述方法还包括：根据所述人脸关键点信息，得到目标情绪参考信息；所述利用情绪识别模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息包括：将所述图像特征向量和所述目标情绪参考信息进行拼接，得到目标特征向量；利用所述情绪识别模型对所述目标特征向量进行情绪识别处理，得到所述目标对象的情绪类别信息。3.根据权利要求2所述的方法，其特征在于，所述人脸关键点信息包括第一关键点信息和第二关键点信息，其中，第一关键点和第二关键点位于目标人脸部位；所述根据所述人脸关键点信息，得到目标情绪参考信息包括：根据所述第一关键点信息和所述第二关键点信息，得到所述目标人脸部位的情绪参考信息，并将所述目标人脸部位的情绪参考信息作为所述目标情绪参考信息。4.根据权利要求2所述的方法，其特征在于，所述人脸关键点信息包括第一关键点信息和第二关键点信息，其中，第一关键点位于第一目标人脸部位，第二关键点位于第二目标人脸部位；所述根据所述人脸关键点信息，得到目标情绪参考信息包括：根据所述第一关键点信息和所述第一目标人脸部位对应的第一权重，得到第一目标人脸部位的情绪参考信息；根据所述第二关键点信息和所述第二目标人脸部位对应的第二权重，得到第二目标人脸部位的情绪参考信息；对所述第一目标人脸部位的情绪参考信息和所述第二目标部位的情绪参考信息进行整合处理，得到所述目标情绪参考信息。5.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取多个样本数据以及对应数据标签，所述多个样本数据包括多个样本人脸图像的样本图像特征向量和样本人脸关键点信息；所述数据标签为所述样本人脸图像中对象的情绪类别信息；将多个所述样本人脸图像的所述样本图像特征向量和所述样本人脸关键点信息输入预设机器学习模型进行类别预测处理，得到所述多个样本人脸图像中对象的情绪类别预测信息；基于所述情绪类别预测信息和所述对应数据标签，训练所述预设机器学习模型，得到
所述情绪识别模型。6.根据权利要求1所述的方法，其特征在于，所述获取目标对象的目标脸部图像之前，所述方法还包括：采集所述目标对象在连续时间段内预设数量帧的脸部图像；从所述预设数量帧的脸部图像中，得到目标脸部图像。7.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取所述目标对象的生理信息；所述利用情绪模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息包括：利用所述情绪识别模型对所述图像特征向量、所述人脸关键点信息和所述目标对象的生理信息进行情绪识别处理，得到所述目标对象的情绪类别信息。8.一种情绪识别装置，其特征在于，所述装置包括：目标脸部图像获取模块，用于获取目标对象的目标脸部图像；特征提取模块，用于利用特征提取模型对所述目标脸部图像进行特征提取，得到图像特征向量；关键点信息确定模块，用于将所述图像特征向量输入关键点检测模型，得到人脸关键点信息；其中，所述人脸关键点表征人脸部位上与情绪关联的关键点；情绪识别模块，用于利用情绪识别模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息。9.一种电子设备，其特征在于，包括：处理器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为执行所述指令，以实现如权利要求1至7中任一项所述的情绪识别方法。10.一种计算机可读存储介质，其特征在于，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得所述电子设备能够执行如权利要求1至7中任一项所述的情绪识别方法。

技术总结
本申请涉及一种情绪识别方法、装置、设备及介质，本申请通过获取目标对象的目标脸部图像，利用特征提取模型对目标脸部图像进行特征提取，得到图像特征向量，将图像特征向量输入关键点检测模型，得到人脸部位上与情绪关联的人脸关键点的人脸关键点信息，利用情绪识别模型对图像特征向量和人脸关键点信息进行情绪识别处理，得到目标对象的情绪类别信息，将图像特征向量和与情绪相关联的人脸关键点信息共同作为情绪识别模型的输入，大大提高了情绪类别结果的准确性，提高情绪识别模型识别处理的效率。的效率。的效率。


技术研发人员：季栋辉 于波 朱成彦
受保护的技术使用者：中汽创智科技有限公司
技术研发日：2021.12.10
技术公布日：2022/4/12