一种视线检测方法、装置、设备及介质与流程

技术特征：
1.一种视线检测方法，其特征在于，所述方法包括：获取目标对象的脸部图像；根据所述目标对象的脸部图像确定所述目标对象的头部姿态；若所述头部姿态中的偏航角和俯仰角满足预设条件，对所述脸部图像进行三维视线分析处理，确定所述目标对象的视线；若所述偏航角和所述俯仰角中任意一个不满足所述预设条件，利用预设视线识别模型对所述脸部图像进行视线分析处理，确定所述目标对象的视线。2.根据权利要求1所述的方法，其特征在于，所述获取目标对象的脸部图像之前，所述方法还包括：利用目标相机采集所述目标对象的图像数据；所述获取目标对象的脸部图像包括：从所述目标对象的图像数据中提取所述目标对象的脸部图像。3.根据权利要求2所述的方法，其特征在于，所述利用目标相机采集所述目标对象的图像数据之前，所述方法还包括：标定所述目标相机的内参和畸变系数；所述根据所述目标对象的脸部图像确定所述目标对象的头部姿态包括：从所述目标对象的脸部图像中提取人脸特征点；确定所述人脸特征点的二维坐标；基于预设三维人脸模型确定所述人脸特征点的三维坐标；根据所述内参、所述畸变系数、所述人脸特征点的二维坐标和所述人脸特征点的三维坐标，确定所述目标对象的头部姿态。4.根据权利要求3所述的方法，其特征在于，所述对所述脸部图像进行三维视线分析处理，确定所述目标对象的视线包括：从所述人脸特征点中确定第一目标点、第二目标点和第三目标点，其中，所述第一目标点和所述第二目标点是所述目标对象双眼的对称点，第三目标点为所述目标对象左眼眼睑或右眼眼睑的中心点；确定所述第一目标点的三维坐标、所述第二目标点的三维坐标和所述第三目标点的三维坐标；根据所述第一目标点的三维坐标、所述第二目标点的三维坐标和所述第三目标点的三维坐标，确定目标平面；根据所述第一目标点的三维坐标和所述第二目标点的三维坐标，确定第四目标点的三维坐标，所述第四目标点位于所述第一目标点和所述第二目标点的连线上，且位于所述目标对象脸部的对称轴上；确定所述目标平面的法线；确定过所述第四目标点的三维坐标且平行于所述法线的直线为所述目标对象的视线。5.根据权利要求1所述的方法，其特征在于，所述利用预设视线识别模型对所述脸部图像进行视线分析处理，确定所述目标对象的视线包括：利用所述预设视线识别模型中的卷积层对所述脸部图像进行特征提取处理，得到所述脸部图像对应的特征信息；
利用所述预设视线识别模型中的全连接层对所述脸部图像对应的特征信息进行视线回归处理，确定所述目标对象的视线。6.根据权利要求1所述的方法，其特征在于，所述预设条件包括预设偏航角范围和预设俯仰角范围；所述预设偏航角范围为
‑
45度至45度，所述预设俯仰角范围为
‑
20度至20度。7.一种视线检测装置，其特征在于，所述装置包括：脸部图像获取模块，用于获取目标对象的脸部图像；头部姿态确定模块，用于根据所述目标对象的脸部图像确定所述目标对象的头部姿态；第一视线分析模块，用于在所述头部姿态中的偏航角和俯仰角满足预设条件时，对所述脸部图像进行三维视线分析处理，确定所述目标对象的视线；第二视线分析模块，用于在所述头部姿态中的偏航角和俯仰角中任意一个不满足预设条件时，利用预设视线识别模型对所述脸部图像进行视线分析处理，确定所述目标对象的视线。8.一种电子设备，其特征在于，所述设备包括处理器和存储器，所述存储器中存储有至少一条指令或者至少一段程序，所述至少一条指令或者至少一段程序由所述处理器加载并执行以实现如权利要求1至6任意一项所述的视线检测方法。9.一种计算机可读存储介质，其特征在于，所述存储介质中存储有至少一条指令或至少一段程序，所述至少一条指令或至少一段程序由处理器加载并执行以实现如权利要求1至6任意一项所述的视线检测方法。10.一种计算机程序产品，包括计算机指令，其特征在于，所述计算机指令被处理器执行时实现权利要求1至6任一项所述的视线检测方法。

技术总结
本申请公开一种视线检测方法、装置、设备及介质，本申请通过获取目标对象的脸部图像，根据所述目标对象的脸部图像确定所述目标对象的头部姿态，若所述头部姿态中的偏航角和俯仰角满足预设条件，对所述脸部图像进行三维视线分析处理，确定所述目标对象的视线，可以在偏航角和俯仰角在预设角度范围内时，保证视线检测的精度，并提高视线检测效率；若所述偏航角和所述俯仰角中任意一个不满足所述预设条件，利用预设视线识别模型对所述脸部图像进行视线分析处理，确定所述目标对象的视线，可以解决预设视线识别模型训练时因样本不均衡导致的噪声问题，提高视线检测的精度。提高视线检测的精度。提高视线检测的精度。


技术研发人员：李丰军 周剑光 朱成彦
受保护的技术使用者：中汽创智科技有限公司
技术研发日：2021.07.15
技术公布日：2021/11/9