疲劳检测方法、装置、电子设备和可读存储介质与流程

技术特征：
1.一种疲劳检测方法，其特征在于，所述方法包括：获取待检对象的人脸时序图像；对所述人脸时序图像进行状态检测，得到所述待检对象的状态时序信息；根据所述状态时序信息，确定所述待检对象的目标疲态时间窗口，以及与所述目标疲态时间窗口前后相邻的目标状态时间窗口；将所述目标疲态时间窗口对应的状态信息与所述目标状态时间窗口对应的状态信息进行差分计算，以检测所述待检对象是否处于疲劳状态。2.根据权利要求1所述的疲劳检测方法，其特征在于，所述状态时序信息包括眼部状态时序信息以及头部姿态时序信息；所述根据所述状态时序信息，确定所述待检对象的目标疲态时间窗口，以及与所述目标疲态时间窗口前后相邻的目标状态时间窗口，包括：根据所述眼部状态时序信息，确定所述待检对象的闭眼时间窗口，以及与所述闭眼时间窗口前后相邻的睁眼时间窗口，将所述闭眼时间窗口设置为目标疲劳时间窗口，所述睁眼时间窗口设置为目标状态时间窗口；所述将所述目标疲态时间窗口对应的状态信息与所述目标状态时间窗口对应的状态信息进行差分计算，检测所述待检对象是否处于疲劳状态，包括：将所述目标疲态时间窗口对应的眼部状态信息和头部姿态信息与所述目标状态时间窗口对应的眼部状态信息和头部姿态信息进行差分计算，以检测所述待检对象是否处于疲劳状态。3.根据权利要求2所述的疲劳检测方法，其特征在于，所述将所述目标疲态时间窗口对应的眼部状态信息和头部姿态信息与所述目标状态时间窗口对应的眼部状态信息和头部姿态信息进行差分计算，以检测所述待检对象是否处于疲劳状态，包括：将所述目标疲态时间窗口对应的眼部状态信息与所述目标状态时间窗口对应的眼部状态信息进行差分计算，得到眼部差分状态值；将所述目标疲态时间窗口对应的头部姿态信息与所述目标状态时间窗口对应的头部姿态信息进行差分计算，得到头部差分姿态值；检测所述眼部差分状态值是否大于设定眼部阈值，以及所述头部差分姿态值是否大于设定头部阈值；若所述眼部差分状态值大于设定眼部阈值和/或所述头部差分姿态值大于设定头部阈值，设定所述待检对象处于疲劳状态。4.根据权利要求2所述的疲劳检测方法，其特征在于，所述根据所述眼部状态时序信息，确定所述待检对象的闭眼时间窗口，以及与所述闭眼时间窗口前后相邻的睁眼时间窗口，包括：根据所述眼部状态时序信息，确定得到连续闭眼的闭眼时段；检测所述闭眼时段是否大于设定时长阈值；若大于，根据所述闭眼时段对应的起始闭眼时刻以及终止闭眼时刻，确定得到闭眼时间窗口；统计与所述闭眼时间窗口前后相邻的睁眼时段，根据所述睁眼时段对应的起始睁眼时刻以及终止睁眼时刻，确定得到睁眼时间窗口。5.根据权利要求1所述的疲劳检测方法，其特征在于，所述获取待检对象的人脸时序图
像，包括：获取针对所述待检对象的时序图像，对所述时序图像进行人脸识别，得到所述时序图像中的人脸检测框以及各所述人脸检测框的坐标信息；确定所述时序图像的首帧图像的目标人脸检测框以及该目标人脸检测框的坐标信息；根据所述首帧图像的目标人脸检测框的坐标信息以及所述时序图像的其他图像中的各人脸检测框的坐标信息，确定得到所述时序图像的其他图像中的目标人脸检测框；对所述时序图像中的目标人脸检测框进行剪裁，得到人脸时序图像。6.根据权利要求1所述的疲劳检测方法，其特征在于，所述对所述人脸时序图像进行状态检测，得到所述待检对象的状态时序信息，包括：根据预设的眼部状态检测网络，对所述人脸时序图像进行眼部状态检测，得到所述待检对象的眼部状态时序信息；根据预设的头部姿态检测网络，对所述人脸时序图像进行头部姿态检测，得到所述待检对象的头部姿态时序信息；根据所述眼部状态时序信息以及所述头部姿态时序信息，得到所述待检对象的状态时序信息。7.根据权利要求6所述的疲劳检测方法，其特征在于，所述眼部状态检测网络包括局部检测分支以及全局检测分支，所述根据预设的眼部状态检测网络，对所述人脸时序图像进行眼部状态检测，得到所述待检对象的眼部状态时序信息的步骤包括：通过所述局部检测分支，对所述人脸时序图像进行区域处理，得到眼部局域图像，对所述眼部局域图像进行特征提取，得到所述待检对象的局部区域特征；通过所述全局检测分支，对所述人脸时序图像进行特征提取，得到所述待检对象的全局人脸特征，对所述局部区域特征以及所述全局人脸特征进行融合处理，得到所述待检对象的眼部状态时序信息。8.根据权利要求6所述的疲劳检测方法，其特征在于，所述头部姿态检测网络包括主干网络以及多个分支检测网络，所述根据预设的头部姿态检测网络，对所述人脸时序图像进行头部姿态检测，得到所述待检对象的头部姿态时序信息的步骤包括：通过所述主干网络，对所述人脸时序图像进行特征提取，得到主干特征；将所述主干特征分别输入至各所述分支检测网络，得到各所述分支检测网络对应的姿态预测值；根据各所述分支检测网络对应的姿态预测值，得到所述待检对象的头部姿态时序信息。9.一种疲劳检测装置，其特征在于，所述疲劳检测装置包括：图像获取模块，用于获取待检对象的人脸时序图像；状态检测模块，用于对所述人脸时序图像进行状态检测，得到所述待检对象的状态时序信息；时间确定模块，用于根据所述状态时序信息，确定所述待检对象的目标疲态时间窗口，以及与所述目标疲态时间窗口前后相邻的目标状态时间窗口；疲劳检测模块，用于将所述目标疲态时间窗口对应的状态信息与所述目标状态时间窗口对应的状态信息进行差分计算，检测所述待检对象是否处于疲劳状态。
10.一种电子设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现权利要求1至8任一项所述的疲劳检测方法。11.一种可读存储介质，其特征在于，所述可读存储介质包括计算机程序，所述计算机程序运行时控制所述可读存储介质所在校正设备执行权利要求1至8任一项所述的疲劳检测方法。

技术总结
本发明实施例提供一种疲劳检测方法、装置、电子设备和可读存储介质，涉及图像处理技术领域，本发明实施例通过获取待检对象的人脸时序图像，对人脸时序图像进行状态检测，得到待检对象的状态时序信息，根据状态时序信息，确定待检对象的目标疲态时间窗口，以及与目标疲态时间窗口前后相邻的目标状态时间窗口，然后将目标疲态时间窗口对应的状态信息与目标状态时间窗口对应的状态信息进行差分计算，即可检测待检对象是否处于疲劳状态，降低了检测噪声的影响，可以有效提高疲劳检测的准确性。可以有效提高疲劳检测的准确性。可以有效提高疲劳检测的准确性。


技术研发人员：武庆雄
受保护的技术使用者：丰图科技（深圳）有限公司
技术研发日：2021.12.30
技术公布日：2023/7/19