交互方法、装置、电子设备及存储介质与流程

技术特征：
1.一种交互方法，其特征在于，包括：获取n个图像，所述图像包括眼部区域和眉部区域，所述眼部区域包括第一眼和第二眼，所述眉部区域包括第一眉和第二眉，n为正整数；根据所述n个图像中的每个图像，计算所述第一眼和所述第二眼的开合差值信息和所述第一眉和所述第二眉的摆动差值信息；在所述开合差值信息满足第一预设条件，且所述摆动差值信息满足第二预设条件的情况下，根据所述n个图像，统计眨眼状态；根据所述眨眼状态，执行目标操作。2.根据权利要求1所述的方法，其特征在于，所述第一眼包括第一上眼睑和第一下眼睑，所述第二眼包括第二上眼睑和第二下眼睑；所述根据所述n个图像中的每个图像，计算所述第一眼和所述第二眼的开合差值信息和所述第一眉和所述第二眉的摆动差值信息，包括：根据所述每个图像，获取在第i时刻所述第一上眼睑和所述第一下眼睑的第一距离，以及所述第二上眼睑和所述第二下眼睑的第二距离，所述第一距离为所述第一上眼睑和所述第一下眼睑之间最大的垂直距离，所述第二距离为所述第二上眼睑和所述第二下眼睑之间最大的垂直距离；将所述第一距离与所述第二距离的差值作为在第i时刻所述第一眼和所述第二眼的开合差值信息，i为正整数，i与拍摄图像的时间对应。3.根据权利要求2所述的方法，其特征在于，所述第一眉包括第一眉峰，所述第二眉包括第二眉峰，所述第一眉与所述第一眼对应，所述第二眉与所述第二眼对应；所述根据所述n个图像中的每个图像，计算所述第一眼和所述第二眼的开合差值信息和所述第一眉和所述第二眉的摆动差值信息，包括：根据所述每个图像，获取在所述第i时刻所述第一眉峰与所述第一下眼睑的第三距离，以及所述第二眉峰和所述第二下眼睑的第四距离，所述第三距离为所述第一眉峰和所述第一下眼睑之间最大的垂直距离，所述第四距离为所述第二眉峰和所述第二下眼睑之间最大的垂直距离；将所述第三距离和所述第四距离的差值作为在第i时刻所述第一眉和所述第二眉的摆动差值信息。4.根据权利要求1所述的方法，其特征在于，所述根据所述n个图像中的每个图像，计算所述第一眼和所述第二眼的开合差值信息和所述第一眉和所述第二眉的摆动差值信息，包括：对所述n个图像中相邻的第一图像中的第一眉和第二眉进行图像识别，得到第j时刻与所述第一眉对应的第一眉曲线和与所述第二眉对应的第二眉曲线，以及在第j 1时刻与所述第一眉对应的第三眉曲线和与所述第二眉对应的第三眉曲线，j为正整数，所述第j时刻与所述第j 1时刻与相邻的第一图像对应；对比所述第一眉曲线和所述第三眉曲线，得到与所述第一眉对应的第一摆动曲率，以及对比所述第二眉曲线和所述第四眉曲线，得到与所述第二眉对应的第二摆动曲率；将所述第一摆动曲率和所述第二摆动曲率确定为所述摆动差值信息。5.根据权利要求1所述的方法，其特征在于，所述图像还包括眼镜区域，所述眼镜区域
包括与第一眼对应的第一镜框和与所述第二眼对应的第二镜框；所述根据所述眼部区域的目标眨眼状态，执行与所述目标眨眼状态对应的目标操作之前，所述方法还包括：根据所述n个图像中相邻的第二图像，计算在第r时刻所述第一镜框和在第r 1时刻第一镜框的第一高度变化差值信息，以及在所述第r时刻所述第二镜框和在所述第r 1时刻所述第二镜框的第二高度变化差值信息，r为正整数，所述第r时刻和所述第r 1时刻与相邻的第二图像对应；所述根据所述眼部区域的目标眨眼状态，根据所述n个图像，统计眨眼状态，包括：在所述第一高度变化差值信息或者所述第二高度变化差值信息满足第三预设条件的情况下，根据所述n个图像，统计眨眼状态。6.根据权利要求1所述的方法，其特征在于，所述眨眼状态包括眨眼频率；所述第一眼包括第一上眼睑和第一下眼睑；所述根据所述n个图像，统计眨眼状态，包括：从所述n个图像中提取第一预设时间段内的m个第三图像，m为大于1的正整数；根据所述m个第三图像中每个第三图像计算所述第一上眼睑和所述第一下眼睑的第五距离、与所述每个第三图像对应的目标开合差值信息和所述第一眉的第一眉毛中心高度；在m个第五距离中有预设次数的第五距离小于或等于预设距离、所述目标开合差值信息的值大于或等于预设开合差值信息的值、且所述第一眉毛中心高度小于或者等于预设眉毛中心高度的情况下，基于所述第一预设时间段和所述预设次数，得到所述眨眼频率。7.根据权利要求1所述的方法，其特征在于，所述眨眼状态包括眨眼频率；所述根据所述n个图像，统计眨眼状态，包括：根据所述n个图像中提取第二预设时间段内的l个第四图像，l为大于1的正整数；根据所述l个第四图像中每个第四图像，获取所述每个第四图像中所述第一眼的第一睑裂信息和所述第二眼的第二睑裂信息；分别对比l个第四图像中相邻至少两个图像之间的第一睑裂信息和第二睑裂信息，得到所述l个第四图像中的眨眼次数；根据所述第二预设时间段和所述眨眼次数，得到所述眨眼频率；其中，所述第一睑裂信息包括所述第一瞳孔和虹膜面积、第一眼白面积和第一遮盖瞳孔和虹膜的面积，所述第二睑裂信息包括所述第二瞳孔和虹膜面积、第二眼白面积和第二遮盖瞳孔和虹膜的面积。8.根据权利要求1所述的方法，其特征在于，所述根据所述n个图像中的每个图像，计算所述第一眼和所述第二眼的开合差值信息和所述第一眉和所述第二眉的摆动差值信息之前，所述方法还包括：在连接控制设备的情况下，接收所述控制设备发送的控制信号；所述根据所述n个图像中的每个图像，计算所述第一眼和所述第二眼的开合差值信息和所述第一眉和所述第二眉的摆动差值信息，包括：在第三预设时间段内未接收到所述控制设备发送的控制信号的情况下，根据所述n个图像中的每个图像，计算所述第一眼和所述第二眼的开合差值信息和所述第一眉和所述第二眉的摆动差值信息。9.根据权利要求1所述的方法，其特征在于，所述根据所述眨眼状态，执行目标操作，包
括：根据预设眨眼状态和预设操作的关联信息，执行与所述眨眼状态对应的目标操作；其中，所述眨眼状态包括以下至少一种：第一眼的眨眼频率、第二眼的眨眼频率、第一眼和第二眼搭配的眨眼状态。10.一种交互装置，其特征在于，包括：获取模块，用于获取n个图像，所述图像包括眼部区域和眉部区域，所述眼部区域包括第一眼和第二眼，所述眉部区域包括第一眉和第二眉，n为正整数；计算模块，用于根据所述n个图像中的每个图像，计算所述第一眼和所述第二眼的开合差值信息和所述第一眉和所述第二眉的摆动差值信息；统计模块，用于在所述开合差值信息满足第一预设条件，且所述摆动差值信息满足第二预设条件的情况下，根据所述n个图像，统计眨眼状态；执行模块，用于根据所述眨眼状态，执行目标操作。11.一种电子设备，其特征在于，包括：处理器，存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1-9任一项所述的交互方法的步骤。12.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-9任一项所述的交互方法的步骤。

技术总结
本申请公开了一种交互方法、装置、电子设备及存储介质，属于通信技术领域，该方法包括获取N个图像，图像包括眼部区域和眉部区域，眼部区域包括第一眼和第二眼，眉部区域包括第一眉和第二眉，N为正整数；根据N个图像中的每个图像，计算第一眼和第二眼的开合差值信息和第一眉和第二眉的摆动差值信息；在开合差值信息满足第一预设条件，且摆动差值信息满足第二预设条件的情况下，根据N个图像，统计眨眼状态；根据眨眼状态，执行目标操作。执行目标操作。执行目标操作。


技术研发人员：黄辉
受保护的技术使用者：维沃移动通信有限公司
技术研发日：2022.10.25
技术公布日：2023/1/13