基于同一图像采集设备的头动眼动复合捕捉方法和系统与流程

技术特征：
1.一种基于同一图像采集设备的头动眼动复合捕捉方法，其特征在于，包括：通过光学采集设备获取第一光学信号；识别所述第一光学信号中的头部标记点，根据头部标记点的位置和/或形状变化，得到头部动作捕捉结果；识别所述第一光学信号中的第一眼部标记点，根据第一眼部标记点的位置和/或形状变化，得到眼部动作捕捉结果；所述第一光学信号为被采集者头部和眼部反射的可见光信号；所述头部标记点为设定的被采集者头部特征点；所述第一眼部标记点为设定的被采集者眼部特征点。2.根据权利要求1所述的基于同一图像采集设备的头动眼动复合捕捉方法，其特征在于，得到眼部动作捕捉结果后，所述基于同一图像采集设备的头动眼动复合捕捉方法还包括：根据头部动作捕捉结果修正眼部动作捕捉结果。3.根据权利要求1所述的基于同一图像采集设备的头动眼动复合捕捉方法，其特征在于，所述识别所述第一光学信号中的第一眼部标记点，根据第一眼部标记点的位置和/或形状变化，得到眼部动作捕捉结果的步骤包括：通过所述光学采集设备获取第二光学信号；所述第二光学信号为红外信号源发射、经被采集者眼部反射后得到的红外信号；识别所述第一光学信号中的第一眼部标记点和第二光学信号中的第二眼部标记点，根据第一眼部标记点、第二眼部标记点、光学采集设备的位置以及红外信号源的位置，得到眼部动作捕捉结果；所述第二眼部标记点为被采集者眼部的红外反射点。4.根据权利要求3所述的基于同一图像采集设备的头动眼动复合捕捉方法，其特征在于，所述第一眼部标记点包括被采集者瞳孔中心；所述光学采集设备集成有红外信号源。5.根据权利要求4所述的基于同一图像采集设备的头动眼动复合捕捉方法，其特征在于，所述根据第一眼部标记点、第二眼部标记点、光学采集设备的位置以及红外信号源的位置，得到眼部动作捕捉结果的步骤包括：以第二眼部标记点为圆心，r为半径，建立眼球投影轮廓圆，其中r为第二眼部标记点到任意眼球轮廓边缘点的距离；将第一矢量与第二矢量求和，得到眼动矢量作为眼部动作捕捉结果；所述第一矢量是指方向与红外信号源的发射方向相反、大小为的矢量，其中，h为眼球投影轮廓圆上，第二眼部标记点到被采集者瞳孔中心的距离；所述第二矢量是指眼球投影轮廓圆所在平面上，自第二眼部标记点起，至被采集者瞳孔中心止的矢量。6.根据权利要求1至5中任一项所述的基于同一图像采集设备的头动眼动复合捕捉方法，其特征在于，得到眼部动作捕捉结果后，所述基于同一图像采集设备的头动眼动复合捕捉方法还包括：根据逐时的眼部动作捕捉结果，得到被采集者的注视次数、注视时间以及视线轨迹作为眼动追踪结果。7.根据权利要求1至5中任一项所述的基于同一图像采集设备的头动眼动复合捕捉方
法，其特征在于，所述基于同一图像采集设备的头动眼动复合捕捉方法还包括：根据第一光学信号中被采集者瞳孔大小和环境光强度，得到视线深度结果。8.一种基于同一图像采集设备的头动眼动复合捕捉系统，其特征在于，包括：获取模块，用于通过光学采集设备获取第一光学信号；头动捕捉模块，用于识别所述第一光学信号中的头部标记点，根据头部标记点的位置和/或形状变化，得到头部动作捕捉结果；眼动捕捉模块，用于识别所述第一光学信号中的第一眼部标记点，根据第一眼部标记点的位置和/或形状变化，得到眼部动作捕捉结果；所述第一光学信号为被采集者头部和眼部反射的可见光信号；所述头部标记点为设定的被采集者头部特征点；所述第一眼部标记点为设定的被采集者眼部特征点。9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至7任一项所述基于同一图像采集设备的头动眼动复合捕捉方法的步骤。10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述基于同一图像采集设备的头动眼动复合捕捉方法的步骤。

技术总结
本发明提供一种基于同一图像采集设备的头动眼动复合捕捉方法和系统，其中方法包括：通过光学采集设备获取第一光学信号；识别所述第一光学信号中的头部标记点，根据头部标记点的位置和/或形状变化，得到头部动作捕捉结果；识别所述第一光学信号中的第一眼部标记点，根据第一眼部标记点的位置和/或形状变化，得到眼部动作捕捉结果；所述第一光学信号为被采集者头部和眼部反射的可见光信号；本发明通过同一光学信号，识别分析得到头部动作捕捉结果和眼部动作捕捉结果，从而避免了不同设备分别进行头动、眼动捕捉时产生的兼容性、实时性和集成问题，提供了时间严格同步的头动眼动集成捕捉方法和系统。捉方法和系统。捉方法和系统。


技术研发人员：黄志强
受保护的技术使用者：上海赛增医疗科技有限公司
技术研发日：2021.07.30
技术公布日：2021/12/13