指尖空中轨迹显示方法、装置、电子设备和车辆与流程
本技术涉及视觉识别,尤其涉及一种指尖空中轨迹显示方法、装置、电子设备和车辆。
背景技术:
1、随着人机交互技术的快速发展,基于计算机视觉的空中手势交互成为研究热点。用户无需接触物理表面,仅通过手指在空中的运动即可完成书写输入,在虚拟现实、智能家居、车载控制等场景中具有广泛应用前景。
2、现有技术中,已出现利用摄像头采集手部图像并追踪指尖轨迹的方案。典型方法是通过手部关键点检测模型提取指尖坐标,将连续帧中的指尖位置连接形成运动轨迹,并在显示设备上渲染输出。
3、然而,现有技术在文字书写场景下存在明显不足。用户在书写过程中,从一个笔画结束移动到下一个笔画开始的抬笔移动过程,其轨迹会被错误地记录为有效笔画轨迹,导致笔画之间的过渡连线被渲染输出,造成最终显示的图形笔画粘连、结构混乱。
技术实现思路
1、为了解决上述技术问题,本技术提供了一种指尖空中轨迹显示方法、装置、电子设备和车辆。
2、第一方面,本技术提供了一种指尖空中轨迹显示方法,包括:采集至少两张目标图像,并在至少两张目标图像中提取至少两个指尖定位信息;根据至少两个指尖定位信息,生成第一轨迹点序列;其中,第一轨迹点序列中包括生成时序连续的至少两个轨迹点,至少两个轨迹点的生成时序与至少两张目标图像的采集时序相匹配;针对至少两个轨迹点中的每个第一轨迹点,根据第一轨迹点相对于第二轨迹点的运动特征参数,识别第一轨迹点序列中的连笔过渡轨迹点;其中,第二轨迹点为第一轨迹点序列中第一轨迹点的前一轨迹点;根据连笔过渡轨迹点和第一轨迹点序列,生成并显示目标笔画轨迹;其中,目标笔画轨迹中不包括连笔过渡轨迹点。
3、在本技术的一些技术方案中,根据第一轨迹点相对于第二轨迹点的运动特征参数,识别第一轨迹点序列中的连笔过渡轨迹点,包括:在运动特征参数大于参数阈值的情况下,将第一轨迹点确定为连笔过渡轨迹点;其中,运动特征参数包括以下至少一项:位移偏离参数和运动速度参数。
4、在本技术的一些技术方案中,根据第一轨迹点相对于第二轨迹点的运动特征参数,识别第一轨迹点序列中的连笔过渡轨迹点之前,方法还包括:将第一轨迹点相对于第二轨迹点的位移距离确定为位移偏离参数;和/或确定由第二轨迹点至第一轨迹点处的瞬时运动速度,以及将瞬时运动速度确定为运动速度参数。
5、在本技术的一些技术方案中,参数阈值为基于用户输入的测试笔画对应的运动特征参数确定的阈值;和/或参数阈值为基于执行识别第一轨迹点序列中的连笔过渡轨迹点的步骤过程中的运动特征参数对初始阈值进行更新得到的阈值;和/或参数阈值为基于目标图像的图像尺寸对初始阈值进行更新得到的阈值。
6、在本技术的一些技术方案中,根据连笔过渡轨迹点和第一轨迹点序列,生成并显示目标笔画轨迹,包括:
7、在第一轨迹点序列中剔除连笔过渡轨迹点,以得到至少一个第二轨迹点序列;其中,每个第二轨迹点序列中均包括有效笔画轨迹点,有效笔画轨迹点为第一轨迹点序列中除连笔过渡轨迹点以外的轨迹点;针对至少一个第二轨迹点序列中的每个第二轨迹点序列,根据第二轨迹点序列中的全部有效笔画轨迹点生成相应的目标笔画轨迹。
8、在本技术的一些技术方案中,在第一轨迹点序列中剔除连笔过渡轨迹点,以得到至少一个第二轨迹点序列,包括:
9、沿第一轨迹点序列中第一轨迹点的生成时序,逐点判断每个第一轨迹点是否属于连笔过渡轨迹点;当前检测到第一轨迹点不属于连笔过渡轨迹点时,将第一轨迹点确定为有效笔画轨迹点,并存储在有效缓存序列;当检测到连笔过渡轨迹点的连续帧数小于预设帧数时,继续将后续检测到的有效笔画轨迹点存入有效缓存序列;当检测到连笔过渡轨迹点的连续帧数大于或等于预设帧数时,将有效缓存序列中的全部有效笔画轨迹点封装为第二轨迹点序列,并清空有效缓存序列,继续执行逐点判断每个第一轨迹点是否属于连笔过渡轨迹点的步骤,直至第一轨迹点序列中的全部第一轨迹点均处理完毕。
10、在本技术的一些技术方案中,根据第二轨迹点序列中的全部有效笔画轨迹点生成相应的目标笔画轨迹,包括:
11、在第二轨迹点序列中的有效笔画轨迹点的轨迹点数量大于或等于数量阈值的情况下,基于全部有效笔画轨迹点生成相应的目标笔画轨迹;在第二轨迹点序列中的有效笔画轨迹点的轨迹点数量小于数量阈值的情况下,丢弃第二轨迹点序列中的全部有效笔画轨迹点。
12、在本技术的一些技术方案中,根据至少两个指尖定位信息,生成第一轨迹点序列,包括:将至少两个指尖定位信息从图像坐标系映射至目标显示区域的显示坐标系,得到至少两个显示坐标;根据至少两个显示坐标,按照采集时序生成第一轨迹点序列。
13、在本技术的一些技术方案中,采集至少两张目标图像,并在至少两张目标图像中提取至少两个指尖定位信息之后,方法还包括:根据指尖定位信息,在目标显示区域显示指示光标;其中,指示光标的移动时序与采集时序相匹配。
14、在本技术的一些技术方案中,当指尖定位信息被映射至显示坐标系时,指示光标以第一视觉状态显示;当指尖定位信息未被映射至显示坐标系时,指示光标以第二视觉状态显示;当检测到指尖定位信息与连笔过渡轨迹点相对应时,指示光标以第三视觉状态显示;其中,第一视觉状态、第二视觉状态和第三视觉状态在颜色和/或形状上存在差异。
15、第二方面,本技术提供了一种指尖空中轨迹显示装置,包括:采集模块,用于采集至少两张目标图像;提取模块,用于在至少两张目标图像中提取至少两个指尖定位信息;生成模块,用于根据至少两个指尖定位信息,生成第一轨迹点序列;其中,第一轨迹点序列中包括生成时序连续的至少两个轨迹点,至少两个轨迹点的生成时序与至少两张目标图像的采集时序相匹配;识别模块,用于针对至少两个轨迹点中的每个第一轨迹点,根据第一轨迹点相对于第二轨迹点的运动特征参数,识别第一轨迹点序列中的连笔过渡轨迹点;其中,第二轨迹点为第一轨迹点序列中第一轨迹点的前一轨迹点;显示模块,用于根据连笔过渡轨迹点和第一轨迹点序列,生成并显示目标笔画轨迹。
16、第三方面,本技术提供了一种电子设备,包括:存储器、处理器和计算机程序;其中,计算机程序存储在存储器中,并被配置为由处理器执行以实现如上述任一技术方案中的方法。
17、第四方面,本技术提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现如第一方面提供的方法。
18、第五方面,本技术提供了一种车辆,包括:如第三方面提供的电子设备;和/或如第四方面提供的计算机可读存储介质。
19、本技术实施例提供的技术方案与现有技术相比具有如下优点:
20、本技术实施例提供的指尖空中轨迹显示方法、装置、电子设备和车辆,通过采集至少两张目标图像并提取至少两个指尖定位信息,以及依照至少两个指尖定位信息生成第一轨迹点序列,且第一轨迹点序列中至少两个轨迹点的生成时序与至少两张目标图像的采集时序相匹配,建立了指尖运动历史在时间维度上的有序记录。基于该时间维度上的有序记录,针对第一轨迹点序列中的每个第一轨迹点,根据第一轨迹点相对于第二轨迹点的运动特征参数,将运动特征参数反映指尖发生快速大位移的第一轨迹点识别为连笔过渡轨迹点,实现对有效运笔阶段与抬笔移动过渡阶段的区分。根据连笔过渡轨迹点和第一轨迹点序列,生成不包括连笔过渡轨迹点的目标笔画轨迹并显示。由于抬笔移动产生的过渡轨迹被识别并滤除,相邻笔画之间不再出现连接线,独立笔画段相互分离且清晰可辨。因此,解决了现有指尖空中轨迹显示方案中因缺乏有效的连笔过滤机制,导致抬笔移动过渡轨迹被错误记录为有效轨迹,进而造成输出图形笔画粘连且结构混乱的技术问题。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com