一种基于红外触摸屏的特定手指组合操作方法、装置及设备与流程

摘要: 本发明涉及人机交互,尤其涉及一种基于红外触摸屏的特定手指组合操作方法、装置、存储介质及电子设备,适用于配置红外触摸屏的电子设备,通过特定手指组合操作实现系统命令...
一种基于红外触摸屏的特定手指组合操作方法、装置及设备与流程

本发明涉及人机交互,尤其涉及一种基于红外触摸屏的特定手指组合操作方法、装置、存储介质及电子设备,适用于配置红外触摸屏的电子设备,通过特定手指组合操作实现系统命令的快速调用。

背景技术:

1、随着信息技术发展,人机交互手段日趋丰富,键盘鼠标、电容触摸屏、红外触摸屏、语音识别、手势识别等交互方式广泛普及。红外触摸屏依靠边框上红外发射、接收管组成矩阵,依靠红外线被遮挡实现触摸定位,具备抗干扰能力强、耐用性好、支持多点触控、适配大尺寸屏幕的优势,在触摸一体机、大屏教学设备、智能电视等产品中大量使用。

2、现有触摸屏交互主要分为单点触摸、多点触摸、手势识别三类。单点触摸依靠单指点击、滑动完成基础界面操作;多点触摸多用于双指缩放、旋转等界面变换;手势识别大多针对滑动、拖拽、多指开合等界面交互手势。

3、现有技术存在如下缺陷:

4、1、系统级操作大多依赖键盘快捷键,例如,win+d返回桌面、alt+f4关闭窗口、ctrl+shift+esc调出任务管理器、win+l 锁屏、win+shift+s截图等。普通用户需要记忆大量组合按键,对于不熟悉键盘操作的使用者门槛较高。

5、2、现有触摸屏手势识别大多聚焦界面浏览操作,缺少面向系统级命令的手指组合交互方案,没有针对不同手指本身特征做区分识别。同样多指触摸,无法区分是大拇指按压还是中指按压,只能识别触摸点数量,不能实现 “某根手指长按作为基础按键,其他手指配合点击” 的组合逻辑。

6、3、在大屏红外触摸设备场景下,用户直接在屏幕上操作,需要调用系统命令时,仍然要点击菜单、调用虚拟键盘,操作步骤繁琐,交互效率低。

7、4、现有手势方案大多手势逻辑固化,用户很难根据自身使用习惯重新定义手势与系统指令的对应关系。

8、因此,有必要提出一种基于红外触摸屏的特定手指组合操作方案,解决上述技术缺陷。

技术实现思路

1、综上所述,本发明所要解决的技术问题在于克服现有技术的不足,提供一种基于红外触摸屏的特定手指组合操作方法、装置、存储介质及电子设备,实现通过不同手指组合直接触发系统级命令,降低系统操作门槛,提升红外触摸屏设备的交互效率,同时支持用户自定义手势映射关系。

2、为实现上述目的,本发明采用的技术方案:

3、本发明公开的一种基于红外触摸屏的特定手指组合操作方法,包括如下步骤:s1、通过屏幕边框布设的红外线发射管与接收管构成红外触摸矩阵结构,检测屏幕上的触摸事件,识别是否存在一个或多个手指持续触摸屏幕; s2、当识别到一个或多个持续触摸输入时,激活手指识别模块,分别识别各持续触摸输入对应的手指类型,并形成基础手指集合; s3、依据预设规则,将所述基础手指集合对应的一个或多个持续触摸输入作为基础输入;在所述一个或多个持续触摸输入保持触摸屏幕的状态下,检测其他手指的点击动作及点击次数,将识别得到的手指组合操作映射为对应的控制指令; s4、根据得到的控制指令执行对应的系统命令。

4、进一步的,步骤 s2 中,所述手指识别模块接收红外触摸矩阵结构上报的遮挡光束数量、触摸包围框的宽度和高度、长宽比、多边形顶点数据以及相邻触点位置中的一种或多种原始数据,从所述原始数据中提取尺度特征、形状特征和相对位置特征,并基于提取的特征完成各持续触摸输入对应的手指类型识别;所述手指类型包括大拇指、食指、中指、无名指、小指。

5、进一步的,步骤 s3 设置多组预设手指组合映射关系: 以大拇指持续按压作为基础输入,食指再点击两次屏幕,该手指组合操作映射返回桌面控制指令; 以食指持续按压作为基础输入,大拇指再点击两次屏幕,该手指组合操作映射窗口关闭控制指令; 以中指持续按压作为基础输入,食指和无名指同时点击屏幕,该手指组合操作映射任务管理器控制指令; 以小指持续按压作为基础输入,食指再点击屏幕一次,该手指组合操作映射锁屏控制指令; 当大拇指和食指对应的两个持续触摸输入共同形成所述基础手指集合时,直接映射截图控制指令。

6、本发明公开的一种实现前述方法的装置,包括: 触摸检测模块,用于由红外线发射管和接收管组成红外触摸矩阵结构,检测一个或多个触控物在屏幕上的停留时间;当至少一个触控物的停留时间超过预设阈值,则判定存在一个或多个持续触摸输入; 手指识别模块,用于接收红外触摸矩阵结构上报的遮挡光束数量、触摸包围框的宽度和高度、长宽比、多边形顶点数据以及相邻触点位置中的一种或多种原始数据,从所述原始数据中提取尺度特征、形状特征和相对位置特征,并将提取的特征与预设的手指特征模板进行匹配,确定各持续触摸输入对应的手指类型并形成基础手指集合; 组合解析模块,预存储有手指组合-控制指令映射表;用于根据识别得到的一个或多个手指类型形成基础手指集合,并将基础手指集合对应的一个或多个持续触摸输入作为基础输入,在所述一个或多个持续触摸输入保持触摸状态下识别其他手指的点击动作与点击次数,匹配映射表得到对应的控制指令; 命令映射执行模块,用于将组合解析模块输出的控制指令转换为计算机可识别执行的系统命令。

7、进一步的,装置还包括用户自定义模块;所述用户自定义模块用于接收用户配置,实现对手指组合-控制指令映射表的自定义修改与保存,用户可以自行设定手指组合与系统命令的对应关系。

8、本发明公开的一种电子设备,包括触控显示屏、存储器以及处理器;所述存储器存储有前述装置对应的程序代码,还存储有可被处理器运行的计算机程序;所述处理器执行所述计算机程序时,实现前述的基于红外触摸屏的特定手指组合操作方法。

9、有益效果

10、与现有技术相比,本发明具有如下有益效果:

11、1、本发明可在红外触摸屏设备上实现键盘上的多键组合快捷键操作指令输入功能,提升用户在授课演讲过程中的人机交互效率,无需键盘操作,依靠手指组合手势同样可触发返回桌面、关闭窗口、任务管理器、锁屏、截图等系统级命令,使用方便,交互更加直观自然。

12、2、适配红外触摸屏硬件特性,利用红外矩阵检测触摸,区分不同手指类型,手指长按做基础按键,再结合其余手指配合点击的复合手势逻辑,不同基础按键与其它手指点击结合构成不同的手势方案,特别适合大屏触摸一体机、智能电视等设备,用户无需寻找菜单、虚拟按键,直接在屏幕完成系统操作,提升操作效率。

13、3、硬件兼容性好,仅需要普通红外触摸屏硬件,不需要额外改造硬件,仅通过软件算法实现,可广泛移植到各类配置红外触控的电子设备。

14、4、支持用户自定义模块,使用者可以修改手指组合与系统命令的映射关系,适配不同人的操作习惯,灵活性更强。

1.一种基于红外触摸屏的特定手指组合操作方法,其特征在于,包括以下步骤:

2.根据权利要求 1 所述的一种基于红外触摸屏的特定手指组合操作方法,其特征在于:步骤 s2 中,所述手指识别模块接收红外触摸矩阵结构上报的遮挡光束数量、触摸包围框的宽度和高度、长宽比、多边形顶点数据以及相邻触点位置中的一种或多种原始数据,从所述原始数据中提取尺度特征、形状特征和相对位置特征,并基于提取的特征完成各持续触摸输入对应的手指类型识别;所述手指类型包括大拇指、食指、中指、无名指、小指。

3.根据权利要求 1 所述的一种基于红外触摸屏的特定手指组合操作方法,其特征在于,步骤 s3 中,以大拇指持续按压作为基础输入,食指再点击两次屏幕,该手指组合操作映射返回桌面控制指令。

4.根据权利要求 1 所述的一种基于红外触摸屏的特定手指组合操作方法,其特征在于,步骤 s3 中,以食指持续按压作为基础输入,大拇指再点击两次屏幕,该手指组合操作映射窗口关闭控制指令。

5.根据权利要求 1 所述的一种基于红外触摸屏的特定手指组合操作方法,其特征在于,步骤 s3 中,以中指持续按压作为基础输入,食指和无名指同时点击屏幕,该手指组合操作映射任务管理器控制指令。

6.根据权利要求 1 所述的一种基于红外触摸屏的特定手指组合操作方法,其特征在于,步骤 s3 中,以小指持续按压作为基础输入,食指再点击屏幕一次,该手指组合操作映射锁屏控制指令。

7.根据权利要求 1 所述的一种基于红外触摸屏的特定手指组合操作方法,其特征在于,步骤 s3 中,当大拇指和食指对应的两个持续触摸输入共同形成所述基础手指集合时,直接映射截图控制指令。

8.实现权利要求 1-7 任一项所述基于红外触摸屏的特定手指组合操作方法的装置,其特征在于,包括:

9.根据权利要求 8 所述的装置,其特征在于,还包括用户自定义模块;所述用户自定义模块用于接收用户配置,实现对手指组合-控制指令映射表的自定义修改与保存。

10.一种电子设备,包括触控显示屏、存储器以及处理器;其特征在于: 所述存储器存储有权利要求 8 或 9 所述的装置对应的程序代码,还存储有可被处理器运行的计算机程序; 所述处理器执行所述计算机程序时,实现权利要求 1-7 任一项所述的基于红外触摸屏的特定手指组合操作方法。