一种基于非生物特征信息数据的非接触式人机交互方法及系统与流程

摘要: 本发明涉及人机交互,尤其涉及一种基于非生物特征信息数据的非接触式人机交互方法及系统,适用于ar/vr穿戴设备与移动通信设备的融合共生场景。背景技术:1、随着ar...
一种基于非生物特征信息数据的非接触式人机交互方法及系统与流程

本发明涉及人机交互,尤其涉及一种基于非生物特征信息数据的非接触式人机交互方法及系统,适用于ar/vr穿戴设备与移动通信设备的融合共生场景。

背景技术:

1、随着ar/vr技术的发展,智能眼镜等设备逐渐兴起。然而,现有的主流交互方式多依赖眼动追踪、指纹或人脸识别等生物特征识别技术。这些技术存在隐私泄露风险,且在特定场景下(如医疗、政企)合规性较差。同时,现有设备试图将手机功能硬塞进眼镜,导致体验不佳。因此,亟需一种既能保护用户隐私,又能实现高效交互的方案。

技术实现思路

1、本发明提供一种基于非生物特征信息数据的非接触式人机交互方法及系统,以解决现有技术中交互方式隐私安全性差、设备分工不合理的问题。

2、本发明的技术方案如下:

3、一种基于非生物特征信息数据的非接触式人机交互方法,包括:获取穿戴设备端非成像式环境感知传感器采集的非身份识别用途的环境感知数据;基于所述环境感知数据,在预设的空间显示区域内进行几何射线投射,以锁定目标交互对象;识别用户针对所述目标交互对象的语义姿态动作;结合端侧本地留存的上下文信息与预设的行为适配模型,对所述语义姿态动作进行意图补全,生成交互指令;执行所述交互指令,并通过所述空间显示区域输出反馈结果。

4、一种非接触式人机交互系统,包括穿戴设备与移动通信设备,两者通过无线协议协同工作:所述穿戴设备负责采集非身份识别用途的环境感知数据,执行几何射线锁定、语义姿态识别、意图补全与空间显示;所述移动通信设备负责重算力处理、隐私安全锚定与蜂窝网关服务。

5、有益效果:本发明采用非生物特征(如毫米波、tof、imu等)进行环境感知与交互,避免了虹膜、人脸等敏感生物信息的采集,满足隐私合规要求;通过几何射线与语义姿态结合,实现了高效的非接触式交互;通过穿戴设备与移动通信设备的角色重排(手机退为安全锚与算力坞,眼镜升为主交互面),实现了两者的融合共生。

1.一种基于非生物特征信息数据的非接触式人机交互方法,其特征在于,包括以下步骤:获取穿戴设备端非成像式环境感知传感器采集的非身份识别用途的环境感知数据;基于所述环境感知数据,在预设的空间显示区域内进行几何射线投射,以锁定目标交互对象;识别用户针对所述目标交互对象的语义姿态动作;结合端侧本地留存的上下文信息与预设的行为适配模型,对所述语义姿态动作进行意图补全,生成交互指令;执行所述交互指令,并通过所述空间显示区域输出反馈结果。

2.根据权利要求1所述的方法,其特征在于,所述非成像式环境感知传感器包括毫米波雷达、tof传感器、imu或超声传感器中的至少一种。

3.根据权利要求1所述的方法,其特征在于,所述语义姿态动作包括手部微动、指节敲击或无声唇动中的至少一种非生物特征姿态。

4.根据权利要求1所述的方法,其特征在于,所述行为适配模型为在终端设备本地进行在线调整或离线训练的轻量级模型,且不向云端上传原始感知数据。

5.根据权利要求1所述的方法,其特征在于,还包括:当所述语义姿态动作对应的置信度低于预设阈值时,触发降级路径,将交互任务转移至关联的移动通信设备端处理。

6.根据权利要求1所述的方法,其特征在于,所述上下文信息包括当前应用场景、历史交互记录或环境噪声等级中的至少一种。

7.根据权利要求1所述的方法,其特征在于,所述交互指令的生成过程包括:基于情境预测模型预判用户需求,并结合所述语义姿态动作进行零动作确认。

8.根据权利要求1所述的方法,其特征在于,所述方法应用于穿戴设备与移动通信设备的融合共生系统,其中,所述穿戴设备负责轻量级交互与显示,所述移动通信设备负责重算力处理、隐私安全锚定与蜂窝网关服务。

9.一种非接触式人机交互系统,其特征在于,包括穿戴设备与移动通信设备,两者通过无线协议协同工作:所述穿戴设备,配置有非成像式环境感知传感器、空间显示模块与端侧处理模块,用于采集非身份识别用途的环境感知数据,执行几何射线锁定、语义姿态识别、意图补全与空间显示;所述移动通信设备,配置有重算力处理模块与安全锚定模块,用于运行重负载模型、存储敏感数据并提供蜂窝通信能力;其中,所述穿戴设备与移动通信设备之间通过非生物特征交互协议进行数据透传,所述移动通信设备作为隐私安全锚与算力坞,所述穿戴设备作为主交互面。

10.根据权利要求9所述的系统,其特征在于,所述穿戴设备配置有esim模块以独立进行通信,所述移动通信设备退化为私有云盘与安全enclave,用于存储支付密钥与身份信息。