一种XR手势输入实现方法和系统与流程

技术特征：
1.一种xr手势输入实现方法，包括：基于获取的第一辅助数据，确定环境评估数据；获取用户的登录手势并进行手势识别，确定所述用户是否可以登录虚拟会议空间；所述登录手势的获取与所述环境评估数据相关；响应于所述用户可以登录虚拟会议空间，获取交互手势；所述交互手势的获取与所述环境评估数据相关；基于对所述交互手势的手势识别，实现所述用户与所述虚拟会议空间内的虚拟场景的交互。2.根据权利要求1所述的方法，所述登录手势、所述交互手势基于摄像装置采集的手势图像获得；所述手势识别包括：基于手势识别模型对所述手势图像的处理，获取手势识别结果；所述手势识别模型为机器学习模型。3.根据权利要求1所述的方法，所述获取用户的登录手势并进行手势识别，确定所述用户是否可以登录虚拟会议空间包括：基于摄像装置采集登录手势图像；基于所述登录手势图像获取语义特征、手势特征；判断所述语义特征是否满足第一预设条件；判断所述手势特征是否满足第二预设条件；响应于所述第一预设条件、所述第二预设条件被满足，确定所述用户可以登录所述虚拟会议空间。4.根据权利要求1所述的方法，所述基于对所述交互手势的手势识别，实现所述用户与所述虚拟会议空间内的虚拟场景的交互包括：获取目标体的建模数据，基于所述建模数据创建所述目标体的三维模型；基于对所述交互手势的手势识别，确定操作信息；获取所述操作信息作用于所述三维模型后的虚拟操作图像；将所述虚拟操作图像以三维成像的方式在实际操作场景和/或所述虚拟操作场景的第一预设位置进行三维成像。5.根据权利要求4所述的方法，所述基于对所述交互手势的手势识别，实现所述用户与所述虚拟会议空间内的虚拟场景的交互还包括：获取所述操作信息的语义信息；将所述语义信息在实际操作场景和/或所述虚拟操作场景的第二预设位置进行显示。6.一种xr手势输入实现系统，包括：环境评估数据确定模块，用于基于获取的第一辅助数据，确定环境评估数据；用户登录确定模块，用于获取用户的登录手势并进行手势识别，确定所述用户是否可以登录虚拟会议空间；所述登录手势的获取与所述环境评估数据相关；交互手势获取模块，用于获取交互手势；所述交互手势的获取与所述环境评估数据相关；xr交互实现模块，用于基于对所述交互手势的手势识别，实现所述用户与所述虚拟会议空间内的虚拟场景的交互。
7.根据权利要求6所述的系统，所述登录手势、所述交互手势基于摄像装置采集的手势图像获得；所述系统还包括手势识别模块，所述手势识别模块用于基于手势识别模型对所述手势图像的处理，获取手势识别结果；所述手势识别模型为机器学习模型。8.根据权利要求6所述的系统，所述用户登录确定模块进一步用于：基于摄像装置采集登录手势图像；基于所述登录手势图像获取语义特征、手势特征；判断所述语义特征是否满足第一预设条件；判断所述手势特征是否满足第二预设条件；响应于所述第一预设条件、所述第二预设条件被满足，确定所述用户可以登录所述虚拟会议空间。9.根据权利要求6所述的系统，所述xr交互实现模块进一步用于：获取目标体的建模数据，基于所述建模数据创建所述目标体的三维模型；基于对所述交互手势的手势识别，确定操作信息；获取所述操作信息作用于所述三维模型后的虚拟操作图像；将所述虚拟操作图像以三维成像的方式在实际操作场景和/或所述虚拟操作场景的第一预设位置进行三维成像。10.根据权利要求9所述的系统，所述xr交互实现模块进一步用于：获取所述操作信息的语义信息；将所述语义信息在实际操作场景和/或所述虚拟操作场景的第二预设位置进行显示。

技术总结
本说明书实施例提供一种XR手势输入实现方法和系统，该方法包括：基于获取的第一辅助数据，确定环境评估数据；获取用户的登录手势并进行手势识别，确定所述用户是否可以登录虚拟会议空间；所述登录手势的获取与所述环境评估数据相关；响应于所述用户可以登录虚拟会议空间，获取交互手势；所述交互手势的获取与所述环境评估数据相关；基于对所述交互手势的手势识别，实现所述用户与所述虚拟会议空间内的虚拟场景的交互。虚拟场景的交互。虚拟场景的交互。


技术研发人员：印眈峰 柳俊呈
受保护的技术使用者：直觉睿视有限公司
技术研发日：2022.09.28
技术公布日：2022/11/29