一种基于VR与AR的虚拟培训场景模拟与评分系统的制作方法

本发明属于人工智能，具体涉及一种基于vr与ar的虚拟培训场景模拟与评分系统。

背景技术：

1、随着金融市场的快速发展和金融产品种类的日益丰富，金融销售培训的重要性日益凸显。传统的金融销售培训方式往往依赖于课堂讲授和案例分析，难以提供真实、互动的销售环境。限制了学员对金融产品销售流程的深度理解和技能的熟练掌握。现今虚拟现实和增强现实技术的广泛应用为学员培训提供了新的方式。虚拟现实(virtual reality，vr)是一种利用计算机模拟创建的一个三维虚拟世界，用户可以通过专用的设备(如头戴式显示器)来进入这个虚拟世界，并与之进行交互。增强现实(augmented reality，ar)是一种将虚拟信息与真实世界信息相结合的技术，它通过将计算机生成的图像、声音、视频等信息叠加到真实世界中，从而创建出一种虚实结合的增强现实环境。

2、目前，市场上的金融销售培训工具主要包括在线课程、模拟交易和客户角色扮演等。这些方法虽然能够提供一定的培训效果，但往往缺乏互动性和个性化，难以适应不同金融销售人员的需求。在线课程通常以录制的视频和固定的测试题为主，缺少实时互动和反馈。模拟交易虽然能够提供一定的实践机会，但因为缺乏情感分析和个性化反馈，难以准确评估销售人员的情绪变化和实际能力。此外，传统方法在大数据分析和客户画像方面的应用不足，无法提供详细的客户信息和个性化的销售策略建议。

3、因此，有必要提出一种基于vr与ar的虚拟培训场景模拟与评分系统，以至少部分地解决现有技术中存在的问题。

4、本背景技术所公开的上述信息仅仅用于增加对本发明背景技术的理解，因此，其可能包括不构成本领域普通技术人员已知的现有技术。

技术实现思路

1、本发明的目的在于提供一种基于vr与ar的虚拟培训场景模拟与评分系统，以解决上述背景技术中提出的问题。

2、为实现上述目的，本发明提供如下技术方案：

3、一种基于vr与ar的虚拟培训场景模拟与评分系统，包括：虚拟场景模块、实时反馈与评分系统、培训与考核模块、分析与策略模块、角色与互动模块、学习目标与任务模块、学习路径管理模块，所述虚拟场景模块利用vr技术建立真实感的金融销售场景，并通过ar技术添加交互元素和信息展示，所述培训与考核模块用于学习者在虚拟场景中进行实际操作、模拟场景，并且提供反馈和指导，所述分析与策略模块用于分析客户数据，提取客户的偏好和需求特征，生成个性化的策略建议，所述角色与互动模块负责建立虚拟角色和互动机制，并促进学习者与这些角色的互动，所述学习目标与任务模块用于确定学习目标、创建各种类型的任务，帮助学习者集中精力提高学习效率，所述学习路径管理模块用于个性化的学习路径设定、进度追踪与管理，提升学习效率和成果，所述实时反馈与评分系统用于即时行为评估、错误纠正、参与度监测、实时成绩记录和评估学习者表现，帮助学习者了解自己的表现和改进方向。

4、优选的，所述虚拟场景模块基于directx采用结合vr的生成式ai技术创建虚拟场景，并模拟真实的金融销售对话场景，使用随机数生成算法设置各种金融销售情境和随机事件，增加培训的多样性和挑战性。

5、在虚拟场景中，支持多模态交互使得交互更加自然和直观，例如手势识别、语音识别等，同时应用感知技术使系统能够感知学习者的位置、动作和环境，例如空间跟踪(惯性策略单元(imu)、视觉跟踪技术等)，并根据实际情况选择网络连接，实现多个用户之间的数据传输和同步。

6、优选的，所述实时反馈与评分系统通过情感分析技术实时检测学习者和虚拟客户的情绪变化，提供即时反馈，使用模糊评价方式基于销售技巧、沟通效果、客户满意度指标，对学习者的表现进行评分，并提供个性化的培训计划。

7、系统利用云环境存储实时反馈和评分过程产生的数据，并利用边缘计算技术将分析与评价过程推向网络边缘，以减少数据在传输过程中的延迟和带宽消耗，提高系统响应速度和效率。

8、优选的，所述培训与考核模块根据学习者的技能水平和学习进度，通过lstm动态调整培训内容和难度，识别学习者的强项和弱项，提供有针对性地训练，同时定期考核和表现评估，实现学习者能力水平的分级，并提供相应的提升建议。

9、参考考核和评估结果，利用机器学习技术针对学习者的学习历史数据进行分析，确定学习者能力水平的分级，根据学习目标重新定义和安排任务，调整任务的复杂度和难度。

10、优选的，所述分析与策略模块使用大数据和机器学习技术分析客户历史数据，提取客户的偏好和需求特征，为学习者提供详细的客户画像，基于客户分析结果生成个性化的金融产品销售策略建议，帮助学习者更有效地推销金融产品。

11、优选的，所述学习路径管理模块根据学习者的学习表现和反馈，调整下一个虚拟场景的难度和内容，提供个性化的学习体验，同时记录用户的学习历程和进展，分析弱点和潜在的改进空间，为进一步培训提供指导。

12、培训管理员可以实时查看学习者的进度，并在需要时提供支持或调整学习计划，以确保学习者按时完成培训。系统可以根据学习者的反应时间、错误模式或任务变化，提供针对性的虚拟场景中的模拟操作、情境演练或提供额外的支持资源，以提升学习效果和保持学习动力。

13、优选的，所述学习目标与任务模块为每个虚拟场景设定明确的学习目标，并根据学习目标制定任务和挑战，要求学习者在虚拟场景中完成特定销售目标，在学习者完成任务后，自动或半自动地评估他们的表现，并记录相关数据。

14、优选的，所述角色与互动模块通过行为模式生成来创建虚拟角色，使用情感计算来模拟角色不同的情感状态和反应模式，结合自然语言处理和对话管理技术允许学习者与角色进行语音交流、动作互动或文本对话，以模拟真实的销售场景互动。

15、优选的，所述系统利用ar和vr技术协作创建沉浸式的培训环境，使学习者仿佛置身于真实的销售场景中，并且将ar技术与手机结合，外加可穿戴硬件，使得沉浸式环境更加简单、易用，同时系统创建一个虚拟的数字人导师，实时指导和反馈学习者的表现，提供个性化的培训建议和心理支持。

16、与现有技术相比，本发明的有益效果是：

17、本发明通过结合vr的生成式ai技术提供逼真的虚拟客户对话体验，模拟金融产品销售情景，融合ar技术构建沉浸式的虚拟金融销售场景，使得学习者能够在逼真的环境中进行练习，提高实际销售技能，ar技术可以与手机结合，利用手机的算力，外加可穿戴硬件，使得沉浸式环境更加简单、易用，相比传统的培训方法，本发明系统能够在更大范围内进行推广，降低培训成本。

18、本发明采用数据驱动的客户分析和策略推荐引擎，为学习者提供详细的客户画像和个性化的销售策略建议、策略，增强客户满意度，提升销售成功率，利用情感分析技术和数字人导师为学习者提供即时反馈和心理支持，帮助学习者快速改进，系统会根据金融销售人员的能力和需求，动态调整培训内容，提供有针对性地培训，确保个性化培训效果，特别针对金融产品的销售技巧和策略。

19、上述概述仅仅是为了说明书的目的，并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外，通过参考附图和以下的详细描述，本发明进一步的方面、实施方式和特征将会是容易明白的。