基于增强现实与虚拟现实融合的自动化测试方法及系统与流程

摘要: 本发明涉及智能汽车测试,尤其涉及基于增强现实与虚拟现实融合的自动化测试方法及系统。背景技术:1、现有智能汽车测试方法主要包括纯虚拟仿真测试和实车测试。纯虚拟仿真...
基于增强现实与虚拟现实融合的自动化测试方法及系统与流程

本发明涉及智能汽车测试,尤其涉及基于增强现实与虚拟现实融合的自动化测试方法及系统。

背景技术:

1、现有智能汽车测试方法主要包括纯虚拟仿真测试和实车测试。纯虚拟仿真测试虽成本低、场景覆盖广,但难以模拟真实车辆的动力学响应和驾驶员在真实操控界面下的反应。实车测试虽能反映真实车辆行为,但受场地、天气、安全等因素限制,难以复现极端或危险场景。

2、现有道路交通车辆驾驶模拟系统通过虚拟现实设备模拟驾驶场景,然而,该方案未与实际车辆座舱和控制系统进行深度融合,无法实现真实车辆执行部件的联动控制。现有基于虚拟现实与驾驶模拟器的车辆队列仿真系统主要用于车辆队列仿真,然而该方案不具备对真实车辆执行部件的控制能力,也未集成驾驶员生理状态监测与场景动态融合能力,难以实现驾驶员状态与系统交互的同步评估。

技术实现思路

1、为克服上述现有技术的不足,本发明提供了基于增强现实与虚拟现实融合的自动化测试方法及系统,旨在在真实车辆环境中进行虚实结合的驾驶场景测试与验证。

2、为实现上述目的,本发明的一个或多个实施例提供了如下技术方案:

3、第一方面,本发明提供了基于增强现实与虚拟现实融合的自动化测试方法,包括:

4、获取车辆的测试脚本;

5、根据测试脚本中定义的场景类型生成虚拟场景,实时获取真实座舱图像,将虚拟场景与真实座舱图像进行时空同步与空间叠加,构建虚实融合测试场景;

6、在虚实融合测试场景中,根据测试脚本触发虚拟场景中的虚拟事件;

7、根据虚拟事件类型向真实车辆发送控制指令,引导驾驶员主动操作,并实时获取驾驶员操作数据;

8、在测试过程中,实时获取驾驶员生理数据和车辆状态数据,结合驾驶员操作数据,形成多维度测试数据;

9、对多维度测试数据进行时间戳同步后关联分析,生成测试报告。

10、进一步的技术方案,所述测试脚本是预先编写的测试流程描述文件,至少包括场景类型、虚拟事件及其触发时机和触发条件、控制指令的类型和参数。

11、进一步的技术方案,构建虚实融合测试场景,具体包括:

12、采用卷积神经网络模型对真实座舱图像进行特征提取,得到物理部件的二维坐标和深度信息;

13、根据物理部件的二维坐标和深度信息,结合相机内参和畸变参数,计算虚拟场景坐标系与真实座舱坐标系之间的空间对齐参数;

14、根据空间对齐参数,将虚拟场景变换至真实座舱坐标系,并叠加至真实座舱图像的对应位置,构建虚实融合测试场景。

15、进一步的技术方案,根据测试脚本中定义的虚拟事件的触发时机和触发条件触发虚拟事件,更新虚拟场景状态,使虚拟事件在虚拟场景中呈现;所述虚拟事件至少包括虚拟交通参与者的行为事件、虚拟环境因素的变化事件和虚拟车辆故障事件。

16、进一步的技术方案,所述控制指令包括场景感知类指令和安全保护类指令,所述场景感知类指令用于向真实车辆的感知反馈类执行部件发送指令,使驾驶员感知到虚拟事件的物理影响,引导驾驶员主动操作;所述安全保护类指令用于在驾驶员操作响应时间超过预设安全阈值时,向安全执行部件发送保护指令。

17、进一步的技术方案,对多维度测试数据进行时间戳同步后关联分析,具体包括:对多维度测试数据中各类数据进行卡尔曼滤波,将经过卡尔曼滤波后的各类数据进行重采样,得到时间戳同步后的多维数据序列;根据时间戳同步后的多维数据序列计算各项测试指标;将各项测试指标汇总生成测试报告。

18、进一步的技术方案,对所述多维数据序列中的驾驶员生理数据进行加权融合处理,得到驾驶员认知负荷量化指标,基于驾驶员认知负荷量化指标实时调整虚拟事件的触发频率和强度。

19、第二方面,本发明提供了基于增强现实与虚拟现实融合的自动化测试系统,包括真实车辆座舱、图像采集模块、增强现实与虚拟现实场景生成模块、虚实融合模块、车辆控制接口模块和测试控制与评估模块;

20、所述图像采集模块,其被配置为:实时获取真实座舱图像;

21、所述增强现实与虚拟现实场景生成模块,其被配置为:根据测试脚本中定义的场景类型生成虚拟场景;

22、所述虚实融合模块,其被配置为:将虚拟场景与真实座舱图像进行时空同步与空间叠加,构建虚实融合测试场景;

23、所述车辆控制接口模块,其被配置为:根据虚拟事件类型向真实车辆发送控制指令,引导驾驶员主动操作,并实时获取驾驶员操作数据;

24、所述测试控制与评估模块,其被配置为:获取车辆的测试脚本;在虚实融合测试场景中,根据测试脚本触发虚拟场景中的虚拟事件;在测试过程中,实时获取驾驶员生理数据和车辆状态数据,结合驾驶员操作数据,形成多维度测试数据;对多维度测试数据进行时间戳同步后关联分析,生成测试报告。

25、第三方面,本发明提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如第一方面所述的基于增强现实与虚拟现实融合的自动化测试方法中的步骤。

26、第四方面,本发明提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如第一方面所述的基于增强现实与虚拟现实融合的自动化测试方法中的步骤。

27、以上一个或多个技术方案存在以下有益效果:

28、本发明通过将虚拟测试场景与真实车辆座舱图像进行时空同步与空间叠加,构建虚实融合测试场景,使驾驶员能够在真实操控界面上对虚拟场景事件做出反应,克服了纯虚拟仿真测试缺乏真实操控反馈、实车测试难以安全复现极端危险场景的技术缺陷;通过根据虚拟事件类型向真实车辆发送控制指令,引导驾驶员主动操作并实时获取驾驶员操作数据,确保驾驶员始终作为测试主体,使后续采集的生理数据与操作数据具有明确的关联依据;通过在测试过程中同步获取驾驶员生理数据、车辆状态数据和驾驶员操作数据,形成覆盖驾驶员行为层、生理层与车辆响应层的多维度测试数据;通过对多维度测试数据进行时间戳同步后关联分析,生成综合评估测试报告,实现了对驾驶员状态与车辆系统交互响应的同步评估,弥补了现有测试方法仅关注车辆响应而忽略驾驶员因素的不足,显著提升了测试结果的真实性、全面性和有效性。

29、本发明附加方面的优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。

1.基于增强现实与虚拟现实融合的自动化测试方法,其特征在于,包括:

2.如权利要求1所述的基于增强现实与虚拟现实融合的自动化测试方法,其特征在于,所述测试脚本是预先编写的测试流程描述文件,至少包括场景类型、虚拟事件及其触发时机和触发条件、控制指令的类型和参数。

3.如权利要求1所述的基于增强现实与虚拟现实融合的自动化测试方法,其特征在于,构建虚实融合测试场景,具体包括:

4.如权利要求1所述的基于增强现实与虚拟现实融合的自动化测试方法,其特征在于,根据测试脚本中定义的虚拟事件的触发时机和触发条件触发虚拟事件,更新虚拟场景状态,使虚拟事件在虚拟场景中呈现;所述虚拟事件至少包括虚拟交通参与者的行为事件、虚拟环境因素的变化事件和虚拟车辆故障事件。

5.如权利要求1所述的基于增强现实与虚拟现实融合的自动化测试方法,其特征在于,所述控制指令包括场景感知类指令和安全保护类指令,所述场景感知类指令用于向真实车辆的感知反馈类执行部件发送指令,使驾驶员感知到虚拟事件的物理影响,引导驾驶员主动操作;所述安全保护类指令用于在驾驶员操作响应时间超过预设安全阈值时,向安全执行部件发送保护指令。

6.如权利要求1所述的基于增强现实与虚拟现实融合的自动化测试方法,其特征在于,对多维度测试数据进行时间戳同步后关联分析,具体包括:对多维度测试数据中各类数据进行卡尔曼滤波,将经过卡尔曼滤波后的各类数据进行重采样,得到时间戳同步后的多维数据序列;根据时间戳同步后的多维数据序列计算各项测试指标;将各项测试指标汇总生成测试报告。

7.如权利要求6所述的基于增强现实与虚拟现实融合的自动化测试方法,其特征在于,对所述多维数据序列中的驾驶员生理数据进行加权融合处理,得到驾驶员认知负荷量化指标,基于驾驶员认知负荷量化指标实时调整虚拟事件的触发频率和强度。

8.基于增强现实与虚拟现实融合的自动化测试系统,其特征在于,包括真实车辆座舱、图像采集模块、增强现实与虚拟现实场景生成模块、虚实融合模块、车辆控制接口模块和测试控制与评估模块;

9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一项所述的基于增强现实与虚拟现实融合的自动化测试方法中的步骤。

10.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-7中任一项所述的基于增强现实与虚拟现实融合的自动化测试方法中的步骤。