测试装置、方法、存储介质及电子设备与流程

本公开涉及智能驾驶系统测试，尤其涉及一种测试装置、方法、存储介质及电子设备。

背景技术：

1、随着科技的发展，测试智能驾驶系统时通常涉及多个本质不同的测试域，例如软件功能测试域，传感器性能测试域。

2、软件功能测试主要关注软件算法逻辑是否正确、智能驾驶系统的各个模块间通信的可靠性以及智能驾驶系统的时序一致性。软件功能测试的测试输出为离散的软件测试通过或软件测试失败二元结果、错误信息和执行轨迹。传感器性能测试主要关注智能驾驶系统涉及的物理感知质量、硬件响应性能、环境适应性等。传感器性能测试的测试输出为检测置信度、跟踪精度、端到端延迟、信噪比等连续物理指标。相关技术中，在进行智能驾驶系统测试时，大都是对不同的测试域进行独立测试，容易出现故障漏检，降低了智能驾驶系统测试结果的精准性。

3、因此，如何提高智能驾驶系统测试结果的精准性，同时降低故障漏检率是目前亟需解决的问题。

技术实现思路

1、本公开实施例提供了一种测试装置、方法、存储介质及电子设备，能够提高智能驾驶系统测试结果的精准性，同时降低故障漏检率。

2、第一方面，本公开实施例提供一种测试装置，所述装置包括：处理器，所述处理器被配置为：

3、获取测试结果；所述测试结果是基于测试用例对智能驾驶系统执行测试得到的；

4、基于所述测试结果，确定软件测试得分和软件事件序列；

5、获取所述测试用例对应的传感器数据和硬件测试得分；

6、基于所述软件事件序列和所述传感器数据，确定事件关联得分；

7、基于所述软件测试得分、所述硬件测试得分和所述事件关联得分，确定所述智能驾驶系统的测试得分。

8、第二方面，本公开实施例提供一种测试方法，包括：

9、获取测试结果；所述测试结果是基于测试用例对智能驾驶系统执行测试得到的；

10、基于所述测试结果，确定软件测试得分和软件事件序列；

11、获取所述测试用例对应的传感器数据和硬件测试得分；

12、基于所述软件事件序列和所述传感器数据，确定事件关联得分；

13、基于所述软件测试得分、所述硬件测试得分和所述事件关联得分，确定智能驾驶系统的测试得分。

14、第三方面，本公开实施例提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序指令，所述计算机程序指令被处理器执行时实现如第二方面所述的测试方法。

15、第四方面，本公开实施例提供了一种计算机程序产品，包括计算机程序，计算机程序被处理器执行，以用于实现如第二方面所述的测试方法。

16、第五方面，本公开实施例提供了一种电子设备，电子设备包括：处理器；用于存储所述处理器可执行指令的存储器；所述处理器，用于从所述存储器中读取所述可执行指令，所述处理器执行所述可执行指令以实现如第二方面所述的测试方法。

17、本公开实施例的测试装置，通过软件事件序列和传感器数据确定了事件关联得分，在确定智能驾驶系统的测试得分时，不仅考虑了软件测试得分、硬件测试得分，还考虑了软件和硬件二者之间的事件关联得分，相较于现有技术中软件、硬件两域独立测试的方式，一方面，当软件功能测试通过但传感器性能处于退化边缘时，通过事件关联得分能够捕捉到软件、硬件两域之间的异常关联，避免将该测试用例直接标记为“通过”而漏检“传感器退化引起的软件假通过”故障，显著降低了跨域故障漏检率，提升了智能驾驶系统测试结果的精准性。另一方面，当软件异常与硬件异常在时序上高度耦合时，通过事件关联得分能够对二者进行关联分析，避免将独立的硬件异常误判为智能驾驶系统异常，有利于识别跨域交互故障。

1.一种测试装置，包括处理器，所述处理器被配置为：

2.根据权利要求1所述的测试装置，其中，所述处理器具体被配置为：

3.根据权利要求2所述的测试装置，其中，所述处理器具体被配置为：

4.根据权利要求3所述的测试装置，其中，所述处理器具体被配置为：

5.根据权利要求1所述的测试装置，其中，所述处理器具体被配置为：

6.根据权利要求1所述的测试装置，其中，所述处理器具体被配置为：

7.根据权利要求6所述的测试装置，其中，所述预设阈值基于目标场景历史传感器数据的均值和标准差确定；所述目标场景为基于所述测试用例对智能驾驶系统执行测试时所处的场景。

8.根据权利要求1-7任一项所述的测试装置，其中，所述处理器具体被配置为：

9.根据权利要求8所述的测试装置，其中，所述处理器具体被配置为：

10.根据权利要求9所述的测试装置，其中，所述处理器具体被配置为：

11.根据权利要求10所述的测试装置，其中，所述处理器具体被配置为：

12.根据权利要求11所述的测试装置，其中，所述处理器具体被配置为：

13.根据权利要求12所述的测试装置，其中，所述处理器具体被配置为：

14.一种测试方法，包括：

15.一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序被处理器执行，以用于执行上述权利要求14所述的测试方法。

16.一种电子设备，所述电子设备包括：