转写测试方法、装置、电子设备及存储介质与流程

本技术涉及性能测试的，尤其涉及一种转写测试方法、装置、电子设备及存储介质。

背景技术：

1、录音背夹是一种可夹持衣物或贴合手机背部携带的商用录音设备，集成蓝牙与无线保真（wireless fidelity，wifi）双模通信架构，并配合应用程序实现人工智能（artificial intelligence，ai）多人对话文本转写，转写准确率是判断录音背夹的音频还原能力的重要指标，转写准确率越高表明录音背夹的音频还原能力越强。目前，转写测试技术通常针对录音笔、通用麦克风设计，导致测试工况与实际应用场景脱节，转写测试可靠性难以匹配实际需求。

技术实现思路

1、有鉴于此，本技术实施例提供一种转写测试方法、装置、电子设备及存储介质，旨在提高录音背夹的转写测试可靠性。

2、第一方面，本技术提供了一种转写测试方法，应用于转写测试装置，所述转写测试装置包括播放模块、转写模块及校对模块；所述方法包括：对录音背夹迭代执行一个轮次的转写测试，包括：响应于本轮的测试指令，所述播放模块获取本轮对应的测试音频，依据所述测试音频进行音频播放；通过所述录音背夹对播放的测试音频进行录音，得到音频文件，将所述音频文件传输至所述转写模块，确定传输时长；所述转写模块基于音频文件进行转写，生成测试转写文本并确定转写时长，将所述测试转写文本传输至所述校对模块；所述校对模块获取所述测试音频的标准转写文本，利用所述标准转写文本对所述测试转写文本进行校对，确定转写准确率及校对时长；获取当前迭代信息，若基于所述当前迭代信息确定不满足预设的迭代终止条件，所述播放模块获取当前轮次的所述测试音频的音频时长，依据所述传输时长、所述转写时长、所述音频时长及所述校对时长，确定测试间隔时长，基于所述测试间隔时长更新所述测试指令，并重复执行对所述录音背夹迭代执行一个轮次的转写测试；若基于所述当前迭代信息确定满足所述迭代终止条件，所述校对模块根据所有轮次对应的转写准确率，生成所述录音背夹的测试报告。

3、本技术的上述实施例通过设置于转写测试装置的播放模块、转写模块与校对模块，在录音背夹的转写测试中保留了模块之间的传输，还原了用户使用场景的真实工况，能够验证传输过程中的延时、丢包或音频失真对转写的影响，提高了转写测试的可靠性与实际参考价值。另外，本技术依据每轮的传输时长、转写时长、音频时长及校对时长确定测试间隔时长，基于测试间隔时长更新测试指令以控制下一轮测试的启动时机，确保了每轮测试任务在时间轴上隔离，避免在多轮迭代的转写测试中因上一轮任务未完成即启动下一轮测试而造成文件覆盖、任务错乱及数据丢失，保障了转写测试的评估的完整性、可靠性与准确性。

4、在本技术的一些实施例中，所述利用所述标准转写文本对所述测试转写文本进行校对，确定转写准确率，包括：获取所述标准转写文本的总字数，对所述标准转写文本及所述测试转写文本进行对比，确定所述标准转写文本及所述测试转写文本之间的错字数；基于所述错字数及总字数确定所述测试转写文本的错字率，根据所述错字率确定所述转写准确率。

5、本技术的上述实施例将标准转写文本的总字数作为归一化基准，使得不同长度的测试音频所对应的转写准确率处于同一量纲之下，消除了音频时长差异对评估结果的干扰，保证了不同轮次、不同测试音频之间转写准确率的可比性，为后续生成测试报告提供了准确且可量化的数据支撑。

6、在本技术的一些实施例中，所述根据所有轮次对应的转写准确率，生成所述录音背夹的测试报告，包括：基于所有转写准确率，确定平均准确率及准确率波动区间；基于所述平均准确率及所述准确率波动区间，生成所述测试报告。

7、本技术的上述实施例通过所有轮次对应的平均准确率与准确率波动区间生成测试报告，采用平均准确率能够表征录音背夹在多轮迭代测试中转写能力的整体表现，采用准确率波动区间能够表征录音背夹在不同轮次测试中转写性能的一致程度，当准确率波动区间较窄时，说明录音背夹在各轮测试中的转写表现稳定，当准确率波动区间较宽时，说明录音背夹在部分轮次中受到无线传输链路中延时、丢包或音频失真等因素的影响导致转写质量出现波动，使得输出的测试报告能够反映录音背夹在多轮测试中转写性能的整体水平与稳定性。

8、在本技术的一些实施例中，所述根据所有轮次对应的转写准确率，生成所述录音背夹的测试报告，包括：基于所有转写准确率，确定平均准确率及准确率波动区间，并对所有转写准确率进行时序回归分析，确定稳定性数据，所述稳定性数据用于表征转写准确率随轮次的变化特性；基于所述平均准确率、所述准确率波动区间及所述稳定性数据，生成所述测试报告。

9、本技术的上述实施例通过对所有转写准确率进行时序回归分析确定表征转写准确率随轮次变化特性的稳定性数据，时序回归分析通过建立转写准确率与测试轮次之间的数学回归模型，能够拟合出转写准确率随轮次变化的趋势曲线，从而量化提取出稳定性数据，基于平均准确率、准确率波动区间及稳定性数据生成测试报告，使得测试报告能够反映录音背夹在测试循环压力测试下的整体性能、波动范围及长期衰减趋势，为评估录音背夹在真实长时间使用场景下的可靠性提供了数据支撑。

10、在本技术的一些实施例中，将每种预设形态与每个测试音频进行交叉组合，构建工况二元组；所述获取当前迭代信息，若基于所述当前迭代信息确定不满足预设的迭代终止条件，包括：获取每个工况二元组的转写测试次数，将所述每个工况二元组的转写测试次数确定为所述当前迭代信息；若存在任一工况二元组的转写测试次数未达到预设测试次数，确定不满足所述迭代终止条件；所述若基于所述当前迭代信息确定满足所述迭代终止条件，包括：若所述每个工况二元组的转写测试次数均达到所述预设测试次数，确定满足所述迭代终止条件。

11、本技术的上述实施例通过将每种预设形态与每个测试音频进行交叉组合构建工况二元组，并以每个工况二元组的转写测试次数作为当前迭代信息来判断是否满足迭代终止条件，使得测试过程能够覆盖录音背夹在不同物理形态与不同测试音频组合下的全部工况。考虑到录音背夹在实际使用中存在多种使用形态（例如衣物夹持形态与手机背部贴合固定形态），不同形态下录音背夹的差异会影响采集到的音频信号质量，进而影响转写准确率。通过将所有预设形态与所有测试音频进行交叉组合，每一种形态与每一种测试音频的组合均构成独立的工况二元组，确保测试不会遗漏任何形态与音频的搭配情况，以及将迭代终止条件设定为每个工况二元组的转写测试次数均达到预设测试次数，保证了每个工况二元组均完成足够轮次的重复测试，避免了部分工况二元组因提前满足终止条件而被跳过或测试轮次不足的情况，提升了测试覆盖的完整性。

12、在本技术的一些实施例中，所述转写模块分别通过wifi及蓝牙，与所述录音背夹进行通信连接，所述转写模块与所述校对模块通过数据线进行电性连接。

13、本技术的上述实施例分别通过无线保真（wireless fidelity，wifi）及蓝牙与录音背夹进行通信连接，以及转写模块与校对模块通过数据线进行电性连接，使得测试链路完整保留了录音背夹在实际使用中的工作模式。由于录音背夹在真实使用场景下需要通过蓝牙接收控制指令并通过wifi热点向终端设备传输音频数据，无线传输过程中存在的信号衰减、延时抖动或数据包丢失等情况均会对音频信号的完整性产生影响，进而导致转写结果出现偏差。通过在转写测试中保留wifi及蓝牙双通道无线通信连接，测试过程保留无线传输环节，使得录音背夹输出的音频信号必须经过与真实使用工况相同的无线传输路径到达转写模块，转写模块接收到的音频信号包含了无线传输引入的细微偏差，从而确保转写准确率测试结果能够真实反映录音背夹在实际无线工作链路下的性能表现，提高了转写测试的准确性与可靠性。

14、在本技术的一些实施例中，所述方法还包括：对所述播放模块播放的测试音频进行去噪处理，使所述录音背夹根据得到去噪处理后的声源得到所述音频文件。

15、本技术的上述实施例通过对播放模块播放的测试音频进行去噪处理，使录音背夹根据去噪处理后的声源得到音频文件，隔绝外界杂散噪声与气流干扰，降低了环境变量对测试结果的干扰，从而提升了转写测试的测试准确性与可靠性。

16、第二方面，本技术提供了一种转写测试装置，所述转写测试装置对录音背夹迭代执行一个轮次的转写测试，包括：播放模块，用于执行响应于本轮的测试指令，获取本轮对应的测试音频，依据所述测试音频进行音频播放；所述播放模块，还用于获取当前迭代信息，若基于所述当前迭代信息确定不满足预设的迭代终止条件，获取当前轮次的所述测试音频的音频时长，依据所述传输时长、所述转写时长、所述音频时长及所述校对时长，确定测试间隔时长，基于所述测试间隔时长更新所述测试指令，并重复执行对所述录音背夹迭代执行一个轮次的转写测试；录音背夹，用于执行通过所述录音背夹对播放的测试音频进行录音，得到音频文件，将所述音频文件传输至所述转写模块，确定传输时长；转写模块，用于执行基于音频文件进行转写，生成测试转写文本并确定转写时长，将所述测试转写文本传输至所述校对模块；校对模块，用于执行获取所述测试音频的标准转写文本，利用所述标准转写文本对所述测试转写文本进行校对，确定转写准确率及校对时长；所述校对模块，还用于执行若基于所述当前迭代信息确定满足所述迭代终止条件，所述校对模块根据所有轮次对应的转写准确率，生成所述录音背夹的测试报告。

17、第三方面，本技术提供了一种电子设备，所述电子设备包括存储器、处理器，及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现上述的转写测试方法。

18、第四方面，本技术提供一种计算机存储介质，所述计算机存储介质存储有程序指令，当所述程序指令在处理器上运行时，使得所述处理器执行上述的转写测试方法。

19、另外，第二方面至第四方面所带来的技术效果可参见上述方法部分各设计的相关描述，此处不再赘述。