一种电力调度录音关键信息自动提取与检索方法、系统、设备及介质与流程
本发明涉及电力系统信息化与人工智能技术交叉领域,尤其涉及一种电力调度录音关键信息自动提取与检索方法、系统、设备及介质。
背景技术:
1、电力调度中心日常产生大量调度电话录音,其中包含了故障报告、操作指令、状态确认等关键信息。目前,这些录音的利用主要依赖于人工回听与记录,效率低下、耗时耗力,且在紧急情况下无法实现信息的快速定位与回溯。现有技术中,虽有通用的语音转文字服务,但其在电力调度专业场景下存在明显不足包括,对电力领域专业词汇、设备编号、地名等识别准确率低;无法从转写的长篇文本中自动结构化提取关键信息项;缺乏针对提取后的关键信息进行高效、多维度检索的能力。这导致海量调度录音数据成为“数据孤岛”,其核心价值未被有效挖掘。
2、因此,迫切需要一种能够自动、准确、高效地从电力调度录音中提取结构化关键信息,并提供智能检索的方法,以提升调度运行的信息化水平和应急处置能力。本发明提供一种电力调度录音关键信息自动提取与检索方法。其目的是实现调度录音的自动转写、关键信息的精准结构化提取、以及提取信息的快速智能检索,从而大幅提升调度信息处理的自动化水平和利用效率。
技术实现思路
1、鉴于上述现有存在的问题,本发明提供了一种电力调度录音关键信息自动提取与检索方法、系统、设备及介质,解决对电力领域专业词汇、设备编号、地名等识别准确率低,无法从转写的长篇文本中自动结构化提取关键信息项,以及缺乏针对提取后的关键信息进行高效、多维度检索的能力的问题。
2、为解决上述技术问题,本发明提供如下技术方案:
3、第一方面,本发明提供了一种电力调度录音关键信息自动提取与检索方法,包括:
4、获取电力调度录音文件,对所述电力调度录音文件进行预处理,得到标准化音频文件;
5、利用领域自适应语音识别引擎对所述标准化音频文件进行语音识别,得到识别文本;
6、对所述识别文本进行信息抽取,得到结构化信息记录,将所述结构化信息记录转化为多模态索引存储结构;
7、获取结构化查询条件,基于所述结构化查询条件并行检索所述多模态索引存储结构,得到候选记录集;
8、对所述候选记录集进行计算得到目标记录,根据所述目标记录的音频定位信息截取对应录音片段并返回检索结果,实现电力调度录音关键信息的自动提取与检索。
9、作为本发明所述的一种电力调度录音关键信息自动提取与检索方法的一种优选方案,其中:对所述电力调度录音文件进行预处理,得到标准化音频文件包括:
10、利用自适应滤波器对电力调度录音文件进行自适应降噪处理,得到降噪音频信号;
11、对降噪音频信号进行自动增益控制,得到归一化音频信号;
12、利用语音活动检测模型对归一化音频信号进行分类,得到有效语音段落;
13、对有效语音段落根据静音间隙长度进行通话会话切分,得到标准化音频文件。
14、作为本发明所述的一种电力调度录音关键信息自动提取与检索方法的一种优选方案,其中:对所述标准化音频文件进行语音识别,得到识别文本包括:
15、对标准化音频文件提取声学特征序列;
16、将声学特征序列输入声学模型进行解码,得到音素状态的后验概率;
17、构建电力调度热词列表并编译为偏置图,融合电力调度领域语言模型,将音素状态的后验概率、偏置图的偏置得分及语言模型的语言概率进行联合解码,输出最优文本序列;
18、对最优文本序列进行时间戳对齐与置信度标注,得到带时间戳的识别文本。
19、本优选技术方案的有益效果为,能够适配电力专业词汇,提升转写精度,精准标注音频时间戳。
20、作为本发明所述的一种电力调度录音关键信息自动提取与检索方法的一种优选方案,其中:对所述识别文本进行信息抽取,得到结构化信息记录包括:
21、对识别文本进行文本预处理,得到规整化文本;
22、利用预训练语言模型对规整化文本进行编码,得到上下文语义向量序列;
23、根据上下文语义向量序列,利用序列标注方式识别规整化文本中的命名实体,得到实体集合;
24、对实体集合进行关系分类,得到实体关系三元组集合;
25、根据预定义的关键信息模板,将实体集合和实体关系三元组集合填充至对应字段,生成结构化信息记录。
26、本优选技术方案的有益效果为,能够自动抽取电力实体与关系,生成标准结构化记录。
27、作为本发明所述的一种电力调度录音关键信息自动提取与检索方法的一种优选方案,其中:所述结构化信息记录转化为多模态索引存储结构包括:
28、建立结构化信息记录与原始录音文件之间的映射三元组;
29、对结构化信息记录中各字段内容进行差异化分词并标记字段来源,构建倒排索引表;
30、根据结构化信息记录中各字段拼接生成的拼接文本,利用预训练语言模型编码得到语义向量,构建语义向量索引;
31、根据结构化信息记录中的故障时间字段,构建时间维度索引;
32、将映射三元组、倒排索引表、语义向量索引和时间维度索引固化存储,形成多模态索引存储结构。
33、本优选技术方案的有益效果为,通过多索引协同支撑多维检索,兼顾精准与语义查询,快速定位录音片段。
34、作为本发明所述的一种电力调度录音关键信息自动提取与检索方法的一种优选方案,其中:并行检索所述多模态索引存储结构,得到候选记录集包括:
35、响应于用户输入自然语言查询,对自然语言查询进行解析,得到结构化查询条件;
36、根据实体约束字段,以复合索引键查询倒排索引表,得到精确匹配记录集;
37、根据自然语言查询的分词结果查询倒排索引表,得到全文关键词召回记录集;
38、根据自然语言查询编码得到的查询向量检索语义向量索引,得到语义召回记录集;
39、根据时间约束字段查询时间维度索引,得到时间命中记录集;
40、将精确匹配记录集、全文关键词召回记录集、语义召回记录集和时间命中记录集按记录标识进行并集合并,得到候选记录集。
41、作为本发明所述的一种电力调度录音关键信息自动提取与检索方法的一种优选方案,其中:对所述候选记录集进行计算得到目标记录,根据所述目标记录的音频定位信息截取对应录音片段并返回检索结果包括:
42、分别计算候选记录集中各候选记录的精确匹配得分、关键词命中得分、语义相似度得分和时间匹配得分;
43、根据自然语言查询的查询特征,确定关键词权重、语义权重、时间权重和精确权重;
44、对各候选记录进行加权求和,得到各候选记录的综合得分;
45、将候选记录按综合得分排列,选取综合得分最高的记录作为目标记录;
46、读取目标记录对应的映射三元组,根据映射三元组中的录音文件路径和起止时间偏移量,从原始录音文件中截取对应的音频片段,将目标记录的结构化信息与音频片段关联后返回检索结果。
47、第二方面,本发明提供了一种电力调度录音关键信息自动提取与检索方法的系统,包括:
48、预处理模块,用于获取电力调度录音文件,对所述电力调度录音文件进行预处理,得到标准化音频文件;
49、语音识别模块,用于利用领域自适应语音识别引擎对所述标准化音频文件进行语音识别,得到识别文本;
50、信息抽取与结构转化模块,用于对所述识别文本进行信息抽取,得到结构化信息记录,将所述结构化信息记录转化为多模态索引存储结构;
51、并行检索模块,用于获取结构化查询条件,基于所述结构化查询条件并行检索所述多模态索引存储结构,得到候选记录集;
52、检索结果返回模块,用于对所述候选记录集进行计算得到目标记录,根据所述目标记录的音频定位信息截取对应录音片段并返回检索结果,实现电力调度录音关键信息的自动提取与检索。
53、第三方面,本发明提供了一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现所述的一种电力调度录音关键信息自动提取与检索方法的步骤。
54、第四方面,本发明提供了一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现所述的一种电力调度录音关键信息自动提取与检索方法的步骤。
55、与现有技术相比,本发明的有益效果:本发明实现了调度录音的全自动处理、自然语言检索、片段级定位及跨录音关联等新功能;本发明采用领域自适应的asr模型,提升了电力专业词汇和口音的识别率,为后续信息抽取奠定了高质量文本基础。本发明实现了从原始录音到结构化关键信息的全流程自动处理,无需人工干预,极大解放了人力。本发明通过深度学习的nlp模型,将非结构化的对话文本精准转化为预定义格式的结构化数据,便于计算机处理与分析;本发明结合关键词倒排索引和语义向量索引,支持快速精确检索和灵活的自然语言语义检索,使得海量录音中的关键信息能够快速定位。本发明系统紧密结合电力调度业务需求,抽取的信息项直接对应调度日志、故障报告等业务表单,有效支撑调度决策和事故追溯。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com