基于深度学习的语言训练方法及系统与流程

技术特征：
1.一种基于深度学习的语言训练方法，其特征在于，包括：获取目标学习者读预设语言文字信息时的表述信息，所述表述信息包括语音；基于智能语音分析技术，在预设发音层次上对所述语音进行特征分析和统计，获取分析结果；所述预设发音层次，包括：音素、单字发音、词组发音和语句发音的至少一种；以预设形象化方式显示所述分析结果，以使所述目标学习者实时查看所述分析结果，从而对发音进行纠正或改进。2.根据权利要求1所述的方法，其特征在于，所述以预设形象化方式显示所述分析结果，包括：以不同标志显示不同准确度的预设文字信息发音结果；所述发音结果，包括：准确、完整和待提升；所述不同标志包括不同颜色。3.根据权利要求2所述的方法，其特征在于，还包括：接收查看指令，根据所述查看指令，查看对应的提升策略；若所述查看指令为查看待提升发音结果，则所述提升策略为：显示对应文字标准发音的基准唇形。4.根据权利要求1所述的方法，其特征在于，所述表述信息，还包括：嘴型空间形状数据；所述方法，还包括；将与所述预设语言文字信息相对应的教学嘴型空间形状数据，和，所述目标学习者的嘴型空间形状数据进行对比评价，生成评价结果；所述以预设形象化方式显示所述分析结果，还包括：以预设形象话方式显示所述评价结果。5.根据权利要求4所述的方法，其特征在于，所述嘴型空间形状数据，包括：唇形；所述获取目标学习者读预设语言文字信息时的表述信息，包括；基于人脸3d模型提取目标学习者根据预设语言文字信息进行发音时的唇形。6.根据权利要求5所述的方法，其特征在于，所述将与所述预设语言文字信息相对应的教学嘴型空间形状数据，和，所述目标学习者的嘴型空间形状数据进行对比评价，生成评价结果，包括：逐帧确定所述与所述预设语言文字信息相对应的教学嘴型空间形状数据中的基准唇形数据；基于图像转换过程中的不变量，确定所述所述目标学习者的唇形数据；以所述基准唇形数据为基准，逐帧匹配所述基准唇形数据和所述目标学习者的唇形数据，生成评价结果。7.根据权利要求4所述的方法，其特征在于，所述获取目标学习者读预设语言文字信息时的表述信息，包括：基于摄像装置，获取目标学习者根据预设语言文字信息进行发音时的嘴型图像，并在显示界面进行显示；根据所述嘴型图像，获取目标学习者根据预设语言文字信息进行发音时的嘴型空间形状数据。8.根据权利要求1所述的方法，其特征在于，所述预设形象化方式，包括；数字评分，和/或，视觉评分；所述视觉评分的评价规则，包括：显示不同个数或大小的设定形状来代表评价结果。
9.根据权利要求1-8任一所述的方法，其特征在于，所述基于智能语音分析技术，在预设发音层次上对所述语音进行特征分析和统计，获取分析结果，包括：基于智能语音分析技术，对比所述语音与预设听障声学语言模型，获取分析结果。10.一种基于深度学习的语言训练系统，其特征在于，包括：获取模块、分析模块和显示模块；所述获取模块，用于获取目标学习者读预设语言文字信息时的语音；所述分析模块，用于基于智能语音分析技术，在预设发音层次上对所述语音进行特征分析和统计，获取分析结果；所述预设发音层次，包括：音素、单字发音、词组发音和语句发音的至少一种；所述显示模块，用于以预设形象化方式显示所述分析结果，以使所述目标学习者实时查看所述分析结果，从而对发音进行纠正或改进。

技术总结
本发明涉及一种基于深度学习的语言训练方法及系统，属于听障人士语言学习技术领域，该方法通过获取目标学习者读预设语言文字信息时的表述信息，基于智能语音分析技术，在预设发音层次上对所述语音进行特征分析和统计，获取分析结果；以预设形象化方式显示所述分析结果，以使所述目标学习者实时查看所述分析结果，从而对发音进行纠正或改进。本发明利用智能语音分析技术在音素、字、词、句各层次上对学习者语音特征进行分析和统计，对各种发音错误以形象化方式实时反馈进而帮助练习者纠正和改进发音，提升了语言康复训练效果。提升了语言康复训练效果。提升了语言康复训练效果。


技术研发人员：史献忠 雷虹
受保护的技术使用者：无锡柠檬科技服务有限公司
技术研发日：2022.04.12
技术公布日：2022/7/15