多输入场景识别方法、终端设备及可读存储介质与流程

技术特征：
1.一种多输入场景识别方法，其特征在于，包括以下：采集一应用程序下的若干场景图像，获取一场景图像，基于所述场景图像选取若干特征区域，并根据所述特征区域截取特征图像，集合以获得所述场景图像的特征图像集；根据各个所述场景图像的特征图像集以及所述场景图像的预设图像信息标签对应生成训练样本集；创建识别模型，并采用所述训练样本集对所述识别模型进行训练，其中，所述识别模型包括同步执行的拼接识别模型、堆叠识别模型及特征提取识别模型；在训练过程中分别计算所述拼接识别模型、堆叠识别模型及特征提取识别模型的准确率，并根据所述准确率确认所述应用程序对应的最优模型；获取待识别的场景图像，识别所述待识别的场景图像的对应的应用程序并调用最优模型处理，获得包含所述待识别的场景图像对应的场景信息的目标结果。2.根据权利要求1所述的多输入场景识别方法，其特征在于，采用所述训练样本集对所述识别模型进行训练，包括以下：从训练样本集中获取一训练样本；将所述训练样本输入至所述识别模型，分别采用拼接识别模型、堆叠识别模型及特征提取识别模型同步处理，以获得用于确定所述训练样本中场景图像的场景信息的第一输出、第二输出和第三输出；将所述第一输出、第二输出和第三输出分别与所述场景图像的预设图像信息标签比对，并反向调整所述拼接识别模型、堆叠识别模型及特征提取识别模型；获取另一训练样本对所述识别模型，直至达到预设训练条件，停止训练。3.根据权利要求2所述的多输入场景识别方法，其特征在于，采用拼接识别模型处理，以获得用于确定所述训练样本中场景图像的场景信息的第一输出，包括以下：基于所述训练样本获取所述场景图像的特征图像集；将所述特征图像集中的各个特征图像输入至拼接识别模型；在所述拼接识别模型中对各个特征图像进行拼接，获得一个第一处理图像；采用第一深度可分离卷积网络对所述第一处理图像进行特征提取，获得第一输出。4.根据权利要求2所述的多输入场景识别方法，其特征在于，采用堆叠识别模型处理，以获得用于确定所述训练样本中场景图像的场景信息的第二输出，包括以下：基于所述训练样本获取所述场景图像的特征图像集；将所述特征图像集中的各个特征图像输入至堆叠识别模型；在所述堆叠识别模型中对各个特征图像进行通道堆叠，获得一个第二处理图像采用第二深度可分离卷积网络对所述第一处理图像进行特征提取，获得第二输出。5.根据权利要求2所述的多输入场景识别方法，其特征在于，采用特征提取识别模型处理，以获得用于确定所述训练样本中场景图像的场景信息的第三输出，包括以下：基于所述训练样本获取所述场景图像的特征图像集；将所述特征图像集中的各个特征图像输入至特征提取识别模型；在所述特征提取识别模型中采用若干第三深度可分离卷积网络同步对每一特征图像进行特征提取，而后将特征提取后的各个特征图像进行合并成一个第三处理图像；采用第三深度可分离卷积网络基于所述第三处理图像进行处理，获得第三输出。
6.根据权利要求1所述的多输入场景识别方法，其特征在于，所述分别所述拼接识别模型、堆叠识别模型及特征提取识别模型的准确率，并根据所述准确率确认与所述应用程序对应的最优模型，包括以下：获取一应用程序的各个场景图像及其对应的特征图像集；采集每一次训练下所述拼接识别模型、堆叠识别模型及特征提取识别模型的第一输出、第二输出和第三输出；根据所述场景图像的预设图像信息标签与每一次训练下第一输出、第二输出和第三输出计算所述拼接识别模型、堆叠识别模型及特征提取识别模型的准确率；根据所述准确率筛选出确认准确率最高对应的模型作为应用程序对应的最优模型。7.根据权利要求1所述的多输入场景识别方法，其特征在于，采集一应用程序下的若干场景图像，对各个所述场景图像进行类别标记，包括以下：获取一应用程序，并运行所述应用程序；在所述应用程序运行时录屏，以获得所述应用程序的视频，并对所述视频进行分帧，以生成所述应用程序下的场景图像；根据预设分类规则对各个所述场景图像进行预设图像信息标签标记。8.根据权利要求1所述的多输入场景识别方法，其特征在于，获取待识别的场景图像，包括以下：接收一应用程序启动信号，调用所述应用程序对应的最优模型；对所述应用程序进行监控，根据预设设置参数在应用程序中的运行画面进行截取，以获得画面截图；对所述画面截图确定特征区域并标记，获得待识别的场景图像。9.一种终端设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现上述权利要求1-8所述的多输入场景识别方法的步骤。10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现上述权利要求1-8所述的多输入场景识别方法的步骤。

技术总结
本发明提供了一种多输入场景识别方法、终端设备及可读存储介质，涉及计算机技术领域，包括：采集一应用程序下的若干场景图像，基于所述场景图像选取若干特征区域，以获得所述场景图像的特征图像集；生成训练样本集；创建识别模型，并对所述识别模型进行训练，其中，所述识别模型包括同步执行的拼接识别模型、堆叠识别模型及特征提取识别模型；确认所述应用程序对应的最优模型；获取待识别的场景图像，识别所述待识别的场景图像的对应的应用程序并调用最优模型处理，获得包含所述待识别的场景图像对应的场景信息的目标结果，解决现有场景识别采用全图识别，功耗较大且难度较高的问题。功耗较大且难度较高的问题。功耗较大且难度较高的问题。


技术研发人员：朱捷
受保护的技术使用者：南昌黑鲨科技有限公司
技术研发日：2021.11.05
技术公布日：2022/1/25