公交车安全预警方法、预警装置、存储介质和预警系统与流程

本申请涉及公交车安全预警领域，尤其涉及一种公交车安全预警方法、预警装置、存储介质和预警系统。

背景技术：

1、现有公交安全预警技术主要依赖单一车载视频监控为数据基础，依赖视觉识别算法对车厢内安全事件的类型进行感知，当车厢内人员密集遮挡、光照骤变等场景下，图像特征提取易受环境噪声干扰，导致安全事件的类型的误检率显著升高，误检会触发错误的安全预警策略，严重削弱了公交车预警技术的可靠性。

技术实现思路

1、本申请提供了一种公交车安全预警方法、公交车安全预警装置、计算机可读存储介质和公交车安全预警系统，以解决现有技术中的公交车预警技术可靠性低下的问题。

2、第一方面，本申请提供了一种公交车安全预警方法，所述方法应用于所述公交车的车载智能终端，所述方法包括：获取目标时段的公交车内视频数据和所述目标时段的公交车内音频数据；根据所述公交车内视频数据和所述公交车内音频数据，确定所述目标时段的安全事件的特征信息，所述特征信息至少包括：类型；根据所述安全事件的特征信息，确定所述目标时段的安全预警策略；执行所述安全预警策略。

3、可选的，根据所述公交车内视频数据和所述公交车内音频数据，确定所述目标时段的安全事件的特征信息，包括：将所述公交车内视频数据输入视觉事件识别模型，得到所述目标时段的视觉事件类型和所述目标时段的视觉事件类型的置信度；将所述公交车内音频数据输入音频事件识别模型，得到所述目标时段的声音事件类型和所述目标时段的声音事件类型的置信度；根据所述目标时段的视觉事件类型、所述目标时段的视觉事件类型的置信度、所述目标时段的声音事件类型和所述目标时段的声音事件类型的置信度，确定所述安全事件的特征信息。

4、可选的，所述特征信息还包括：等级，根据所述目标时段的视觉事件类型、所述目标时段的视觉事件类型的置信度、所述目标时段的声音事件类型和所述目标时段的声音事件类型的置信度，确定所述安全事件的特征信息，包括：在所述目标时段的视觉事件类型的置信度和所述目标时段的声音事件类型的置信度均大于置信度阈值时，根据所述目标时段的视觉事件类型和所述目标时段的声音事件类型查询预设的映射关系表，确定所述安全事件的类型和所述安全事件的等级，所述映射关系表包含视觉事件类型、声音事件类型、安全事件的类型和安全事件的等级之间的映射关系。

5、可选的，根据所述安全事件的特征信息，确定所述目标时段的安全预警策略，包括：在所述安全事件的等级为第一等级且所述安全事件的类型为乘客冲突时，至少确定所述安全预警策略包括第一预设安全预警策略，所述第一预设安全预警策略为控制语音播放单元播放劝阻语音；在所述安全事件的等级为第二等级且所述安全事件的类型为违法行为时，至少确定所述安全预警策略包括第二预设安全预警策略，所述第一等级小于所述第二等级，所述第二预设安全预警策略为控制声光报警单元进行声光报警。

6、可选的，在所述安全事件的等级为第一等级且所述安全事件的类型为乘客冲突时，至少确定所述安全预警策略包括第一预设安全预警策略，包括：确定所述安全预警策略包括第三预设安全预警策略，所述第三预设安全预警策略为将所述安全事件的第一状态数据发送至调度云平台，所述第一状态数据至少包括：所述公交车内视频数据、所述公交车内音频数据、所述安全事件的类型和所述安全事件的等级。

7、可选的，在所述安全事件的等级为第二等级且所述安全事件的类型为违法行为时，至少确定所述安全预警策略包括第二预设安全预警策略，包括：确定所述安全预警策略包括第四预设安全预警策略，所述第四预设安全预警策略为通过车门控制继电器控制车门关闭。

8、可选的，在所述安全事件的等级为第二等级且所述安全事件的类型为违法行为时，至少确定所述安全预警策略包括第二预设安全预警策略，包括：确定所述安全预警策略包括第五预设安全预警策略，所述第五预设安全预警策略为将所述安全事件的第二状态数据发送至公安警务云平台，所述第二状态数据至少包括：所述公交车内视频数据、所述公交车内音频数据、所述安全事件的类型、所述安全事件的等级、所述公交车的牌照图像数据、所述公交车的位置信息和所述公交车的司机联系方式。

9、第二方面，本申请提供了一种公交车安全预警装置，所述装置应用于所述公交车的车载智能终端，所述装置包括：获取单元，用于获取目标时段的公交车内视频数据和所述目标时段的公交车内音频数据；第一确定单元，用于根据所述公交车内视频数据和所述公交车内音频数据，确定所述目标时段的安全事件的特征信息，所述特征信息至少包括：类型；第二确定单元，用于根据所述安全事件的特征信息，确定所述目标时段的安全预警策略；执行单元，用于执行所述安全预警策略。

10、第三方面，本申请提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现任一种所述的公交车安全预警方法的步骤。

11、第四方面，本申请还提供了一种公交车安全预警系统，所述系统包括：视频采集单元，位于所述公交车内，用于采集公交车内视频数据；音频采集单元，位于所述公交车内，用于采集公交车内音频数据；语音播放单元，位于所述公交车内；声光报警单元，位于所述公交车内；车门控制继电器，位于所述公交车内；车载智能终端，位于所述公交车内，所述车载智能终端用于实现如任一种所述的公交车安全预警方法的步骤。

12、本申请实施例中，确定安全事件的特征信息，不仅依据公交车内视频数据，还综合考虑了公交车内音频数据，进而确保安全事件的特征信息的准确性，进而确保依据安全事件的特征信息确定安全预警策略的准确性，进而提高了公交车预警技术的可靠性，从而解决了现有技术中的公交车预警技术可靠性低下的问题。

1.一种公交车安全预警方法，其特征在于，所述方法应用于所述公交车的车载智能终端，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，根据所述公交车内视频数据和所述公交车内音频数据，确定所述目标时段的安全事件的特征信息，包括：

3.根据权利要求2所述的方法，其特征在于，所述特征信息还包括：等级，根据所述目标时段的视觉事件类型、所述目标时段的视觉事件类型的置信度、所述目标时段的声音事件类型和所述目标时段的声音事件类型的置信度，确定所述安全事件的特征信息，包括：

4.根据权利要求3所述的方法，其特征在于，根据所述安全事件的特征信息，确定所述目标时段的安全预警策略，包括：

5.根据权利要求4所述的方法，其特征在于，在所述安全事件的等级为第一等级且所述安全事件的类型为乘客冲突时，至少确定所述安全预警策略包括第一预设安全预警策略，包括：

6.根据权利要求4所述的方法，其特征在于，在所述安全事件的等级为第二等级且所述安全事件的类型为违法行为时，至少确定所述安全预警策略包括第二预设安全预警策略，包括：

7.根据权利要求6所述的方法，其特征在于，在所述安全事件的等级为第二等级且所述安全事件的类型为违法行为时，至少确定所述安全预警策略包括第二预设安全预警策略，包括：

8.一种公交车安全预警装置，其特征在于，所述装置应用于所述公交车的车载智能终端，所述装置包括：

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的公交车安全预警方法的步骤。

10.一种公交车安全预警系统，其特征在于，所述系统包括：