一种物品遗留提醒的方法、装置和存储介质与流程

1.本发明涉及视频监控领域，更具体地说，涉及一种物品遗留提醒的方法、装置和存储介质。


背景技术：

2.现有技术中，针对银行、酒店等场所，客户的物品遗留提醒问题，主要是通过安防中视频的监控查看或工作人员的现场主动排查去发现是否存在物品遗留问题。人力干预的传统处理流程，势必会低效，这种低效问题主要体现在：事前，是否存在物品遗留需要人工去识别；事中，人为发现后需要通过执行提前准备的预案，进行处理和干预；事后，处理完成后，没有很好的回溯、记录和评价的方法，无法为后续类似事件提供依据。会导致客户对网点的服务质量评价不满意，不利于厅堂网点的全面服务水平的提升。
3.中国发明公开：一种安防监控中遗留物品的检测方法及装置，公开号：cn102063614b，公开日：2015
‑
06
‑
03，公开了一种安防监控中遗留物品的检测方法及装置，包括：将场景平面划分为若干区域；在某一时间间隔内，将所述若干区域的某一相关区域进行两帧背景保存并求差计算；根据求差计算结果，判定所述相关区域内是否有目标遗留，并判定是否为遗留物品；若存在所述遗留物品，则提取所述遗留物品并报警；若没有遗留物品则继续对其他区域进行监测。但是该方法不区分工作人员和客户，也不识别遗留物品是否属于需要提醒的范围，这就导致出现误报；该方法也没有提供事后回溯，处理效率低，会降低客户的满意度。


技术实现要素：

4.1.要解决的技术问题
5.针对现有技术中存在的误报、没有事后回溯、处理效率低、客户满意度低的问题，本发明提供了一种物品遗留提醒的方法、装置和存储介质，它可以实现：事前自动感知，智能分发和通知相关人员，大大减少人工量，提高网点工作效率；事中智能分析，识别异常行为目标，人工二次审核，助于事件准确性以及模型优化；事后回溯统计，统计每日事件的发生和处理情况，汇总成报表，为网点投诉事件、员工考核提供数据依据。通过智能视频分析系统的智能处理能力，可以减少客户个人物品丢失事件的发生，提高银行品牌影响力，可以高客户满意度，提高网点服务质量和客户粘性。
6.2.技术方案
7.本发明的目的通过以下技术方案实现。
8.一种物品遗留提醒的方法，包括以下步骤：
9.视频采集：通过网络摄像头录入室内的监控视频图像，作为图像识别的输入源；
10.设置参数：设置遗留检测周期、告警周期和连续命中次数；
11.图像识别：获取视频采集步骤录入的室内的监控视频图像，并在图像中绘制指定区域为物品遗留图像识别区，对图像识别区进行周期性检测，检测的周期是设置的遗留检
测周期，如果检测到物品遗留，则发送命中消息，如果在一个告警周期内，发送命中消息的次数达到连续命中次数，则发送告警消息。
12.更进一步的，周期性检测的具体实现包括：
13.步骤a：当人员进入识别区域时，通过人脸识别获取人员信息，获取识别区域的第一图像；
14.步骤b：在识别到人员离开识别区域时，获取识别区域的第二图像；
15.步骤c：对第一图像和第二图像进行比对，如果有物品多出，则发送命中消息，并识别遗留物品类型；
16.步骤d：间隔遗留检测周期的时间，重新获取识别区域的第二图像，重复步骤c。
17.更进一步的，在图像识别步骤后，还包括：
18.在图像识别步骤后，还包括：
19.后台服务器处理：后台服务器收到告警消息后，首先判断人员是否为保洁人员，然后判断遗留物品类型是否是在需要提醒范围内，如果人员不是保洁人员，且遗留物品类型属于需要提醒范围内，则发送提醒消息至移动设备。
20.更进一步的，后台服务器判断人员是否为保洁人员的方法为：后台服务器中保存有工作人员库，库中包括保洁人员的人脸照，后台服务器将人员信息与工作人员库中的保洁人员的人脸照进行对比，判断是否为保洁人员。
21.更进一步的，后台服务器判断遗留物品类型是否是在需要提醒范围内的方法为：设定重点物品，通过建模机器识别学习识别遗留物品是否属于重点物品，如果遗留物品属于重点物品，则认为物品类型在需要提醒范围内。
22.更进一步的，在后台服务器处理步骤后，还包括：
23.后台服务器接收移动设备发送的“无效”信号，将提醒消息的状态设置为“无效”；
24.后台服务器接收移动设备发送的“有效”信号，将提醒消息的状态设置为“待处理”，并将提醒消息和其“待处理”状态发送至终端显示设备；
25.后台服务器接收移动设备发送的“已处理”信号，将提醒消息的状态设置为“已处理”，并将提醒消息和其“已处理”状态发送至终端显示设备；
26.更进一步的，每次提醒消息都存储于后台服务器，通过后台服务器可随时查看物品遗留的事件发生以及处理的记录；每日终时，后台服务器进行当日数据汇总，并通过录像机获取当日发生异常事件时和事件解决时的监控视频片段，并形成流水和汇总报表提供给运管部门查询。
27.更进一步的，后台服务器还将发生异常事件时和事件解决时的部分视频片段输入模型进行持续训练和优化。
28.一种物品遗留提醒的装置，其特征在于，用于实现上述的物品遗留提醒的方法，包括：
29.视频采集模块，用于采集监控视频图像，作为图像识别模块的输入源；
30.设置参数模块，用于设置遗留检测周期、告警周期和连续命中次数；
31.图像识别模块，用于获取视频采集步骤录入的室内的监控视频图像，并在图像中绘制指定区域为物品遗留图像识别区，对图像识别区进行周期性检测，如果检测到物品遗留，则发送命中消息，如果在一个告警周期内，发送命中消息的次数达到连续命中次数，则
发送告警消息；
32.后台服务器，用于接收告警消息，判断人员是否为保洁人员，判断遗留物品类型是否是在需要提醒范围内，发送提醒消息。
33.一种计算机可读存储介质，用于存储程序，其特征在于，所述程序被执行时实现上述物品遗留提醒的方法。
34.3.有益效果
35.相比于现有技术，本发明的优点在于：通过视频行为分析系统自动去识别网点发生的异常行为事件，提高网点工作效率；通过自动识别结合工作人员二次审核，提高事件的解决成功率，防止因个人能力水平的高低影响处理或服务质量；视频行为分析系统自动识别事件或服务的开始时间、结束时间、事件状态、处理或服务人等信息，自动登记系统；系统提供的后台流水和报表查询系统，可以方便分行运管部门监管，也可以为网点投诉事件、员工考核提供数据依据。
附图说明
36.图1为本发明的方法流程图。
具体实施方式
37.下面结合说明书附图和具体的实施例，对本发明作详细描述。
38.实施例
39.本发明实施例提供了一种物品遗留提醒的方法，方法的流程如图1所示，具体实现方式如下：
40.视频采集：通过网络摄像头录入室内的监控视频图像，作为图像识别的输入源；本实施例采用支持rtsp标准协议且支持h.264编码格式的摄像头，其最大分辨率为1080p。
41.设置参数：设置遗留检测周期、告警周期和连续命中次数；遗留检测周期是指图像识别单元在识别到有物品遗留事件发生后到下一次继续识别该事件是否仍然存在的间隔时间，可根据实际的识别需求调整设置，从而达到最好的识别效果。告警周期是指图像识别单元发出物品遗留消息的时间到下一次物品遗留仍存在并继续发送该提醒消息的时间之间的时间差。连续命中次数是指识别到有物品遗留时即命中片段，当命中此片段次数达到指定命中次数时，便认定为有物品遗留。参数可以控制检测方法的查全率和查准率，在实际进行检测时，物品遗留事件的发出需要同时满足这三项参数：设置遗留检测周期到了、告警周期到了且连续命中次数够了，依据实际情况对参数进行调整，从而获得最好的检测结果。
42.图像识别：获取视频采集步骤录入的室内的监控视频图像，并在图像中绘制指定区域为物品遗留图像识别区，然后进行以下步骤：
43.步骤a：当人员进入识别区域时，通过人脸识别获取人员信息，获取识别区域的第一图像；
44.步骤b：在识别到人员离开识别区域时，获取识别区域的第二图像；
45.步骤c：对第一图像和第二图像进行比对，如果有物品多出，则发送命中消息，并识别遗留物品类型；
46.步骤d：间隔遗留检测周期的时间，重新获取识别区域的第二图像，重复步骤c。
47.如果在一个设定的告警周期内，发送命中消息的次数达到连续命中次数，则发送告警消息给后台服务器，告警消息包括：人员信息，遗留物品类型，遗留物品图像。
48.后台服务器收到告警消息后，首先判断人员是否为保洁人员，然后判断遗留物品类型是否是在需要提醒范围内。如果人员不是保洁人员，且遗留物品类型属于需要提醒范围内，则发送提醒消息至移动设备。因为保洁人员在中清扫过程时可能会暂时遗留洁具等物品，或者会挪动摆放的物品至识别区内，此时如果不对此场景进行过滤，则会造成不必要的误报提醒消息发出。
49.判断人员是否为保洁人员的方法为：后台服务器中保存有工作人员库，库中包括保洁人员的人脸照，后台服务器将人员信息与工作人员库中的保洁人员的人脸照进行对比，判断是否为保洁人员。
50.判断遗留物品类型是否是在需要提醒范围内的方法为：设定重点物品如：手机、钱包等，通过建模机器识别学习识别遗留物品是否为重点物品。不属于重点物品，就不需要提醒。其中建模机器识别学习为现有技术，通过机器学习可以建立重点物品的模型，通过该模型便可以识别出遗留物品是否为重点物品。建立重点物品的模型的具体实现方法是：
51.(1)新增一种重点物品(例如手机)，同时上传若干张该重点物品的样本图片，样本图片必须清晰、图中物品特征指向明确；
52.(2)上传大量学习图片供机器学习，学习图片存入临时库中；
53.(3)对学习图片进行有效性识别：对所有学习图片进行分析，与样本图片进行比对，如果与样本图片相差特征相差较大，则摘出供人工确认，对无效的图片进行删除，对有效的图片进行放行，直到图片比对完成，完成之后图片存入待学习库中，存入待学习库中后，对应的在临时库中的图片被删除；通过人工确认能够提高识别的准确率；
54.(4)机器学习：对有效学习图片进行机器学习，本实施例采用的机器学习为现有技术，通过机器学习可以建立遗留物品模型，学习完成的图片会移至完成建模库中，对应的待学习库中的图片被删除。
55.后台服务器发送提醒消息到移动设备上，移动设备一般由大堂经理持有，大堂经理在收到提醒消息时，会根据消息内容以及现场实际场景来判断是否为有效的提醒消息。如果是无效消息，移动设备就会发送“无效”信号给后台服务器，此时后台将提醒消息的状态设置为“无效”。
56.如果是有效的消息，移动设备就会发送“有效”信号给后台服务器，，将提醒消息的状态设置为“待处理”，并将提醒消息和其“待处理”状态发送至终端显示设备，终端显示设备安装在管理部门，用于给管理人员查看。终端显示设备显示文字内容：“洽谈室有物品遗留，待处理！”。
57.持有移动设备的大堂经理在将遗留物品物归原主之后，移动设备发送“已处理”信号给后台服务器，后台服务器将提醒消息的状态设置为“已处理”，并将提醒消息和其“已处理”状态发送至终端显示设备，终端显示设备显示文字内容：“已处理”，从而给管理人员审核。
58.每次提醒消息都存储于后台服务器，通过后台服务器可随时查看物品遗留的事件发生以及处理的记录。每日终时，后台服务器会进行当日数据汇总，并通过录像机获取当日发生异常事件时和事件解决时的部分视频片段，并形成流水和汇总报表以便运管部门查
询。
59.将事件发生时和处理时的视频片段输入模型进行持续训练和优化。
60.以上示意性地对本发明创造及其实施方式进行了描述，该描述没有限制性，在不背离本发明的精神或者基本特征的情况下，能够以其他的具体形式实现本发明。附图中所示的也只是本发明创造的实施方式之一，实际的结构并不局限于此，权利要求中的任何附图标记不应限制所涉及的权利要求。所以，如果本领域的普通技术人员受其启示，在不脱离本创造宗旨的情况下，不经创造性的设计出与该技术方案相似的结构方式及实施例，均应属于本专利的保护范围。此外，“包括”一词不排除其他元件或步骤，在元件前的“一个”一词不排除包括“多个”该元件。产品权利要求中陈述的多个元件也可以由一个元件通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。