基于GIS地图点位交互的分布式行为识别监控弹窗视频查看系统与方法与流程
本发明属于智能视频监控与 ai 行为识别,尤其涉及一种多推理节点分布式部署下,地图交互联动视频弹窗、事件信息一体化展示的基于gis地图点位交互的分布式行为识别监控弹窗视频查看系统与方法。
背景技术:
1、随着 ai 行为识别在安防、工业厂区场景大规模落地,系统普遍采用分布式架构:多台 visions 推理服务器分布式部署完成视频 ai 分析,msgserver 告警中心作为信令中枢,实现摄像头注册、告警消息转发;视频流、告警图片媒体数据不经过 msgserver,由客户端直连各推理服务器获取,以此规避主服务器带宽瓶颈。
2、现有技术存在如下缺陷:
3、第一、摄像头地理位置、实时视频、ai 识别事件信息相互割裂。值班人员在 gis地图看到告警闪烁点位后,需要切换至设备树形列表检索对应摄像头设备,再打开视频窗口,还需要跳转至单独事件页面查询告警时间、地点、统计日报等信息,操作链路多,应急处置响应慢。
4、第二、系统配置繁琐:地图点位坐标、摄像头参数、推理服务地址多套数据分开配置,重复录入,容易出现数据不一致,集中配置管理能力差。
5、第三、视频播放与事件信息分离:打开视频窗口只能看到原始视频画面,无法同步展示该点位对应的地点位置、告警事件、时间戳、日报统计、警示提示;需要多页面切换查阅信息,值班人员无法在同一界面完成研判。
6、第四、在分布式多推理服务器架构下,传统地图弹窗方案容易错误将视频媒体数据流经过msgserver 信令中心转发,造成主服务器带宽压力,系统无法横向扩展。
7、第五、多弹窗缺少生命周期管控,重复点击地图点位会重复生成多个视频窗口,资源泄露、界面混乱。
8、因此,亟需一种能够复用分布式推理集群注册配置,地图点位一键弹窗,弹窗内同时展示经 ai 推理后的视频流+地点、时间、警示、日报统计一体化信息的系统方案。
技术实现思路
1、本发明旨在克服现有技术的缺陷,提供一种基于 gis 地图点位交互的分布式行为识别监控弹窗视频查看系统及方法;实现摄像头配置集中统一管理,地图点位点击直接弹出弹窗,弹窗内同时播放该点位经 visions 推理处理后的视频画面,同步展示地点位置、事件时间、警示信息、日报统计数据;同时严格遵循信令-媒体分离架构,视频媒体流不经过 msgserver,避免主服务器带宽瓶颈,简化工程配置,缩短告警事件研判操作路径。
2、为实现上述目的,实施本发明的一种基于多个摄像头的图像显示系统包括:
3、若干 visions 推理服务器、msgserver 告警中心服务、数据库 db、pc 客户端;所述 visions 推理服务器包括:摄像头元数据上报模块,用于采集摄像头唯一 id、摄像头gis 地图坐标、本机对外服务访问地址、视频流接口地址,服务启动时将元数据上报msgserver; ai 行为推理处理模块,用于对摄像头视频进行 ai 行为识别推理,输出经过推理处理后的视频流,并在检测告警时保存告警截图至本地磁盘;事件上报模块,用于将包含摄像头 id、事件发生时间、地点位置、告警类型、警示等级的告警事件元数据上报msgserver;媒体流响应服务模块,用于直接接收 pc 客户端的拉流请求,返回经推理处理后的视频流以及告警截图,视频数据不经过 msgserver;
4、所述 msgserver 告警中心服务与数据库 db:设备注册与集中配置管理模块,接收 visions 上报的摄像头元数据存入 db,实现全系统摄像头集中配置管理,对外提供元数据查询接口;事件消息转发模块,接收并持久化存储告警事件元数据,和 pc 客户端维持长连接,实时推送告警事件;统计与日报数据服务模块,基于 db 存储的历史事件,按摄像头维度生成告警统计、日报数据,响应 pc 客户端统计查询;msgserver 仅传输元数据信令,不转发视频二进制媒体数据;
5、所述 pc 客户端包括: gis 地图渲染模块,用于从 msgserver 获取全部摄像头元数据并本地缓存,依据 gis 地图坐标渲染地图摄像头点位,告警发生时对应点位闪烁高亮,监听地图点位鼠标点击事件,输出被点击摄像头 id;弹窗生命周期管理模块,接收被点击摄像头 id,查询本地缓存获取归属 visions 地址;判断是否已存在弹窗,存在则置顶,不存在则在地图上层创建悬浮一体化弹窗;管控弹窗拖拽、缩放、关闭,弹窗关闭时释放媒体资源;媒体流解码渲染模块,根据摄像头归属 visions 地址,直接向 visions 发起拉流请求获取经推理后的视频流,视频流绕过 msgserver,解码后在弹窗视频子区域播放;事件与统计信息一体化展示模块,根据摄像头 id 向 msgserver 请求业务数据,在弹窗信息子区域同步展示:地点位置、事件时间、警示信息、日报统计、历史事件清单。
6、依据上述主要特征,所述事件与统计信息一体化展示模块,还用于根据告警事件携带的图片地址,向 visions 请求告警截图,在弹窗内同步展示告警截图。
7、依据上述主要特征,visions 推理服务器包含部署于主服务器的本地推理节点,以及多台独立网络部署的远端推理节点,全部推理节点均向同一个 msgserver 完成注册上报。
8、为实现上述目的,本发明提供一种利用上述的基于 gis 地图点位交互的分布式行为识别监控弹窗视频查看系统进行监控弹窗视频查看方法,所述方法包括如下步骤:
9、 s1、系统注册与集中配置存储:各个visions 推理服务器启动,采集摄像头 id、gis 地图坐标、本机服务地址元数据上报 msgserver;msgserver 将摄像头元数据存入 db实现集中配置;visions 执行 ai 行为识别,告警事件元数据上报 msgserver;
10、s2、客户端初始化地图渲染:pc 客户端向 msgserver 获取全部摄像头元数据本地缓存;gis地图渲染模块依据gis坐标渲染地图摄像头点位;接收 msgserver 推送告警事件,驱动对应地图点位闪烁高亮;
11、s3、地图点位交互触发弹窗:捕获地图摄像头点位点击事件,获取摄像头 id;判断该摄像头是否已有弹窗,有则置顶,无则新建悬浮弹窗;
12、s4、直连推理服务器获取推理后视频:根据摄像头id查询缓存得到归属 visions地址,pc 客户端直接访问 visions 获取经过ai推理处理后的视频流,视频数据不经过msgserver,解码后弹窗播放;
13、s5、弹窗一体化信息展示:pc客户端向 msgserver 查询该摄像头业务元数据,弹窗内部同步展示地点位置、事件时间、警示信息、日报统计、历史事件;
14、s6、弹窗资源回收:弹窗关闭时断开与 visions 媒体连接,释放解码网络资源。
15、依据上述主要特征,步骤s5还包括:根据告警图片地址向 visions拉取告警截图并在弹窗内一并展示。
16、与现有技术相比较,本发明具有如下技术效果:
17、第一、实现集中配置管理,降低工程实施工作量,摄像头设备参数、地图坐标统一由 visions 上报至 msgserver 集中存储管理;客户端直接复用注册配置渲染地图,不需要单独维护地图点位配置,避免多套配置不一致,减少重复录入。
18、第二、操作链路短,提升告警应急研判效率地图看到告警闪烁点位,单次点击直接弹出弹窗;弹窗内同时播放该点位经 ai 推理后的视频画面,同时查看地点位置、时间、警示、日报统计、历史事件;不需要切换多个页面,值班人员在同一个弹窗内完成现场视频查看与事件研判,缩短应急处置时间。
19、第三、适配分布式架构,消除主服务器带宽瓶颈,视频媒体流、告警截图由 pc 客户端直连 visions 推理服务器获取,媒体数据不经过 msgserver 信令中心;msgserver仅负责配置、事件、统计日报等小体积元数据下发;即使同时打开多路弹窗播放视频,不会造成主服务器网络压力,系统支持横向扩展增加推理节点。
20、第四、弹窗生命周期管控,系统资源可控,增加弹窗去重逻辑,重复点击同一个地图点位不会重复创建窗口;弹窗关闭自动释放视频拉流和解码资源,避免内存、网络资源泄露,界面窗口整洁有序。
21、第五、故障隔离,如果单台visions 故障,仅该点位弹窗无法播放视频;msgserver集中配置、地图渲染、其余摄像头弹窗、事件统计功能不受影响;msgserver 故障时,各个visions 依旧可以完成 ai 推理、本地保存告警,只是客户端无法获取配置与事件推送。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com