一种户外大牌广告画面监控识别系统及方法与流程

技术特征：
1.一种户外大牌广告画面监控识别系统，其特征在于，包括主控开发板(1)、gps模块(2)、继电器模块(3)、摄像头模块(4)、收发模块(5)、服务器(6)以及客户端(7)；其中，所述摄像头模块(4)通过继电器模块(3)与主控开发板(1)连接，采集户外大牌广告画面图像后，将该画面图像传送给主控开发板(1)；采集的时间通过继电器模块(3)控制；所述gps模块(2)与主控开发板(1)连接，将其所对应的户外大牌广告的位置发送给主控开发板(1)；所述主控开发板(1)与收发模块(5)连接，通过收发模块(5)将户外大牌广告画面图像和gps模块(2)定位到的位置数据发送给服务器(6)，由服务器(6)对接收到的数据进行分析处理和储存；所述服务器(6)安装在远程的中控室内；所述客户端(7)与服务器(6)连接，通过服务器(6)远程监控户外大牌广告画面。2.根据权利要求1所述的一种户外大牌广告画面监控识别系统，其特征在于，所述摄像头模块(4)采用1.6mm超广角鱼眼摄像头模组。3.根据权利要求1所述的一种户外大牌广告画面监控识别系统，其特征在于，所述客户端(7)为智能手机、平板电脑、笔记本电脑、台式电脑中的任一种。4.根据权利要求1所述的一种户外大牌广告画面监控识别系统，其特征在于，所述收发模块(5)采用4g、5g、nb
‑
iot中的任一种。5.根据权利要求1所述的一种户外大牌广告画面监控识别系统，其特征在于，所述主控开发板(1)采用rk3288处理芯片。6.一种户外大牌广告画面监控识别方法，其特征在于，包括以下步骤：s1、主控开发板进行自检，运行gps模块和收发模块，服务器接收各模块的状态码，实现各模块的线上监测；s2、客户端进行广告牌定位信息更新，用户设定各广告牌画面抓拍时间点、抓拍间隔时间、目标广告客户的广告发布时间段；s3、主控开发板获取当前世界时间，判断是否进入预设图像抓拍时间点，若未进入预定时间点，继电器模块和摄像头模块继续进入正常待机工作状态；若判断已进入预定图像抓拍时间点，由主控开发板发送指令开启继电器模块，摄像头模块通电运行，进行对应户外大牌广告画面图像数据的抓拍回传；s4、已抓拍图像回传至主控开发板，确认图像数据接收完整后，继电器模块关闭，等待下一抓拍时间点；图像数据经收发模块发送至至服务器；s5、首次上传图片存储为对应户外大牌广告的初始图像，设定时间内抓拍的图像为该户外大牌广告的抓拍图像，最后进行基于神经网络模型的户外大牌广告画面识别。7.根据权利要求6所述的一种户外大牌广告画面监控识别方法，其特征在于，所述进行基于神经网络的户外大牌广告画面识别，包括训练户外大牌广告画面识别模型以及通过训练好的户外大牌广告画面识别模型对户外大牌广告画面进行识别。8.根据权利要求7所述的一种户外大牌广告画面监控识别方法，其特征在于，训练户外大牌广告画面识别模型的具体过程如下：s01、初始图像转换为灰度，并进行像素标记，其中1表示白色，
‑
1表示黑色，并且从初始
图像中提取三个位置作为户外大牌广告范围的特征，成为3x3大小的卷积核；s02、抓拍图像灰度化，用1，
‑
1标记像素特征，取卷积核中的任一元素值，与抓拍图像任一像素值进行相乘，等到结果为当前像素标记的卷积值，可得到新的3x3大小标记值，将9个值求平均后，得到新的像素值，也称窗口；s03、得到窗口值后，窗口以步长为2向右滑动，继续计算新的特征像素值，当对抓拍图像运用卷积核计算后，得到全新的特征图；接着采用平均池化方法，对特征图的特征值依次向右滑动并取平均值；s04、多次池化后，得到2x2特征图；然后对该特征图应用全连接网络，采用softmax分类函数，输出每个对应类别的概率值，概率值越接近1，即表示该像素区域与初始图像越接近，反之，概率值越接近0，表示该像素区域与初始图像越不接近；s05、经softmax分类函数多次运算，并将所有像素区域的概率值相加取平均数，该平均数即为抓拍图像与初始图像的相似度值；s06、多次循环步骤s01
‑
s05，经卷积
‑
平均值池化
‑
全连接网络
‑
全图概率平均值，每次抓拍的图像数据作为训练集用于户外大牌广告画面识别模型的训练，直至户外大牌广告画面识别模型收敛。9.根据权利要求7所述的一种户外大牌广告画面监控识别方法，其特征在于，通过训练好的户外大牌广告画面识别模型对户外大牌广告画面进行的识别包括画面变更识别和画面破损识别；画面变更识别的过程包括：1)客户端上传目标户外广告牌的广告设计画面，并填写广告画面发布时间段；同时，目标户外广告牌所对应的摄像头模块进行广告画面图像抓拍，获取目标广告画面图像；2)将获取到的目标广告画面图像上传至服务器，通过训练好的户外大牌广告画面识别模型判断广告画面图像的概率值平均数，若平均值小于0.95，则判断该目标广告画面图像为非户外广告牌特征图片，判断结果发送至客户端，并进行警报；若判定平均值大于或等于0.95，执行余弦相似度函数，若余弦值大于或等于0.93，广告设计画面与抓拍的目标广告画面图像相符合，不存在画面更换风险；否则，则认为广告设计画面与抓拍的目标广告画面图像不符合，存在画面更换风险；3)客户端收到最终画面比对结果，根据约定的广告画面发布时间，判断当前广告画面是否在广告发布期内出现变更；画面破损识别的过程包括：在步骤2)中得到的余弦值大于或等于0.93的情况下，对广告设计画面与抓拍的目标广告画面图像均执行机器视觉卷积神经网络算法，计算各区域特征值平均数，两张图片特征数据逐一比对相减，比对值小于0.50的区域进行红线标记绘制，该标记区域即为画面破损区域。

技术总结
本发明公开了一种户外大牌广告画面监控识别系统及方法，系统包括主控开发板、GPS模块、继电器模块、摄像头模块、收发模块、服务器以及客户端；摄像头模块通过继电器模块与主控开发板连接，采集户外大牌广告画面图像后，将该画面图像传送给主控开发板；采集的时间通过继电器模块控制；GPS模块与主控开发板连接，将其所对应的户外大牌广告的位置发送给主控开发板；主控开发板与收发模块连接，通过收发模块将户外大牌广告画面图像和GPS模块定位到的位置数据发送给服务器，由服务器对接收到的数据进行分析处理和储存；服务器安装在远程的中控室内；客户端与服务器连接。本发明既能实时监控户外大牌广告画面的情况，又能降低运营成本。本。本。


技术研发人员：谢世明
受保护的技术使用者：广东博媒广告传播有限公司
技术研发日：2021.10.09
技术公布日：2021/11/28