一种基于场景感知的智能电梯广告屏系统及广告投放方法与流程

1.本发明涉及电梯广告屏系统技术领域，更具体地，涉及一种基于场景感知的智能电梯广告屏系统及广告投放方法。


背景技术：

2.广告，就是广而告之，即向社会广大公众告知某件事物。近年来，拥有稳定流量且多元场景的梯媒正快速崛起，成为线下广告的黄金媒介。这是因为在电梯这个特殊的封闭空间内，信息干扰少，广告的触达率和记忆率较高，相比于在其他场景中用户更容易受到广告的影响。
3.但是，传统的电梯广告屏仅支持对广告库内广告机械盲目地轮播放映，无法针对乘客的身份和兴趣进行定向广告投送，广告推送精准低。因此如何使电梯广告能够基于不同人群实现智能定向推送是近些年热门的应用研究方向。
4.例如，公布号cn110766451a的中国专利，公开了一种基于人体静态标签的电梯广告投放方法及投放系统。该发明通过采集电梯内乘客人脸数据并查询数据服务器中的乘客信息，根据查询到的乘客年龄、性别等信息，控制电梯屏播放的广告类别，以实现了电梯这种人流频繁且空间狭小场景下广告的精准投放。不过，该种方案的不足在于：
5.需要事先录入乘客的人脸以及性别年龄等标签数据到数据服务器中，仅适用于进出人口固定的社区电梯等场景，并且对于不在数据库内的陌生乘客无法自动地为其生成个人数据库。
6.又如，公布号cn112423034a的中国专利，公开了一种电梯广告屏智能播放控制系统及方法。包括信息确定模块、播放控制模块、验证模块和主控模块，该发明通过播放控制模块，根据电梯总共所需等待时间来调节广告屏内广告播放时间，从而使得用户能够在仅限时间内对广告所播放的内容加深记忆。该方案的不足在于：
7.该方案侧重于对广告播放时间与播放方式的智能化，而非侧重于基于电梯内乘客的兴趣值数据定向推送广告，并且同样地，该系统只能对数据库中已有的人脸信息进行识别，无法为陌生乘客生成数据库，因此只适用于在人群较为固定的场所进行智能广告推送。


技术实现要素：

8.针对以上问题，本发明提出一种基于场景感知的智能电梯广告屏系统及广告投放方法，能够自动地为所有进出电梯的乘客建立兴趣值数据库，从而实现对电梯内乘客进行实时、定向的广告推送，解决了传统电梯广告的只能轮播推送广告的问题，也解决了如今前沿的智能电梯广告屏只能用于人群相对固定的场所进行智能广告推送的问题。本发明提高了电梯广告投放的灵活性及智能性，有着更为广阔的使用场景。
9.本发明的目的可以通过以下技术方案实现：
10.一种基于场景感知的智能电梯广告屏，包括广告屏、摄像头a、摄像头b和后端服务器；
11.广告屏与后端服务器连接，作为后端服务器的外接显示屏，用于播放广告；
12.摄像头a与后端服务器连接，置于电梯正前方内壁上，用于拍摄电梯内正前方画面，并将拍摄的画面信息传递给后端服务器；
13.摄像头b与后端服务器连接，置于广告屏上，用于拍摄广告屏前的乘客画面，并将拍摄的画面信息传递给后端服务器；
14.后端服务器内置场景感知模块、信息处理模块和广告屏控制模块；
15.一种电梯广告投放方法，其特征在于：所述广告投放方法包括如下步骤：
16.s1：利用场景感知模块中的人脸识别模块，对进入电梯的乘客进行人脸识别；
17.s2：利用场景感知模块中的行为信息识别模块，对乘客的注视广告时间和表情反馈进行识别，并将乘客注视广告时间信息和表情反馈信息传递给信息处理模块；
18.s3：信息处理模块依据兴趣值更新机制建立并更新乘客
‑
广告兴趣值库，并提取当前在电梯内的乘客对于广告库内广告的兴趣值数据；
19.s4：分别统计当前电梯内不同乘客对广告库内每个广告的兴趣值加和；
20.s5：比较广告库内不同广告的兴趣值加和，确定累计兴趣值最大的广告；
21.s6：若累计兴趣值最大的广告的兴趣值加和为正数，则播放该广告；若累计兴趣值最大的广告的兴趣值加和为非正数，则不播放任何广告；
22.s7：利用广告屏开闭模块控制广告屏的智能开闭，当电梯内有乘客时重复执行s1。
23.步骤s1中所述人脸识别模块包括人脸采集训练机制，分为事先训练方式和实时训练方式；
24.所述事先训练方式为，事先录入人脸数据并进行训练，且为已录入人脸信息的乘客事先在乘客
‑
广告兴趣值数据库中建立人脸标签；
25.所述实时训练方式为，在摄像头a实时拍摄到的乘客人脸数据传输到人脸识别模块之后，当判断为陌生乘客时，实时训练当前陌生乘客的人脸数据，并建立该乘客在乘客
‑
广告兴趣值数据库中的人脸标签。
26.步骤s2中所述行为信息识别模块包括表情识别和注视时间识别；
27.所述表情识别是对摄像头b传来的广告屏前乘客的人脸画面信息进行表情识别，并将乘客对当前播放广告的表情反馈信息传递给信息处理模块；表情识别结果包括正向反馈和负向反馈两种；
28.所述注视时间识别是对摄像头b传来的广告屏前乘客看向广告屏的时间进行记录，并将乘客注视广告的时长信息传递给信息处理模块。
29.步骤s3中，所述乘客
‑
广告兴趣值数据库为passenger_list＝(passenger_data1,passenger_data2,
……
passenger_data
i
)，其中passenger_data
i
表示人脸标签为i的乘客的信息列表，即乘客
‑
广告兴趣值数据库为乘客信息列表的集合；
30.乘客信息列表为passenger_data
i
＝{“face_id”:i,“ad
1”:ad_data1,“ad
2”:ad_data2,
…
,“ad
j”:ad_data
j
,“in_num”:0,“unin_num”:0},其中列表项face_id表示乘客的人脸标签，ad
j
表示广告库内第j个广告，ad_data
j
表示乘客对广告j的兴趣值数据，in_num和unin_num分别用于记录乘客对当前播放广告的注视时间及非注视时间。
31.步骤s3中所述的兴趣值更新机制为：
32.信息处理模块接收到摄像头b传来的广告屏前乘客的表情反馈信息和广告注视时
长信息后，若乘客观看广告的表情为正向或注视广告时间达5秒以上，则增加该乘客对于当前播放广告的兴趣值；相反，若乘客观看广告的表情反馈为负面反馈或注视广告时间低于5秒，则减少该乘客对于当前播放广告的兴趣值；
33.依据所述兴趣值更新机制，并通过不断的训练对电梯乘客的兴趣值数据进行实时更新，能够建立精准完善的动态乘客
‑
广告兴趣值库。
34.步骤s6中引入累计兴趣值的正负作为广告播放与否的依据，当兴趣值最高的广告兴趣值也为负值时认为当前电梯内乘客不想被广告打扰，此时广告会自动停止播放，实现了将电梯广告播放与否的部分选择权交予乘客。
35.步骤s7中所述广告屏开闭模块根据电梯内有无乘客进行广告屏的智能开闭；若摄像头a记录到电梯内有乘客时，则开启广告屏；反之，当所述摄像头a记录到电梯里没有乘客时，则关闭广告屏。
36.本发明具有以下优点：
37.1)本发明根据乘客的人脸数据、对广告的注视时间以及观看广告的表情反馈等场景信息实现智能广告推送，提升电梯广告投放的精准度，间接提升广告的收益；
38.2)采用事先训练与实时训练相结合的人脸识别方式，使得乘客
‑
广告兴趣值数据库的建立不仅对于已录入信息的乘客有效，对于初次进入电梯的陌生乘客同样有效，因此该电梯屏有更广阔的适用场所；
39.3)根据电梯内是否有乘客实现广告屏智能开闭，节能环保；
40.4)将电梯广告播放与否的部分选择权交予乘客，提高电梯的智能化程度，提升电梯乘客的体验感。
附图说明
41.图1为本发明一种基于场景感知的智能电梯广告屏系统结构示意图；
42.图2为本发明人脸识别模块的工作流程图；
43.图3为本发明实时广告推送模块和行为信息处理模块的工作流程图。
具体实施方式
44.下面结合附图对本发明作进一步说明。
45.如图1所示的一种基于场景感知的智能电梯广告屏系统，包括广告屏、摄像头a、摄像头b及后端服务器；
46.广告屏与后端服务器相连，后端服务器与摄像头a和摄像头b相连；摄像头a可为电梯内已安装的监控摄像头或可在电梯内安装新摄像头，位于电梯正前方内壁，用于辨别乘客的身份信息，即对电梯内是否有乘客、对电梯乘客是否在乘客
‑
广告兴趣值数据库内进行实时识别与记录；摄像头b置于广告屏上，用于对乘客的广告注视时间以及表情反馈进行实时识别与记录；后端服务器安置于广告屏后方，与广告屏、摄像头a和摄像头b进行数据交互；摄像头a、摄像头b以及后端服务器可选取现有的常用设备，具体需考虑电梯的大小、所在地来选取，在不脱离本发明技术方案的基础上，任意的变形均应包含在本发明的范围内；
47.该基于场景感知的智能电梯广告屏系统工作时，后端服务器用于控制广告屏的开闭与播放内容，以及对摄像头a和摄像头b所拍摄到的画面信息进行处理；后端服务器内置
场景感知模块、信息处理模块和广告屏控制模块；
48.场景感知模块包括人脸识别模块和行为信息识别模块，用于接收摄像头a和摄像头b在电梯内拍摄的画面信息，对电梯内乘客的人脸数据及行为信息等场景信息进行感知，并把感知到的场景信息传递给信息处理模块；
49.信息处理模块包括乘客
‑
广告兴趣值数据库和兴趣值更新机制，用于接收场景感知模块传来的乘客人脸数据和行为信息等场景信息，为乘客创建乘客
‑
广告兴趣值数据库，并依据兴趣值更新机制基于场景信息对数据库内的乘客兴趣值数据进行实时更新；
50.广告屏控制模块包括实时广告推送模块和广告屏开闭模块，用于接收信息处理模块传来的电梯乘客的兴趣值数据，并基于兴趣值数据控制广告屏进行实时广告推送以及智能开闭；
51.人脸识别模块包括人脸采集训练机制，分为事先训练方式和实时训练方式，事先训练方式为：事先录入人脸数据并进行训练，且为已录入人脸信息的乘客事先在乘客
‑
广告兴趣值数据库中建立人脸标签；实时训练方式为：在摄像头a实时拍摄到的乘客人脸数据传输到人脸识别模块之后，当判断为陌生乘客时，实时训练当前陌生乘客的人脸数据，并建立该乘客在乘客
‑
广告兴趣值数据库中的人脸标签；
52.实施例1
53.如图2所示为本发明人脸识别模块的工作流程；摄像头a将拍摄的画面信息传递给后端服务器人脸识别模块；当判断出当前画面内的人脸数据不是乘客
‑
广告兴趣值数据库内已有的乘客人脸数据时，对未知乘客进行实时人脸训练并创建新的乘客信息标签；如果判断出乘客是已知乘客时，则通过查找乘客
‑
广告兴趣值数据库以获得当前乘客对广告库内所有广告的兴趣值，并将兴趣值数据传递给信息处理模块；该模块完成的工作可用算法1来描述，具体如下：
[0054][0055]
实施例2
[0056]
如图3所示为本发明实时广告推送模块和行为信息处理模块工作流程；
[0057]
行为信息识别模块包括表情识别和注视时间识别；表情识别是对摄像头b传来的广告屏前乘客的人脸画面信息进行表情识别，并将乘客对当前播放广告的表情反馈信息传递给信息处理模块，表情识别结果包括正向反馈和负向反馈两种；注视时间识别是对摄像头b传来的广告屏前乘客看向广告屏的时间进行记录，并将乘客注视广告的时长信息传递给信息处理模块，注视时间的识别方法为：若摄像头b捕捉到屏幕前的乘客正脸信息，则表明该乘客正在注视广告屏，循环捕捉画面帧，若注视时间延续，则捕捉到的改名乘客正脸朝向摄像头b的画面帧数也会增加。信息处理模块接收摄像头b传来的广告屏前乘客的表情反馈和注视广告时长信息，并依据兴趣值更新机制基于场景信息对乘客兴趣值数据进行实时更新；
[0058]
所述兴趣值更新机制原理为：摄像头b记录下乘客观看广告的正向表情反馈或5秒以上的注视时间，增加该乘客对于当前播放广告的兴趣值；相反，所述摄像头b记录下乘客观看广告的负向表情反馈或5秒以下的注视时间，减少该乘客对于当前播放广告的兴趣值；
[0059]
综上，所述兴趣值更新机制可用算法2来描述，具体如下：
[0060][0061]
实时广告推送模块接收信息处理模块传来的电梯乘客的兴趣值数据，并基于兴趣值数据进行实时广告推送；当乘客对广告的最高累计兴趣值为正值时，实时广告推送模块在广告屏上播放累计兴趣值最高的广告，并基于实时动态的兴趣值数据切换广告；当乘客对广告的最高累计兴趣值为非正值时，实时广告推送模块不播放任何广告；实时广告推送模块工作流程可用算法3来描述，具体如下：
[0062][0063]
以上已经描述了本发明的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例；在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。