一种基于场景感知的智能电梯广告屏系统及广告投放方法与流程

技术特征：
1.一种基于场景感知的智能电梯广告屏系统，其特征在于：包括广告屏、摄像头a、摄像头b和后端服务器：所述广告屏，与后端服务器连接作为后端服务器的外置显示屏，用于播放广告，置于电梯内的侧壁上；所述摄像头a，与后端服务器连接，置于电梯正前方内壁上，用于拍摄电梯内正前方画面，并将拍摄的画面信息传递给后端服务器；所述摄像头b，与后端服务器连接，置于广告屏上，用于拍摄广告屏前的乘客画面，并将拍摄的画面信息传递给后端服务器；所述后端服务器，内置场景感知模块、信息处理模块和广告屏控制模块；所述场景感知模块包括人脸识别模块和行为信息识别模块，用于接收摄像头a和摄像头b在电梯内拍摄的画面信息，对电梯内乘客的人脸数据及行为信息等场景信息进行感知，并把感知到的场景信息传递给信息处理模块；所述信息处理模块包括乘客
‑
广告兴趣值数据库和兴趣值更新机制，用于接收场景感知模块传来的乘客人脸数据和行为信息等场景信息，为乘客创建乘客
‑
广告兴趣值数据库，并依据兴趣值更新机制基于场景信息对数据库内的乘客兴趣值数据进行实时更新；所述广告屏控制模块包括实时广告推送模块和广告屏开闭模块，用于接收信息处理模块传来的电梯乘客的兴趣值数据，并基于兴趣值数据控制广告屏进行实时广告推送以及智能开闭。2.一种电梯广告投放方法，其特征在于：所述广告投放方法包括如下步骤：s1：利用场景感知模块中的人脸识别模块，对进入电梯的乘客进行人脸识别；s2：利用场景感知模块中的行为信息识别模块，对乘客的注视广告时间和表情反馈进行识别，并将乘客注视广告时间信息和表情反馈信息传递给信息处理模块；s3：信息处理模块依据兴趣值更新机制建立并更新乘客
‑
广告兴趣值库，并提取当前在电梯内的乘客对于广告库内广告的兴趣值数据；s4：分别统计当前电梯内不同乘客对广告库内每个广告的兴趣值加和；s5：比较广告库内不同广告的兴趣值加和，确定累计兴趣值最大的广告；s6：若累计兴趣值最大的广告的兴趣值加和为正数，则播放该广告；若累计兴趣值最大的广告的兴趣值加和为非正数，则不播放任何广告；s7：利用广告屏开闭模块控制广告屏的智能开闭，当电梯内有乘客时重复执行s1。3.根据权利要求2所述的一种电梯广告投放方法，其特征在于，步骤s1中所述人脸识别模块包括人脸采集训练机制，分为事先训练方式和实时训练方式；所述事先训练方式为，事先录入人脸数据并进行训练，且为已录入人脸信息的乘客事先在乘客
‑
广告兴趣值数据库中建立人脸标签；所述实时训练方式为，在摄像头a实时拍摄到的乘客人脸数据传输到人脸识别模块之后，当判断为陌生乘客时，实时训练当前陌生乘客的人脸数据，并建立该乘客在乘客
‑
广告兴趣值数据库中的人脸标签。4.根据权利要求2所述的一种电梯广告投放方法，其特征在于，步骤s2中所述行为信息识别模块包括表情识别和注视时间识别；所述表情识别是对摄像头b传来的广告屏前乘客的人脸画面信息进行表情识别，并将
乘客对当前播放广告的表情反馈信息传递给信息处理模块；表情识别结果包括正向反馈和负向反馈两种；所述注视时间识别是对摄像头b传来的广告屏前乘客看向广告屏的时间进行记录，并将乘客注视广告的时长信息传递给信息处理模块。5.根据权利要求2所述的一种电梯广告投放方法，其特征在于，步骤s3中，所述乘客
‑
广告兴趣值数据库为passenger_list＝(passenger_data1,passenger_data2,
……
passenger_data
i
)，其中passenger_data
i
表示人脸标签为i的乘客的信息列表，即乘客
‑
广告兴趣值数据库为乘客信息列表的集合；乘客信息列表为passenger_data
i
＝{“face_id”:i,“ad
1”:ad_data1,“ad
2”:ad_data2,
…
,“ad
j”:ad_data
j
,“in_num”:0,“unin_num”:0},其中列表项face_id表示乘客的人脸标签，ad
j
表示广告库内第j个广告，ad_data
j
表示乘客对广告j的兴趣值数据，in_num和unin_num分别用于记录乘客对当前播放广告的注视时间及非注视时间。6.根据权利要求2所述的一种电梯广告投放方法，其特征在于，步骤s3中所述的兴趣值更新机制为：信息处理模块接收到摄像头b传来的广告屏前乘客的表情反馈信息和广告注视时长信息后，若乘客观看广告的表情为正向或注视广告时间达5秒以上，则在所述乘客
‑
广告兴趣值数据库中增加该乘客对于当前播放广告的兴趣值；相反，若乘客观看广告的表情反馈为负面反馈或注视广告时间低于5秒，则减少该乘客对于当前播放广告的兴趣值；依据所述兴趣值更新机制，并通过不断的训练对电梯乘客的兴趣值数据进行实时更新，能够建立精准完善的动态乘客
‑
广告兴趣值库。7.根据权利要求2所述的一种电梯广告投放方法，其特征在于，步骤s7中所述广告屏开闭模块根据电梯内有无乘客进行广告屏的智能开闭；若摄像头a记录到电梯内有乘客时，则开启广告屏；反之，当所述摄像头a记录到电梯里没有乘客时，则关闭广告屏。

技术总结
本发明公开了一种基于场景感知的智能电梯广告屏系统及广告投放方法，该智能电梯广告屏系统包括广告屏、摄像头A、摄像头B和后端服务器；所述后端服务器包括场景感知模块、信息处理模块以及广告屏控制模块；所述场景感知模块接收摄像头A和摄像头B拍摄的画面信息，对人脸数据及行为信息等场景信息进行感知；所述信息处理模块接收场景信息，基于兴趣值更新机制更新乘客


技术研发人员：吴瀚 王奕润 洪孟典 权伟
受保护的技术使用者：北京交通大学
技术研发日：2021.08.12
技术公布日：2021/11/8