一种基于视觉阵列基座的商品陈列货位标定方法与流程
本发明涉及商品陈列管理及机器视觉标定,具体为一种基于视觉阵列基座的商品陈列货位标定方法。
背景技术:
1、在鞋类等商品的陈列管理场景中,通常在展示架上设置多个用于承载商品的货位,并通过rfid读取装置获取商品标签信息,以确定相应货位上的商品身份。为进一步获取商品的放置状态,还可利用摄像装置采集展示架图像,并将图像中的检测区域与展示架上的实际货位建立对应关系,从而结合商品身份信息进行货位状态管理。
2、在采用摄像装置对多个相邻货位进行视觉检测时,需要确定各货位在采集图像中的对应区域。由于展示架上的货位排列较为密集,且发光器件产生的直接光、反射光或散射光可能进入相邻货位对应的图像区域,仅依据预设货位边界或者单次发光响应确定视觉检测区域时,容易受到相邻货位光学响应的影响,使检测区域中的部分像素难以准确反映对应货位自身的状态。同时,不同货位之间受到的光学影响可能存在方向性差异,固定的邻接关系难以直接表征实际图像中的光学串扰情况。
3、此外,在完成货位与图像区域的对应关系建立后,商品更换、陈列状态变化以及现场光学条件变化等因素还可能使原有视觉检测区域与实际检测状态出现偏差。若在出现异常时重新对全部货位进行标定,会增加标定过程中的图像采集及数据处理量。
4、因此,本发明提出一种基于视觉阵列基座的商品陈列货位标定方法,来解决现有技术的不足。
技术实现思路
1、针对现有技术的不足,本发明提供了一种基于视觉阵列基座的商品陈列货位标定方法,解决了现有商品陈列货位标定过程中相邻货位光学串扰影响视觉检测区域准确确定,进而导致货位空间映射可靠性不足的问题。
2、为实现以上目的,本发明通过以下技术方案予以实现:一种基于视觉阵列基座的商品陈列货位标定方法,包括:
3、采集各智能鞋托的可控发光单元均处于非发光状态时的展示架图像,得到环境基准图像,将所述环境基准图像划分为多个初始图像区域,并建立初始图像区域与展示架货位空间标识的对应关系;
4、控制逻辑id已知的目标智能鞋托按预设发光状态控制序列切换发光状态,根据各初始图像区域的亮度变化时序与所述控制序列的匹配结果确定候选图像区域;
5、控制所述目标智能鞋托进入标定发光状态,将所述目标智能鞋托的标定发光图像与所述环境基准图像在所述候选图像区域内进行差分,获得目标光学响应分布;随后控制所述目标智能鞋托恢复非发光状态,根据展示架物理拓扑关系确定候选干扰节点集合,依次控制各候选干扰节点进入标定发光状态,通过图像差分获得各候选干扰节点在所述候选图像区域内产生的光学串扰响应;
6、对目标光学响应分布与各光学串扰响应进行像素级比较,生成目标来源专属性视觉掩码,并建立候选干扰节点指向目标智能鞋托的实际光学串扰关系;
7、根据实际光学串扰关系控制后续待标定智能鞋托的标定发光时序,并关联存储目标智能鞋托的逻辑id、目标来源专属性视觉掩码和展示架货位空间标识,生成空间映射数据。
8、优选地,所述确定候选图像区域,包括:
9、在所述目标智能鞋托按照所述预设发光状态控制序列切换发光状态期间连续采集图像帧;
10、计算各初始图像区域在各图像帧中的平均亮度,并按照图像帧的时间顺序形成区域亮度变化序列;
11、根据所述预设发光状态控制序列形成与各图像帧对应的发光状态序列;
12、对各区域亮度变化序列与所述发光状态序列进行归一化相关计算,并将相关系数最大的初始图像区域确定为所述候选图像区域。
13、优选地,所述生成目标来源专属性视觉掩码,包括:
14、针对所述候选图像区域内的像素,当该像素的目标光学响应大于最小有效响应阈值,且所述候选干扰节点集合中各节点在该像素处产生的光学串扰响应的最大值小于所述目标光学响应与串扰允许比例系数的乘积时,保留该像素,并根据保留的像素生成所述目标来源专属性视觉掩码;
15、所述像素的保留条件表示为:
16、;
17、式中,a表示所述目标智能鞋托;为目标智能鞋托a对应的目标来源专属性视觉掩码;为目标智能鞋托a的候选图像区域;为目标智能鞋托a对应的候选干扰节点集合;为目标智能鞋托a在像素处产生的目标光学响应;为候选干扰节点在同一像素位置产生的光学串扰响应;表示最小有效响应阈值;表示串扰允许比例系数,且。
18、优选地,建立实际光学串扰关系,包括:
19、将目标光学响应大于所述最小有效响应阈值的像素确定为有效响应像素;
20、对于所述候选干扰节点集合中的任一候选干扰节点,当至少一个有效响应像素处的光学串扰响应大于或等于该有效响应像素处的目标光学响应与所述串扰允许比例系数的乘积时,判定该候选干扰节点对所述目标智能鞋托存在实际光学串扰;
21、建立由该候选干扰节点指向所述目标智能鞋托的实际光学串扰关系,并记录作为干扰源节点的该候选干扰节点的逻辑id和作为受影响节点的所述目标智能鞋托的逻辑id。
22、优选地,根据实际光学串扰关系控制后续待标定智能鞋托的标定发光时序,包括:
23、在为当前待标定智能鞋托分配标定发光时间段时,将拟与当前待标定智能鞋托并发发光的节点确定为拟并发发光节点,并查询所述拟并发发光节点指向当前待标定智能鞋托的光学串扰方向;
24、对于任一所述拟并发发光节点,当所述拟并发发光节点指向当前待标定智能鞋托的光学串扰方向已经建立实际光学串扰关系,或者所述光学串扰方向尚未完成判定时,将当前待标定智能鞋托与拟并发发光节点分配至不同的标定发光时间段;
25、当各拟并发发光节点指向当前待标定智能鞋托的光学串扰方向均已完成判定且均未建立实际光学串扰关系时,允许当前待标定智能鞋托与各拟并发发光节点在同一标定发光时间段发光。
26、优选地,生成所述空间映射数据之后,还包括:
27、通过设置于所述目标智能鞋托的rfid读取组件检测rfid标签读取状态;当所述rfid标签读取状态由未读取到标签变为读取到标签并获得商品epc信息时,根据所述目标智能鞋托的逻辑id查询所述空间映射数据,获得对应的目标来源专属性视觉掩码和展示架货位空间标识;
28、获取所述rfid标签读取状态变化前的视觉参考图像和状态变化后的待检测图像,在所述目标来源专属性视觉掩码限定的有效视觉检测区域内比较所述视觉参考图像与所述待检测图像,以确定是否发生图像状态变化;
29、根据预存的商品epc与展示架货位空间标识的对应关系确定所述商品epc对应的展示架货位空间标识;当所述商品epc对应的展示架货位空间标识与所述目标智能鞋托对应的展示架货位空间标识一致,且检测到所述图像状态变化时,生成商品与货位一致的核验结果。
30、优选地,所述方法还包括局部重新标定步骤:
31、当所述商品epc对应的展示架货位空间标识与所述目标智能鞋托对应的展示架货位空间标识一致,且所述有效视觉检测区域内未检测到所述图像状态变化时,判定rfid读取结果与视觉检测结果不一致,并生成包含所述目标智能鞋托的逻辑id的核验异常信息;
32、根据所述目标智能鞋托的逻辑id查询所述实际光学串扰关系,提取以所述目标智能鞋托为受影响节点的干扰源节点;
33、将所述目标智能鞋托与所述干扰源节点组成待重新标定节点集合,并针对所述待重新标定节点集合重新执行光学响应获取、目标来源专属性视觉掩码生成和实际光学串扰关系判定。
34、优选地,所述局部重新标定步骤包括:
35、控制所述待重新标定节点集合中的可控发光单元均处于非发光状态,在保持当前商品放置状态不变且本轮重新标定过程中摄像装置的图像采集参数一致的条件下采集所述目标智能鞋托的候选图像区域的当前基准图像;
36、以所述目标智能鞋托作为当前测试节点进入标定发光状态,根据所述目标智能鞋托的标定发光图像与所述当前基准图像的差分重新获得目标光学响应分布;
37、依次以各干扰源节点作为当前测试节点进入标定发光状态,根据各干扰源节点的标定发光图像与所述当前基准图像的差分重新获得光学串扰响应;
38、根据重新获得的目标光学响应分布和光学串扰响应,重新生成所述目标来源专属性视觉掩码并重新判定实际光学串扰关系;
39、以重新生成的目标来源专属性视觉掩码更新所述空间映射数据中与所述目标智能鞋托对应的记录,并更新实际光学串扰关系表中所述干扰源节点与所述目标智能鞋托之间的关系记录。
40、优选地,发光状态与图像帧之间的时间对应关系通过以下任一种方式建立:
41、基于统一时间基准或者预先校正的时钟偏差,在下发发光状态控制指令时记录控制时间戳,在生成图像帧时记录摄像帧时间戳,根据所述控制时间戳与所述摄像帧时间戳确定各图像帧对应的发光状态;
42、或者,在控制所述可控发光单元执行发光状态切换时,向摄像装置输出同步触发信号,使所述摄像装置响应于所述同步触发信号采集图像,以建立发光状态切换时刻与图像采集时刻的时间对应关系。
43、优选地,根据展示架的物理拓扑关系确定候选干扰节点集合,包括:
44、读取预先存储的静态物理拓扑关系表,所述静态物理拓扑关系表记录各智能鞋托的逻辑id及其在展示架上的相对空间排布位置;
45、根据展示架货位的行列排布,将位于所述目标智能鞋托上、下、左、右相邻货位的智能鞋托确定为直接物理相邻节点,并将根据既有货位排布关系确定的斜向相邻节点或相邻层节点确定为近邻节点;
46、将所述直接物理相邻节点和所述近邻节点共同确定为所述候选干扰节点集合。
47、本发明提供了一种基于视觉阵列基座的商品陈列货位标定方法。具备以下有益效果:
48、1、本发明通过建立展示架图像区域与货位空间标识之间的对应关系,结合目标智能鞋托的受控发光状态获取目标光学响应,并进一步获取候选干扰节点在目标区域内形成的光学串扰响应,据此生成目标来源专属性视觉掩码并建立实际光学串扰关系。由此,可在货位标定过程中同时考虑目标发光响应与周边节点光学影响,使智能鞋托逻辑id、视觉检测区域和展示架货位之间的对应关系更加明确,并可利用已获得的串扰关系对后续标定发光时序进行约束。
49、2、本发明通过在候选图像区域内比较目标光学响应与候选干扰节点的光学串扰响应,并按照目标响应强度和串扰允许比例筛选有效像素,可减少相邻货位发光、展示架表面反射或商品表面反射等因素对目标视觉区域的影响,使生成的目标来源专属性视觉掩码更适合作为后续货位状态检测的图像范围。
50、3、本发明在完成货位标定后,可利用智能鞋托的rfid读取状态变化触发相应视觉区域的状态核验,并在rfid读取结果与视觉检测结果不一致时,根据已建立的实际光学串扰关系限定重新标定的节点范围。该处理方式能够复用前述标定结果进行商品与货位的一致性核验,并在出现异常时减少对无关节点重复执行标定处理。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com