基于视觉识别的宠物用品耗材余量监测与自动补货系统的制作方法
本发明涉及图像检测,具体是涉及基于视觉识别的宠物用品耗材余量监测与自动补货系统。
背景技术:
1、宠物饲养过程中,猫粮、狗粮、饮水、猫砂等耗材的余量监测与及时补充长期依赖于人工巡视与主观判断。当饲养者外出时,耗材耗尽无法被及时发现,导致宠物断食断水或排泄环境恶化。随着智能家居技术发展,出现了基于传感器的耗材余量监测方案,主要包括重量传感器监测、液位传感器监测和超声波传感器监测三类。重量传感器通过容器底部压力变化换算剩余质量,但需与耗材物理接触,在颗粒物料受潮结块时产生零点漂移;液位传感器仅适用于液态耗材,对颗粒状和粉状耗材无效;超声波传感器受容器形状和堆叠形态影响,反射信号多路径干扰导致测量波动。上述物理传感器方案均需为每种耗材品类的容器单独部署传感器探头,系统硬件成本与维护复杂度随容器数量线性增加。
2、近年来,基于计算机视觉的非接触式监测方案逐渐受到关注。此类方案通过摄像头采集耗材容器图像,利用图像处理算法提取耗材填充区域像素面积,将面积比近似为填充率。然而,家用环境中自然光与人工光混叠造成的多光源照度不均、宠物活动导致的容器局部遮挡、摄像头安装位置偏移引起的透视偏差,均使得同容器不同时刻采集的图像在亮度和空间配准上缺乏一致性,直接导致像素面积比估算误差。此外,不同形态耗材的视觉特征差异显著:颗粒状猫粮的填充边界可通过灰度阈值分割,透明饮水器的液面检测则需依赖弯月面轮廓的反射特征,粉状猫砂的结团状态判别需分析纹理密度变化,现有方案缺乏在同一系统框架内自适应切换检测策略的能力。
3、在补货决策层面,现有方案普遍采用固定余量阈值触发补货机制,未能将品类消耗速率的差异纳入决策依据。高消耗品类在阈值触发时刻前已面临断货风险,低消耗品类则因阈值过早触发而产生不必要的频繁补货。多品类联合补货场景下,缺乏针对各品类消耗特征差异的补货量比例分配与补货时序协调手段。
技术实现思路
1、本发明旨在提供基于视觉识别的宠物用品耗材余量监测与自动补货系统,通过光照校正、帧间配准、多品类判别及按需补货等措施,解决现有视觉监测受光照与视角影响大、适用品类单一、补货时机不合理的问题。
2、为达到以上目的,本发明采用的技术方案为:
3、基于视觉识别的宠物用品耗材余量监测与自动补货系统,包括:
4、图像采集模块,用于获取至少一个耗材容器的多帧采集图像,所述多帧采集图像包括参考帧与当前帧,所述耗材容器外壁附有已知反射率的标准灰度基准块;
5、光照校正模块,用于提取所述基准块区域的多通道像素均值,将当前帧各通道均值与标定光源下对应通道均值执行比值运算,得到各通道增益系数后对采集图像逐像素执行照度与白平衡联合校正;
6、配准模块,用于提取校正后图像中容器轮廓的曲率极值点集,对参考帧与当前帧的曲率极值点集执行欧氏距离矩阵计算与双向最小距离匹配,利用配对点集求解单应性变换矩阵,将当前帧映射至参考帧统一平面;
7、填充区域提取模块,用于对配准后图像执行容器边缘闭合轮廓检测与凸包掩膜生成,得到耗材填充区域;
8、品类判定模块,用于按容器视觉特征确定性排序,依次对各容器执行品类判定,利用已确认容器的品类标签对后续待判定容器执行候选品类集合的冲突剔除;
9、余量估算模块,用于对所述耗材填充区域执行阴影区域与明亮区域的二值分割,计算阴影面积比,在预标定的阴影面积比与填充率的映射曲线上查询对应填充率;
10、消耗速率计算模块,用于根据所述填充率在相邻监测周期间的差值除以时间间隔,得到当前消耗速率;
11、补货触发模块,用于计算所述当前消耗速率的倒数与当前余量的乘积作为剩余可用时间裕量,将所述剩余可用时间裕量与预设的配送周期比较以触发补货请求。
12、优选的,所述配准模块中,所述曲率极值点通过对容器投影轮廓逐像素点计算相邻三点构成的切线夹角变化率,标记曲率局部极大值点获得,所述配准模块还用于对变换结果执行重投影误差计算,当重投影误差超过预设阈值时剔除对应配对点并重新求解所述单应性变换矩阵。
13、优选的,所述重投影误差的预设阈值根据参考帧中曲率极值点集的几何分布密度自适应调整,当曲率极值点集中于容器轮廓的某一局部区域时,所述预设阈值相应收紧;当曲率极值点均匀分布于轮廓全周时,所述预设阈值相应放宽。
14、优选的,还包括遮挡消除模块,用于对相邻两帧执行光流追踪以计算像素位移矢量场,将位移幅值偏离容器平面预设有效区间的像素标记为遮挡物像素,从遮挡区域边界逐层向内部执行邻域非遮挡像素的灰度值沿梯度方向扩散填充,直至扩散变化量低于收敛阈值。
15、优选的,还包括液面定位模块,用于在镜头前加装固定偏振滤光片消除水面镜面反射后,对通过容器轮廓凸包掩膜限定的液面感兴趣区域逐像素计算梯度方向向量并投影至容器垂直中轴线执行累加,搜索累加值的局部极大值,对该极大值附近区域的投影值执行二次曲线拟合以获取亚像素精度液面位置。
16、优选的,所述固定偏振滤光片的偏振方向在系统初始化阶段自动调整,通过对容器水面区域连续采集多帧图像并计算各偏振角下的镜面反射分量,选取镜面反射分量最小的偏振方向作为工作方位角。
17、优选的,所述品类判定模块中,所述视觉特征确定性根据各容器耗材填充区域在色调饱和度空间的像素分布与品类先验概率分布的重叠度计算,所述冲突剔除依据系统中运行时扫描已确认品类与候选品类组合后生成的冲突标记阵列执行。
18、优选的,还包括异常检测模块,用于计算同一时刻各已确认品类容器的消耗速率值,构建容器间消耗速率差值列联表,将表中某一容器与其余所有容器的消耗速率差值绝对值的均值超出预设正常范围的容器判定为异常消耗。
19、优选的,所述补货触发模块还用于计算消耗速率的加速度,当加速度为正时对所述配送周期乘以加速度放大系数以提前触发补货时间点,所述加速度放大系数取消耗速率加速度的绝对值与当前消耗速率之比的截取上限为5.0的截取值,截取上限为5.0。
20、优选的,还包括补货量分配模块,用于计算多品类消耗速率的比值,在联合补货容量受限时将可补货总量按各品类消耗速率占总消耗速率的百分比执行比例分配。
21、与现有技术相比,本发明的有益效果在于:
22、(1)本发明在图像采集环节引入标准灰度基准块并对各颜色通道作增益校正,有效消除昼夜、阴晴及灯具开关等环境光照变化引起的亮度偏移,在不同光照下均能保持分割与余量估算稳定,显著降低误检误报。
23、(2)本发明以轮廓曲率极值点作为配准特征,通过单应性变换实现帧间配准,对摄像头角度微抖、宠物触碰导致的视角偏移及局部遮挡具有更强鲁棒性,配准误差可控,保证时序多帧数据一致可比。
24、(3)本发明通过品类判定模块依耗材填充区域形态重叠关系区分不同耗材,并并行设置液面定位与液固区分支路,兼容液体、固体及半固体类耗材,对透明及异形容器亦具良好适应性,适用范围明显拓宽。
25、(4)本发明以耗材填充区域阴影面积占比表征剩余量,不依赖容器刻度或绝对尺寸;并基于时序余量推算消耗速率与剩余可用时间裕量,以剩余时间是否低于补货周期为触发条件实现按需预警,补货时机较固定阈值方案更合理。
26、(5)本发明通过比对多容器消耗速率差值识别异常消耗,并按各容器缺口比例分配补货量,适用于多宠物、多容器家庭场景,智能化与实用价值优于现有单点监测方案。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com