冰箱及其食材管理方法与流程

技术特征：
1.一种冰箱，其特征在于，包括：箱体，其包括若干个储藏室；箱门，设于所述储藏室的开口处，其外侧设有显示屏；摄像装置，设于所述储藏室中，用于对储藏室中的食材进行识别；控制器被配置为：获取所述摄像装置拍摄的待训练图片，并将所述待训练图片显示在所述显示屏中；当接收到用户基于所述待训练图片的标注操作时，将标注后的所述待训练图片输入到云端，以使云端将所述待训练图片作为训练集输入到原图像识别模型中，以对所述原图像识别模型进行更新；获取云端更新后的图像识别模型。2.如权利要求1所述的冰箱，其特征在于，所述标注操作包括用户对所述待训练图片的食材定义操作和特征点标注操作；其中，所述食材定义操作包括对自定义食材的拼音输入操作和手写输入操作。3.如权利要求2所述的冰箱，其特征在于，所述控制器还被配置为：响应于用户对自定义食材的拼音输入操作，获取用户输入的待转换拼音；获取预先建立的食材拼音对照表；其中，所述食材拼音对照表中包括多种食材名称和其对应的拼音；将所述待转换拼音与所述食材拼音对照表进行比对；当在所述食材拼音对照表中存在与所述待转换拼音相匹配的拼音时，从所述食材拼音对照表中获取与所述待转换拼音对应的食材名称作为所述自定义食材的名称。4.如权利要求3所述的冰箱，其特征在于，当在所述食材拼音对照表中不存在与所述待转换拼音相匹配的拼音时，所述控制器还被配置为：将所述待转换拼音与所述食材拼音对照表中的拼音进行相似度计算，得到两者的拼音相似度；当所述拼音相似度大于预设的相似度阈值时，从所述食材拼音对照表中获取与所述待转换拼音对应的食材名称作为所述自定义食材的名称。5.如权利要求3所述的冰箱，其特征在于，所述控制器还被配置为：响应于用户对自定义食材的手写输入操作，获取用户输入的手写名称；将所述手写名称与所述食材拼音对照表进行比对；当在所述食材拼音对照表中存在与所述手写名称相匹配的食材名称时，将所述手写名称作为所述自定义食材的名称。6.如权利要求5所述的冰箱，其特征在于，当在所述食材拼音对照表中不存在与所述手写名称相匹配的食材名称时，所述控制器还被配置为：将所述手写名称转换为待处理拼音；将所述待处理拼音与所述食材拼音对照表进行比对；当在所述食材拼音对照表中存在与所述待处理拼音相匹配的拼音时，从所述食材拼音对照表中获取与所述待处理拼音对应的食材名称作为所述自定义食材的名称。7.一种冰箱食材管理方法，其特征在于，包括：获取冰箱中摄像装置拍摄的待训练图片，并将所述待训练图片显示在冰箱的显示屏
中；当接收到用户基于所述待训练图片的标注操作时，将标注后的所述待训练图片输入到云端，以使云端将所述待训练图片作为训练集输入到原图像识别模型中，以对所述原图像识别模型进行更新；获取云端更新后的图像识别模型。8.如权利要求7所述的冰箱食材管理方法，其特征在于，所述标注操作包括用户对所述待训练图片的食材定义操作和特征点标注操作；其中，所述食材定义操作包括对自定义食材的拼音输入操作和手写输入操作。9.如权利要求8所述的冰箱食材管理方法，其特征在于，所述方法还包括：响应于用户对自定义食材的拼音输入操作，获取用户输入的待转换拼音；获取预先建立的食材拼音对照表；其中，所述食材拼音对照表中包括多种食材名称和其对应的拼音；将所述待转换拼音与所述食材拼音对照表进行比对；当在所述食材拼音对照表中存在与所述待转换拼音相匹配的拼音时，从所述食材拼音对照表中获取与所述待转换拼音对应的食材名称作为所述自定义食材的名称。10.如权利要求9所述的冰箱食材管理方法，其特征在于，所述方法还包括：当在所述食材拼音对照表中不存在与所述待转换拼音相匹配的拼音时，所述方法还包括：将所述待转换拼音与所述食材拼音对照表中的拼音进行相似度计算，得到两者的拼音相似度；当所述拼音相似度大于预设的相似度阈值时，从所述食材拼音对照表中获取与所述待转换拼音对应的食材名称作为所述自定义食材的名称。

技术总结
本发明公开了一种冰箱，包括：箱体，其包括若干个储藏室；箱门，设于储藏室的开口处，其外侧设有显示屏；摄像装置，设于储藏室中；控制器被配置为：获取摄像装置拍摄的待训练图片，并将待训练图片显示在所述显示屏中；当接收到用户基于待训练图片的标注操作时，将标注后的待训练图片输入到云端，以使云端将待训练图片作为训练集输入到原图像识别模型中，以对原图像识别模型进行更新；获取云端更新后的图像识别模型。本发明还公开一种冰箱食材管理方法。采用本发明实施例，能够利用用户个人标注的食材信息形成新的训练集，并将训练后的新模型加载到用户冰箱上，每个冰箱产品搭载各自独有的图像识别模型，提高食材识别的准确率。提高食材识别的准确率。提高食材识别的准确率。


技术研发人员：刘丽华 刘照光
受保护的技术使用者：海信（山东）冰箱有限公司
技术研发日：2021.06.02
技术公布日：2022/1/13