信息处理方法和装置与流程

摘要: 本申请属于信息处理,具体涉及一种信息处理方法和装置。背景技术:1、随着移动终端摄像与食物识别技术的发展,用户可通过手机、平板或智能眼镜拍摄餐食并获得菜名、重量、...
信息处理方法和装置与流程

本申请属于信息处理,具体涉及一种信息处理方法和装置。

背景技术:

1、随着移动终端摄像与食物识别技术的发展,用户可通过手机、平板或智能眼镜拍摄餐食并获得菜名、重量、热量或营养信息。然而,一张餐食照片中常同时存在主食、饮料、配菜、餐具和包装,同类食物也可能出现多个实例,但是用户真正关心的对象可能只是其中一个或一组,例如,餐食中有两个汉堡和一杯饮料,用户仅想询问左边两个汉堡的重量和热量。现有方案通常先分析整张图像,再从结果中挑选一项显示,如此,容易造成最终显示的分析结果所针对的对象并非用户想指定的分析对象。

技术实现思路

1、本申请实施例的目的是提供一种信息处理方法和装置,能够使最终显示的营养分析结果信息和重量信息所对应的对象是用户实际指定的食物对象。

2、第一方面,本申请实施例提供了一种信息处理方法,该方法包括:

3、获取第一图像;

4、接收用户的第一输入;

5、响应于所述第一输入,从所述第一图像中确定待分析的食物对象集合,所述食物对象集合中包括n个待分析的食物对象,n为正整数;

6、确定所述食物对象集合中每个所述食物对象分别对应的掩膜图像;

7、根据所述第一图像对应的三维空间信息和每个所述食物对象分别对应的掩膜图像,确定每个所述食物对象分别对应的物理尺度信息;

8、基于每个所述食物对象分别对应的物理尺度信息,确定每个所述食物对象分别对应的重量信息和营养分析结果信息;

9、显示目标分析结果信息,所述目标分析结果信息包括每个所述食物对象分别对应的重量信息和营养分析结果信息。

10、第二方面,本申请实施例提供了一种信息处理装置,该装置包括:

11、获取模块,用于获取第一图像;

12、接收模块,用于接收用户的第一输入;

13、第一确定模块,用于响应于所述第一输入,从所述第一图像中确定待分析的食物对象集合,所述食物对象集合中包括n个待分析的食物对象,n为正整数;

14、第二确定模块,用于确定所述食物对象集合中每个所述食物对象分别对应的掩膜图像;

15、第三确定模块,用于根据所述第一图像对应的三维空间信息和每个所述食物对象分别对应的掩膜图像,确定每个所述食物对象分别对应的物理尺度信息;

16、第四确定模块,用于基于每个所述食物对象分别对应的物理尺度信息,确定每个所述食物对象分别对应的重量信息和营养分析结果信息;

17、显示模块,用于显示目标分析结果信息,所述目标分析结果信息包括每个所述食物对象分别对应的重量信息和营养分析结果信息。

18、第三方面,本申请实施例提供了一种电子设备,所述电子设备包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法。

19、第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法。

20、第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。

21、第六方面,本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如第一方面所述的方法。

22、本申请实施例中,通过响应于用户的第一输入,从获取的第一图像中确定待分析的食物对象集合,并进一步确定食物对象集合中每个食物对象分别对应的掩膜图像,使得后续处理不再针对整张图像笼统进行,而是由用户指定的食物对象持续约束计算范围。在此基础上,根据第一图像对应的三维空间信息和每个食物对象分别对应的掩膜图像,确定每个食物对象分别对应的物理尺度信息,并由该物理尺度信息确定该食物对象的重量信息及营养分析结果信息,最后显示包括每个食物对象分别对应的营养分析结果信息和重量信息的目标分析结果信息。由此,用户指定的食物对象与参与掩膜生成、物理尺度计算、重量信息确定、营养推理及结果显示的对象保持对应,能够改善因先分析整张图像,再从结果中挑选一项显示而造成的询问对象与计算对象不一致的问题,使最终显示的营养分析结果信息和重量信息更符合用户实际指定的食物对象。进一步地,本申请实施例中,将基于当前食物对象自身掩膜图像从第一图像的三维空间信息中提取得到的物理尺度信息,作为营养推理的显式条件参与重量信息与营养分析结果信息的确定,而非仅按体积乘以固定密度或按类别查询单位重量信息营养值,从而使同类别但实际份量不同的食物对象能够获得与其真实大小相匹配的营养分析结果信息,进而提升了食物对象的营养分析结果信息的准确性。

1.一种信息处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述第一图像对应的三维空间信息和每个所述食物对象分别对应的掩膜图像,确定每个所述食物对象分别对应的物理尺度信息,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据所述第一图像对应的三维空间信息和每个所述食物对象分别对应的掩膜图像,确定每个所述食物对象分别对应的像素点集合,包括:

4.根据权利要求2所述的方法,其特征在于,在所述确定每个所述食物对象分别对应的像素点集合之后,所述方法还包括:

5.根据权利要求2所述的方法,其特征在于,一个食物对象对应的所述物理尺度信息包括相机到所述食物对象的距离信息以及所述食物对象的尺寸信息;

6.根据权利要求1所述的方法,其特征在于,在所述基于每个所述食物对象分别对应的物理尺度信息,确定每个所述食物对象分别对应的重量信息和营养分析结果信息之前,所述方法还包括:

7.一种信息处理装置,其特征在于,所述装置包括:

8.根据权利要求7所述的装置,其特征在于,所述第三确定模块具体用于:

9.根据权利要求8所述的装置,其特征在于,所述第三确定模块具体用于:

10.根据权利要求8所述的装置,其特征在于,在所述确定每个所述食物对象分别对应的像素点集合之后,所述装置还包括:

11.根据权利要求8所述的装置,其特征在于,一个食物对象对应的所述物理尺度信息包括相机到所述食物对象的距离信息以及所述食物对象的尺寸信息;

12.根据权利要求7所述的装置,其特征在于,在所述基于每个所述食物对象分别对应的物理尺度信息,确定每个所述食物对象分别对应的重量信息和营养分析结果信息之前,所述装置还包括: