物料分选设备、方法以及存储介质与流程

1.本发明涉及物料分选技术领域，尤其涉及一种物料分选设备、方法及存储介质。


背景技术：

2.目前，在物料(如塑料瓶)分选技术中，因物料与背景部分重叠，无法准确提取物料轮廓，在物料多时无法很好的解决物料粘连的问题，使得物料分选机器的工作效率低，分选准确率不高。


技术实现要素：

3.本发明旨在至少在一定程度上解决相关技术中的技术问题之一。
4.为此，本发明的第一个目的在于提出一种物料分选设备，以提高物料的预测识别精度，同时提高物料分选的准确率。
5.本发明的第二个目的在于提出一种物料分选方法。
6.本发明的第三个目的在于提出一种计算机可读存储介质。
7.为了实现上述目的，本发明第一方面实施例提出了一种物料分选设备，该设备包括输送机构；剔除机构；至少两种相机，每种相机均为多个，每种相机均沿所述输送机构的宽度方向依次设置在所述输送机构上所输送物料的一侧，各相机均用于采集物料图像，其中，所述输送机构的宽度方向与所述输送机构的物料输送方向垂直；数据处理器，所述数据处理器与所述剔除机构、各所述相机分别连接，用于对各所述相机采集的物料图像进行拼接处理得到拼接图像，并利用深度学习算法对所述拼接图像进行物料识别，以识别出需剔除的物料，以及控制所述剔除机构剔除所述需剔除的物料。
8.根据本发明的物料分选设备，通过至少两种相机采集输送机构上输送的物料图像，进而对所采集到的图像进行拼接处理得到拼接图像，并利用深度学习算法对所述拼接图像进行物料识别，以识别出需剔除的物料。由此，该设备能够提高物料的预测识别精度，进而能够提高物料分选的准确性。
9.为达上述目的，本发明第二方面实施例提出了一种物料分选方法，该方法用于上述实施例的物料分选设备，该方法包括以下步骤：获取各相机采集的物料图像；对各相机采集的物料图像进行拼接处理得到拼接图像；利用深度学习算法对所述拼接图像进行物料识别，以识别出需剔除的物料；控制所述剔除机构剔除所述需剔除的物料。
10.根据本发明实施例的物料分选方法，首先对至少两种相机所获取的物料图像拼接处理得到拼接图像，再利用深度学习算法随拼接图像进行物料识别，由此可准确识别出需剔除的物料，进而控制剔除机构可准确将需剔除的物料剔除。
11.为达上述目的，本发明第三方面实施例提出了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现如上述实施例所述的物料分选方法。
12.根据本发明实施例的计算机可读存储介质，在其上存储的与上述实施例所述的物
料分选方法对应的程序被处理器执行时，能够提高物料的预测识别精度，同时提高物料分选的准确率。
13.本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
14.本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
15.图1是本发明实施例的物料分选设备的结构示意图；
16.图2是本发明一个示例的图像横向拼接过程的示意图；
17.图3是本发明一个示例的图像纵向拼接过程的示意图；
18.图4是本发明一个示例的物料拼接图像的示意图；
19.图5是本发明一个示例的预测图像选取过程的示意图；
20.图6是本发明另一个示例的物料拼接图像的示意图；
21.图7是本发明一个示例的识别结果的示意图；
22.图8是本发明一个示例的数据融合过程的示意图；
23.图9是本发明实施例的物料分选方法的流程图。
具体实施方式
24.下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。
25.下面参考附图描述本发明实施例的物料分选设备、方法及存储介质。
26.图1是本发明实施例的物料分选设备的结构示意图。
27.在该实施例中，如图1所示，物料分选设备100包括输送机构10、剔除机构20、至少两种相机30和数据处理器40。其中，物料分选设备100可以是整瓶机，用于分选瓶子。
28.参见图1，输送机构10可包括输送带，用于输送物料，如塑料瓶。
29.在该实施例中，每种相机均为多个，每种相机均沿输送机构10的宽度方向依次设置在输送机构10上所输送物料的一侧，各相机均用于采集物料图像，其中，输送机构10的宽度方向与输送机构10的物料输送方向垂直。在图1中示出了相机30包括两种，分别为第一相机和第二相机，其中，多个第一相机分别为第一个第一相机301、第二个第一相机302、
…
、第n个第一相机30n；多个第二相机分别为第一个第二相机311、第二个第二相机312、
…
、第n个第二相机31n。
30.可选地，至少两种相机可包括可见光相机、红外相机、x光相机中的至少两种，其中，可见光相机采集的图像可用于识别物料的颜色，红外相机采集的物料图像可用于识别物料的材质，如pet、非pet材质，x光相机采集的物料图像可用于识别物料的内部缺陷。由此，通过至少两种相机的设置即可识别出同一物料的至少两种类别，有利于物料的分选。
31.数据处理器40与剔除机构20、各相机分别连接，用于对各相机采集的物料图像进行拼接处理得到拼接图像，并利用深度学习算法对拼接图像进行物料识别，以识别出需剔
除的物料，以及控制剔除机构20剔除需剔除的物料。
32.该物料分选设备，通过对至少两种相机采集的多个图像进行拼接处理得到拼接图像，进而利用深度学习算法对拼接图像进行物料识别，以识别出需剔除的物料。由此，该设备能够提高物料的预测识别精度，进而能够提高物料分选的准确性。
33.在本发明的一个实施例中，参见图1，剔除机构20包括多个喷嘴，多个喷嘴沿输送机构10宽度方向依次设置。其中，输送机构10上的第一个喷嘴和最后一个喷嘴可以作为相机拍摄视域的起始位置和终止位置。
34.在该实施例中，各喷嘴上可均设置有机械件，该机械件是可拆卸安装的，数据处理器40还用于：在输送机构10输送物料前，根据各相机采集的物料图像中的机械件，确定物料图像中喷嘴对应图像的像素位置；以及在输送机构10输送物料时，基于喷嘴对应图像的像素位置，对各相机采集的物料图像进行拼接处理。
35.作为一个示例，参见图1，物料分选设备100包括两种相机，分别记为第一相机和第二相机。需要说明的是，因每一种相机的视域、焦距不同，有效像素区域也不同，但实际分选过程中需要同一个物料出现在的横向坐标基本一致，以实现物料准确剔除，如可见光图像识别出的剔除、红外图像识别出的保留，可以将各相机与喷嘴布局如图1所示，以使第一相机与第二相机一一对应，保证第一相机与其对应的第二相机采集的物料图像的视域交叠尽可能的多。
36.在该示例中，基于喷嘴对应图像的像素位置，对各相机采集的物料图像进行拼接处理，可包括：在输送机构10输送物料时，基于喷嘴对应图像的像素位置，截取各第一相机和各第二相机采集的物料图像的有效像素区域，其中，相邻两第一相机对应的有效像素区域无重叠区域，相邻两第二相机对应的有效像素区域无重叠区域，且所有第一相机对应的有效像素区域覆盖的物料区域，与所有第二相机对应的有效像素区域覆盖的物料区域完全重叠；将各第一相机对应的有效像素区域进行横向拼接得到第一个第一横拼图像，将各第二相机对应的有效像素区域进行横向拼接得到第二个第二横拼图像；对第一个第一横拼图像进行横向缩放处理，将经过缩放处理的第一个第一横拼图像和第二个第一横拼图像记为第一个第二横拼图像和第二个第二横拼图像，其中，第一个第二横拼图像与第二个第二横拼图像的宽度相同；将第一个第二横拼图像与第二个第二横拼图像进行纵向拼接得到拼接图像。
37.举例而言，假设物料分选设备100仅包括图1中的左侧的三个第一相机和三个第二相机，且第一相机为可见光相机、第二相机为红外相机。为保证可见光相机视域与红外相机视域的起始、终止位置相同，按照起始喷嘴(喷嘴1)和终止喷嘴(喷嘴5)进行有效像素区域的提取，从而降低拼接处理后的位置偏差，具体处理流程如下：
38.步骤1：截取每个相机(可见光、红外)的有效像素区域。
39.具体地，确定相邻两可见光(红外)相机视域有交叠的喷嘴，即对应图1中的喷嘴2(第一相机301与第一相机302视域交叠区域的喷嘴)、喷嘴3(第二相机311和第二相机312视域交叠区域的喷嘴)和喷嘴4(第一相机302和第一相机303、第二相机312和第二相机313视域交叠区域的喷嘴)。
40.在对应喷嘴上安装定制机械件，该机械件与相机视域垂直，可将喷嘴位置对应显示到相机采集的图像中，通过图像中的上升沿或下降沿获取喷嘴对应图像的像素位置。如
图1中第一相机301的有效像素区域为喷嘴1的像素位置至喷嘴2的像素位置，依次类推。
41.步骤2：将截取后的有效像素区域分可见光、红外进行横向拼接(如图2所示)。
42.其中，三张可见光图像拼接得到第一个第一横拼图像，三张红外图像拼接得到第二个第一横拼图像。
43.步骤3：将两种类型图像的宽度进行统一(如图3所示)。
44.具体地，计算第一个第一横拼图像和第二个第一横拼图像的宽度比例，并按照该比例将第一个第一横拼图像进行缩放处理，将经过缩放处理的第一个第一横拼图像和第二个第一横拼图像记为第一个第二横拼图像和第二个第二横拼图像，其中，第一个第二横拼图像与第二个第二横拼图像的尺寸(宽度)相同。当然，也可按照比例对第二个第一横拼图像进行缩放处理，以使处理后的图像与第一个第一横拼图像的尺寸(宽度)相同；也可将第一个第一横拼图像、第二个第一横拼图像均缩放处理至预设宽度。
45.步骤4：将各第二横拼图像进行纵向拼接。
46.其中，可在拼接处增加背景区域(实际应用数据如图4所示)，以防止第一个第二横拼图像、第二个第二横拼图像拼接处的误识别。
47.作为一个示例，在对第二相机采集的物料图像进行横向拼接之前，对第二相机采集的物料图像进行拋行处理，以降低第二相机采集的物料图像的帧频。
48.具体地，各相机采集的物料图像横向分辨率均相同，例如可以是512，帧频为5k。实际处理时，为降低图像分辨率，提高运算效率，同时在不影响识别率的前提下，数据处理器40可将第二相机采集的物料图像进行抛行处理，即隔一行抛一行，将帧频降至2.5k。通过抛行处理，可以减少数据的冗余，从而提高计算效率。需要说明的是，图3、图4中示出下排的第二图像、第三图像均为拋行处理后的图像。
49.作为一个示例，根据各第二横拼图像得到拼接图像，还可包括：对上一次得到的各第二横拼图像中的后m
i
行数据和当前得到的各第二横拼图像中的n
i
行数据进行纵向拼接，记经本步骤处理得到的图像和未经本步骤处理的第二横拼图像为第三横拼图像，其中，n
i
表示第i个第二横拼图像的总行数，m
i
、n
i
均为正数，且m1/n1＝
…
＝m
i
/n
i
＝
…
＝m
m
/n
m
＜1，m为相机的种类数，i＝1,2,
…
,m。
50.类似的，可在各第三横拼图像之间的拼接处设置背景区域，以防止拼接处的误识别。
51.具体而言，数据处理器40每采集n
i
行数据进行一次预测，预测图像为当前采集的n
i
行数据加上一个n
i
行的最后m
i
行(m
i
＜n
i
)数据，该处理方式可保证物料被分割时较为完整的显示在一幅图像中(如图5所示，图5中m
i
＝m，n
i
＝n)，由此可提高算法的识别精度。
52.其中，n
i
的取值越大，物料被分割的比例就越低，对识别的影响就越小；m
i
的取值越大，被分割的瓶子完整出现在图5中图像1或图像2中的概率就越大，当n
i
大于最大尺寸物料如瓶子的长度且m
i
大于n
i
/2时，即能保证每个瓶子可完整出现在同一图像中。
53.但实际应用时，n
i
和m
i
的取值受制于物料从视点运动到剔除机构20的时间及数据处理器40算法运算耗时的影响，一是要保证n
i
行图像采集加(n
i
m
i
)行图像预测时间不能超过物料从视点运动到剔除机构20的时间，否则在物料到达剔除机构20时无法正确执行剔除动作；二是(n
i
m
i
)行图像预测的耗时要小于n
i
行图像采集的耗时，才能保证下一幅n
i
行图像到来时，上一幅图像已计算完毕。数据处理器40实际处理的预测图像如图6所示，需要指
出的是，图6中的红外图像为经拋行处理后的图像，故在得到拼接图像时，取上一幅红外图像的m
i
/2行数据，当前的红外图像包含n
i
/2行数据(图6中m
i
＝m，n
i
＝n)。
54.作为一个示例，利用深度学习算法对拼接图像进行物料识别，以识别出需剔除的物料，包括：利用深度学习算法对拼接图像进行物料识别，以从拼接图像中的各横拼图像中识别出目标区域，以及目标区域对应的目标类别，再根据个目标区域在对应横拼图像中的位置，计算各横拼图像中目标区域的重叠面积，最后根据重叠面积及其对应的目标区域和目标类别确定所需要剔除的物料。
55.具体实施时，可以在拼接图像的每个横拼图像中识别出所有物料区域，每个物料区域即为一个目标区域，针对每个横拼图像可以根据物料不同的性质来判断其类别，例如，拼接图像为可见光图像，则可以识别其中的目标区域的颜色类别，可以包括蓝色、红色等等，拼接图像为红外光图像，则可以识别其中的目标区域的材质类别，可以包括pet材质和非pet材质；按照各个目标区域在各横拼图像中的位置，该过程可以将各横拼图像的尺寸进行统一，将各横拼图像对齐，计算各横拼图像中目标区域的重叠面积，例如，拼接图像包括三个横拼图像，从三个横拼图像中分别取一个目标区域，计算它们的重叠区域，遍历所有目标区域，然后根据重叠面积、目标区域和对应的目标类别确定需要剔除的物料。通过拼接图像快速实现对物料多种属性的识别，以及根据识别结果进行分类，提高了识别分选效率。
56.本发明采用的深度学习算法属于有监督学习，需要通过已有的训练样本得到一个最优模型，再利用这个模型将所有的输入映射为相应的输出，对输出进行简单的判断从而实现预测和分类。具体实施时，需先在设备上拍摄物料图像即获取样本，图片经过合并拼接处理后进行物料的人工标注，标注信息包括物料的类别及区域，以可见光和红外的拼接图像为例，可见光图像标记物料的颜色类别，红外图像标记物料的材质类别；标注完成后将图像及标注信息输入至深度学习神经网络，通过不断的迭代优化训练出最优模型；设备运行时，会将实时图像输入该模型，从而预测出物料的类别及区域。
57.在本发明的一个实施例中，物料分选设备包括两种相机，目标类别包括第一物料类别和第二物料类别，对应的目标区域包括第一识别区域和第二识别区域。
58.在该实施例中，利用深度学习算法对拼接图像进行物料识别，以从拼接图像中的各横拼图像中识别出目标区域，以及目标区域对应的目标类别，可包括：利用深度学习算法对拼接图像进行物料识别，以从拼接图像的一个横拼图像中识别出第一识别区域和第一识别区域对应的第一物料类别，从拼接图像的另一个横拼图像中识别第二识别区域和第二识别区域对应的第二物料类别；根据各目标区域在对应横拼图像中的位置，计算各横拼图像中目标区域的重叠面积，可包括：根据第一识别区域对应横拼图像中的位置，第二识别区域对应横拼图像中的位置，计算第一识别区域与第二识别区域的重叠面积；根据重叠面积及其对应的目标区域和目标类别，确定所需剔除的物料，可包括：将重叠面积与预设阈值进行比对，并根据比对结果、第一物料类别和第二物料类别确定需剔除的物料。
59.具体地，根据比对结果、第一物料类别和第二物料类别确定需剔除的物料，可包括：获取目标剔除任务，其中，目标剔除任务为剔除第一类别和第二类别的物料；如果第一物料类别不为第一类别，则确定第一物料类别的物料不为需剔除的物料；如果所述重叠面积大于0，对应的第一识别区域的第一物料类别为第一类别，且对应的第二识别区域的第二物料类别为第二类别，则确定第一识别区域的物料为需剔除的物料；如果所述重叠面积大
于0，对应的第一识别区域的第一物料类别为第一类别，且对应的第二识别区域的第二物料类别不为第二类别，且重叠面积小于预设阈值，则确定第一识别区域中非重叠区域中的物料为需剔除的物料；如果对应的第一识别区域的第一物料类别为第一类别，且对应的第二识别区域的第二物料类别不为第二类别，且重叠面积大于或者等于预设阈值，则确定第一识别区域的物料不为需剔除的物料。
60.具体而言，得到拼接图像后，数据处理器40可利用深度学习算法对拼接图像中的物料进行预设识别。以可见光图像、红外图像为例，可见光图像负责颜色识别，可分为透明、蓝、绿、瓷白及杂色；红外图像负责材质识别，可分为pet及非pet。实际分选中，为保证成品的选净率，考虑到碎标签、瓶盖等不易剔除物料的影响，可选择剔除好料。
61.物料分选设备100对应的上位机界面，可提供各类别物料剔除或保留的选择，用户可根据实际需要设置剔除或保留的物料，以剔除蓝瓶且保留非pet为例，即需剔除的物料为可见光图像识别出是蓝色且对应红外图像识别出的材质不为非pet，具体处理流程如下：
62.步骤1：分别获取可见光图像(即上述的一个第三横拼图像)的物料类别c
color
及识别区域r
color
和红外图像(即上述的另一个第三横拼图像)的物料类别c
infra
及识别区域r
infra
(如图7所示)。
63.步骤2：将红外图像纵向拉伸(保持与可见光图像相同的宽高比)后与可见光图像进行数据融合(如图8所示)。
64.具体地，数据融合，即将相同宽高比的可见光图像、红外图像位置对齐，计算每个物料区域的重叠面积，例如，包括可以计算后续的蓝瓶方框与非pet方框的重叠面积。
65.步骤3：根据两者的类别及重叠区域进行剔除数据的计算。
66.具体地，令iou(r
color
,r
infra
)为可见、红外拼接后的重叠区域，p为设定的重叠区域阈值。若c
color
不为蓝瓶，则不剔除；若重叠面积大于0，c
color
为蓝瓶且c
infra
为pet，则剔除r
color
区域中的物料；若重叠面积大于0，c
color
为蓝瓶且c
infra
为非pet且iou(r
color
,r
infra
)<p，则保留r
color
和r
infra
重叠的区域，其它r
color
区域的物料仍然剔除；若c
color
为蓝瓶且c
infra
为非pet且iou(r
color
,r
infra
)≥p，则不剔除。其中，在确定出需剔除的物料后，数据处理器40可控制剔除机构20中与确定出的需剔除的物料对应的喷嘴喷气，以将确定出的需剔除的物料剔除。
67.针对预先设置的是剔除蓝色且不为非pet的物料，上述方式(记为方式一)可见光图像中框选出的是蓝瓶，红外图像中框选出的是非pet瓶子，对应的非重叠区域为需剔除的物料。对应的，如果可见光图像中框选出的是蓝瓶，红外图像中框选出的是pet瓶子，则可在重叠面积大于预设阈值p的时候，剔除对应蓝瓶，该方式记为方式二。
68.上述两种方式均可以实现剔除蓝色且不为非pet的物料，但方式一相较于方式二存在如下优点：
69.第一，由于提取可见光和红外有效像素区域时有一定偏差，导致瓶子在可见光和红外区域的横坐标不能完全对应，再加上算法识别物料框的误差，导致方式二中的阈值不能设置太高，若降低阈值，则会在多个瓶子靠近或粘连时误剔除出非pet瓶，而非pet瓶属于恶杂，将严重影响成品质量；
70.第二，实际分选时，pet瓶占比大(98％左右)，但在红外图像中有小部分pet瓶无法识别，若选择方式二，则会有一定比例漏选，严重影响带出比(即坏料中好料的占比，比例越
高，带出比越差，其中，默认剔除出去的是好料，不剔除的是坏料)。
71.因此，实际分选时，若设置剔除蓝色且不为非pet的物料，则可采用上述方式一进行分选。
72.综上，本发明实施例的物料分选设备，能够提高物料的预测识别精度，同时提高物料分选的准确率。
73.图9是本发明一个实施例的物料分选方法的流程图。
74.在该实施例中，物料分选方法用于上述实施例的物料分选设备。
75.如图9所示，物料分选方法包括以下步骤：
76.s10，获取各相机采集的物料图像。
77.s20，对各相机采集的物料图像进行拼接处理得到拼接图像。
78.作为一个示例，剔除机构包括多个喷嘴，多个喷嘴沿输送机构依次设置，各喷嘴上均设置有可拆卸安装的机械件，物料分选方法还可包括：在输送机构输送物料前，根据各相机采集的物料图像中的机械件，确定物料图像中喷嘴对应图像的像素位置。
79.在本发明的一个实施例中，对各相机采集的物料图像进行拼接处理得到拼接图像，可包括：在输送机构输送物料时，基于喷嘴对应图像的像素位置，截取各相机采集的物料图像的有效像素区域，其中，每种相机的相邻两相机对应的有效像素区域无重叠区域，且每种相机对应的有效像素区域覆盖的物料区域一致；将每种相机对应的有效像素区域进行横向拼接得到多个第一横拼图像，其中，每个第一横拼图像对应一种相机；对多个第一横拼图像中的至少一个进行横向缩放处理，其中，记经横向缩放和未经横向缩放的第一横拼图像为第二横拼图像，各第二横拼图像的横向尺寸(宽度)相同；根据各第二横拼图像得到拼接图像。
80.在该实施例中，作为一个示例，根据各第二横拼图像得到拼接图像，可包括：将各第二横拼图像进行纵向拼接得到拼接图像，相邻两个第二横拼图像之间无间隔拼接，或者间隔背景区域拼接。
81.举例而言，物料分选设备可包括两种相机，分别记为第一相机和第二相机。具体地，对各相机采集的物料图像进行拼接处理得到拼接图像，可包括：在输送机构输送物料时，基于喷嘴对应图像的像素位置，截取各第一相机和各第二相机采集的物料图像的有效像素区域，其中，相邻两第一相机对应的有效像素区域无重叠区域，相邻两第二相机对应的有效像素区域无重叠区域，且所有第一相机对应的有效像素区域覆盖的物料区域，与所有第二相机对应的有效像素区域覆盖的物料区域完全重叠；将各第一相机对应的有效像素区域进行横向拼接得到第一个第一横拼图像，将各第二相机对应的有效像素区域进行横向拼接得到第二个第一横拼图像；对第一个第一横拼图像进行横向缩放处理，将经过缩放处理的第一个第一横拼图像和第二个第一横拼图像记为第一个第二横拼图像和第二个第二横拼图像，其中，第一个第二横拼图像与第二个第二横拼图像的宽度相同；将第一个第二横拼图像与第二个第二横拼图像进行纵向拼接得到拼接图像。
82.作为另一个示例，根据各第二横拼图像得到拼接图像，可包括：对上一次得到的各第二横拼图像中的后m
i
行数据和当前得到的各第二横拼图像中的n
i
行数据进行纵向拼接，记经本步骤处理得到的图像和未经本步骤处理的第二横拼图像为第三横拼图像，其中，n
i
表示第i个第二横拼图像的总行数，m
i
、n
i
均为正数，且m1/n1＝
…
＝m
i
/n
i
＝
…
＝m
m
/n
m
＜1，m为
相机的种类数，i＝1,2,
…
,m。
83.在该实施例中，作为一个示例，根据各第三横拼图像得到拼接图像，可包括：将各第三横拼图像进行纵向拼接得到拼接图像，相邻两个第三横拼图像之间无间隔拼接，或者间隔背景区域拼接。
84.可选地，可对至少一种相机采集的物料图像进行拋行处理，以降低至少一种相机采集的物料图像的帧频。例如，物料分选设备包括第一相机和第二相机时，在对第二相机采集的物料图像进行横向拼接之前，对第二相机采集的物料图像进行拋行处理，以降低第二相机采集的物料图像的帧频。
85.s30，利用深度学习算法对拼接图像进行物料识别，以识别出需剔除的物料。
86.具体地，利用深度学习算法对拼接图像进行物料识别，以从拼接图像中的各横拼图像中识别出目标区域，以及目标区域对应的目标类别，再根据个目标区域在对应横拼图像中的位置，计算各横拼图像中目标区域的重叠面积，最后根据重叠面积及其对应的目标区域和目标类别确定所需要剔除的物料。
87.在本发明的一个实施例中，物料分选设备包括两种相机，目标类别包括第一物料类别和第二物料类别，对应的目标区域包括第一识别区域和第二识别区域。
88.在该实施例中，利用深度学习算法对拼接图像进行物料识别，以从拼接图像中的各横拼图像中识别出目标区域，以及目标区域对应的目标类别，包括：利用深度学习算法对拼接图像进行物料识别，以从拼接图像的一个横拼图像中识别出第一识别区域和第一识别区域对应的第一物料类别，从拼接图像的另一个横拼图像中识别第二识别区域和第二识别区域对应的第二物料类别；根据各目标区域在对应横拼图像中的位置，计算各横拼图像中目标区域的重叠面积，包括：根据第一识别区域对应横拼图像中的位置，第二识别区域对应横拼图像中的位置，计算第一识别区域与第二识别区域的重叠面积；根据重叠面积及其对应的目标区域和目标类别，确定所要剔除的物料，包括：将重叠面积与预设阈值进行比对，并根据比对结果、第一物料类别和第二物料类别确定需剔除的物料。
89.其中，根据比对结果、第一物料类别和第二物料类别确定需剔除的物料，包括：获取目标剔除任务，其中，目标剔除任务为剔除第一类别和第二类别的物料；如果第一物料类别不为第一类别，则确定第一物料类别的物料不为需剔除的物料；如果重叠面积大于0，第一物料类别为第一类别且对应的第二物料类别为第二类别也就是对应的第一识别区域的第一物料类别为第一类别，对应的第二识别区域的第二物料类别为第二类别，则确定第一识别区域的物料为需剔除的物料；如果重叠面积大于0，第一物料类别为第一类别且对应的第二物料类别不为第二类别也就是对应的第一识别区域的第一物料类别为第一类别，对应的第二识别区域的第二物料类别为不为第二类别，且重叠面积小于预设阈值，则确定第一识别区域中非重叠区域中的物料为需剔除的物料；如果重叠面积大于0，第一物料类别为第一类别且对应的第二物料类别不为第二类别也就是对应的第一识别区域的第一物料类别为第一类别，对应的第二识别区域的第二物料类别为不为第二类别，且重叠面积大于或者等于预设阈值，则确定第一识别区域的物料不为需剔除的物料。
90.s40，控制剔除机构剔除需剔除的物料。
91.需要说明的是，本发明实施例的物料分选方法的其他具体实施方式可参见上述实施例的物料分选设备的具体实施方式。
92.综上，本发明实施例的物料分选方法，能够提高物料的预测识别精度，同时提高物料分选的准确率。
93.进一步地，本发明提出了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时，实现上述实施例中的物料分选方法。
94.本发明实施例的计算机可读存储介质，在其上存储的与上述物料分选方法对应的计算机程序被处理器执行时，能够提高物料的预测识别精度，同时提高物料分选的准确率。
95.在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
96.此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
97.流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。
98.在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(ram)，只读存储器(rom)，可擦除可编辑只读存储器(eprom或闪速存储器)，光纤装置，以及便携式光盘只读存储器(cdrom)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。
99.在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”、“轴向”、“径向”、“周向”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。
100.在本发明中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或成一体；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。
101.在本发明中，除非另有明确的规定和限定，第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触，或第一和第二特征通过中间媒介间接接触。而且，第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方，或仅仅表示第一特征水平高度小于第二特征。
102.尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。