一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

一种屏幕缺陷检测系统、方法、电子设备及可读存储介质与流程

2022-08-17 11:26:49 来源:中国专利 TAG:


1.本技术涉及显示器技术领域,尤其涉及一种屏幕缺陷检测系统、方法、电子设备及可读存储介质。


背景技术:

2.屏幕在出厂时,需要进行外观检测。目前,一般是通过自动光学检测(automated optical inspection,aoi)方式对屏幕外观的缺陷进行检测。且屏幕aoi时,是通过对屏幕的正面拍摄一张图像,然后对图像进行分析来确定屏幕外观的缺陷。然而,屏幕外观的有些缺陷在传统的正面拍摄的情况下无法拍摄出来,从而会造成对一些缺陷的漏检。


技术实现要素:

3.有鉴于此,本技术实施例提供一种屏幕缺陷检测系统、方法、电子设备及可读存储介质。
4.根据本技术第一方面,本技术实施例提供了一种屏幕缺陷检测系统,包括:第一图像采集装置,用于以目标拍摄角度采集屏幕的第一图像;多个第二图像采集装置,用于以其他不同拍摄角度采集屏幕的多张第二图像;屏幕缺陷检测装置,用于获取第一图像和多张第二图像;以第一图像为基准,将各第二图像与第一图像进行配准;将配准后的各第二图像与第一图像进行融合,得到一张多通道图像;根据多通道图像确定屏幕缺陷;其中,第一图像采集装置和第二图像采集装置为不同类型的图像采集装置,第二图像采集装置的对焦范围大于第一图像采集装置的对焦范围。
5.可选地,第二图像采集装置为移轴相机,移轴相机包括沙姆环,通过调节沙姆环的角度,以调节第二图像采集装置的对焦范围。
6.可选地,屏幕缺陷检测装置在将各第二图像与第一图像进行配准之前,屏幕缺陷检测装置还用于:获得各第二图像的清晰度及对应的相机参数;基于调焦模型对每一张第二图像、该第二图像的清晰度及对应的相机参数进行处理,得到针对该相机参数的目标调整参数;根据目标调整参数调整该第二图像对应的第二图像采集装置;采用调整后的该第二图像采集装置重新采集屏幕图像,得到重新采集的第二图像;重新采集的第二图像满足清晰度条件。
7.可选地,调焦模型的构建步骤包括:获取训练样本,训练样本包括样本屏幕的多张样本图像,每张样本图像标注有初始相机参数、目标样本调整参数及该样本图像的清晰度;目标样本调整参数为满足清晰度条件的标定图像的标定相机参数与该样本图像的初始相机参数的差值;以样本屏幕的目标拍摄角度的目标图像为基准,将各张样本图像与目标图像进行配准;对于每张配准后的样本图像:将配准后的样本图像输入神经网络,得到对应的初始样本调整参数;将初始样本调整参数、样本图像及标定图像输入生成式对抗网络,得到对应的像素差值;将像素差值及样本图像输入神经网络,得到对应的二次样本调整参数,以训练调焦模型,直到收敛。
8.可选地,屏幕显示标定图案,屏幕缺陷检测装置在获取多张第二图像之前,屏幕缺陷检测装置还用于:针对每个第二图像采集装置:采用第二图像采集装置采集屏幕的多张第三图像,任意两张第三图像的相机位置不同和/或拍摄角度不同;根据多张第三图像中的标定图案确定满足第一条件的目标第三图像;根据目标第三图像的相机位置和拍摄角度调整第二图像采集装置的位置和拍摄角度。
9.可选地,屏幕缺陷检测装置在根据目标第三图像的相机位置和拍摄角度调整第二图像采集装置的位置和拍摄角度之后,还用于:针对每个第二图像采集装置:采用第二图像采集装置采集屏幕的第四图像及第五图像,第四图像对应第一相机参数,第五图像对应第二相机参数;确定第四图像及第五图像分别对应的清晰度;根据第四图像及第五图像分别对应的清晰度,调整第二相机参数,以使第二图像采集装置以调整后的第二相机参数采集第二图像。
10.可选地,根据第四图像及第五图像分别对应的清晰度,调整第二相机参数,包括:在判定第五图像对应的清晰度与第四图像对应的清晰度的差值大于或等于阈值的情况下,按照由第一相机参数调整为第二相机参数的方向继续调整第二相机参数,直到满足预设条件;以及在判定第五图像对应的清晰度与第四图像对应的清晰度的差值小于阈值的情况下,按照由第二相机参数调整为第一相机参数的方向继续调整第二相机参数,直到满足预设条件。
11.根据本技术第二方面,本技术实施例提供了一种屏幕缺陷检测方法,包括:获取屏幕的多张图像,多张图像包括第一图像采集装置以目标拍摄角度采集的第一图像和多个第二图像采集装置以其他不同拍摄角度采集的多张第二图像;其中,第一图像采集装置和第二图像采集装置为不同类型的图像采集装置,第二图像采集装置的对焦范围大于第一图像采集装置的对焦范围;以第一图像为基准,将各第二图像与第一图像进行配准;将配准后的各第二图像与第一图像进行融合,得到一张多通道图像;根据多通道图像确定屏幕缺陷。
12.根据本技术第三方面,本技术实施例提供了一种电子设备,包括:至少一个处理器;以及与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器执行如第二方面或第二方面任意实施方式中的屏幕缺陷检测方法。
13.根据本技术第四方面,本技术实施例提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机指令,计算机指令用于使计算机执行如第二方面或第二方面任意实施方式中的屏幕缺陷检测方法。
14.本技术实施例提供的屏幕缺陷检测系统、方法、电子设备及可读存储介质,通过设置第一图像采集装置,用于以目标拍摄角度采集屏幕的第一图像;多个第二图像采集装置,用于以其他不同拍摄角度采集屏幕的多张第二图像;屏幕缺陷检测装置,用于获取第一图像和多张第二图像;以第一图像为基准,将各第二图像与第一图像进行配准;将配准后的各第二图像与第一图像进行融合,得到一张多通道图像;根据多通道图像确定屏幕缺陷;其中,第一图像采集装置和第二图像采集装置为不同类型的图像采集装置,第二图像采集装置的对焦范围大于第一图像采集装置的对焦范围;从而在对屏幕的缺陷进行检测时,不仅可以采用第一图像采集装置采集屏幕的正拍图像,还可以采用对焦范围比第一图像采集装置还要大的第二图像采集,采集屏幕的多角度侧拍图像,保证在更大范围内将屏幕侧拍图
像拍摄清晰,并将多角度侧拍图像和正拍图像进行融合,得到一张各个角度都清晰的多通道图像,然后再基于多通道图像进行缺陷检测,就可以检测到屏幕的所有缺陷,保证屏幕缺陷检测的准确度。
15.上述说明仅是本技术技术方案的概述,为了能够更清楚了解本技术的技术手段,而可依照说明书的内容予以实施,并且为了让本技术的上述和其它目的、特征和优点能够更明显易懂,以下特举本技术的具体实施方式。
附图说明
16.图1为本技术实施例中移轴相机的对焦范围示意图;
17.图2为本技术实施例中一种屏幕缺陷检测系统的结构示意图;
18.图3为本技术实施例中第一图像采集装置和多个第二图像采集装置的俯视图;
19.图4为本技术实施例中第一图像的示意图;
20.图5为本技术实施例中第二图像的示意图;
21.图6为本技术实施例中确定相机参数的目标调整参数的流程示意图;
22.图7为本技术实施例中调焦模型的训练过程示意图;
23.图8为本技术实施例中屏幕缺陷检测方法的流程示意图;
24.图9为本技术实施例中一种电子设备的硬件结构示意图。
具体实施方式
25.为使本技术实施例的目的、技术方案和优点更加清楚,下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本技术一部分实施例,而不是全部的实施例。基于本技术中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本技术保护的范围。
26.屏幕的外观检测,拍摄一直是最重要一环。而有些缺陷由于其特性,在传统的正面拍摄情况下无法拍摄出来,只能从特定的角度拍出。从而对于此类情形,需要对屏幕进行侧面多角度拍摄。而传统的工业相机,由于镜头平面与影像平面平行,被摄体平面也与镜头平面平行,因此,景深范围的前后界限自然也与镜头平面平行,因此,对焦区域有限,无法覆盖屏幕的整个成像区域。而一种新的移轴相机,可以通过调节沙姆环,能够实现镜头平面、影像平面与被摄体平面相交与同一处,如图1所示,使得对焦范围是一个楔形的空间,因此能够实现更大的对焦范围(景深),从而能够保证在更大范围内将屏幕侧面图片拍摄清晰。
27.基于此,本技术实施例提供了一种屏幕缺陷检测系统,如图2所示,包括:
28.第一图像采集装置11,用于以目标拍摄角度采集屏幕12的第一图像;
29.多个第二图像采集装置13,用于以其他不同拍摄角度采集屏幕12的多张第二图像;
30.屏幕缺陷检测装置14,用于获取第一图像和多张第二图像;以第一图像为基准,将各第二图像与第一图像进行配准;将配准后的各第二图像与第一图像进行融合,得到一张多通道图像;根据多通道图像确定屏幕12缺陷;其中,第一图像采集装置和第二图像采集装置为不同类型的图像采集装置,第二图像采集装置13的对焦范围大于第一图像采集装置11的对焦范围。
31.在本技术实施例中,屏幕12为诸如电脑、手机、平板、显示器等电子设备的显示区域。
32.在一些实施例中,如图3所示,第一图像采集装置11设置在屏幕12的正上方,第一图像采集装置11可以为传统的工业相机,目标拍摄角度为正面拍摄角度,即正对屏幕12的角度。第一图像至少具有清晰的屏幕12中间位置图像。
33.在一些实施例中,如图3所示,第二图像采集装置13设置在屏幕12的侧面,例如,前、后、左、右等不同方位。其他不同拍摄角度为区别于正面拍摄角度的不同的侧面拍摄角度。
34.第二图像采集装置13的对焦范围要比第一图像采集装置11的对焦范围要大,从而保证第二图像采集装置13设置在屏幕12的侧面时,对焦区域可以覆盖屏幕12的整个成像区域,从而第二图像采集装置13采集屏幕12的侧拍图像,即第二图像时,可以保证第二图像中具有完整的屏幕12。第二图像至少具有清晰的屏幕12边缘位置图像。
35.屏幕缺陷检测装置14旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。屏幕缺陷检测装置14还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。
36.屏幕缺陷检测装置14与第一图像采集装置11、第二图像采集装置13有线连接或无线连接,本技术实施例不做具体的限定。
37.屏幕缺陷检测装置14在接收到第一图像采集装置11发送的第一图像和第二图像采集装置13发送的多张第二图像后,由于第一图像和多张第二图像是从屏幕12的不同角度拍摄的,因此,可以将第一图像和多张第二图像进行配准,以便后续将第一图像和多张第二图像进行融合。
38.在本技术实施例中,将第一图像和多张第二图像进行配准时,由于第一图像是在屏幕12正面拍摄的图像,如图4所示,因此,第一图像的形状与屏幕12的形状相同或最相近。而多张第二图像是从屏幕12各个侧面拍摄的图像,如图5所示,因此第二图像的形状可能与屏幕12的形状偏离。因此,在本技术实施例中,以第一图像为基准,将各第二图像与第一图像进行配准。
39.为了更好地实现第一图像和各张第二图像的配准,在本技术实施例中,可以在屏幕12中显示标定图案,如图4或5所示,标定图案的对角为可识别图标或者文字等图案,标定图案的边框为直线。
40.将配准后的各第二图像与第一图像进行融合,就得到一张多通道图像。由于第一图像至少具有清晰的屏幕12中间位置图像,第二图像至少具有清晰的屏幕12边缘位置图像,因此,该多通道图像中屏幕12的各个位置均是清晰的。基于该多通道图像进行检测,就可以检测到屏幕12中所有的缺陷。
41.本技术实施例提供的屏幕缺陷检测系统,通过设置第一图像采集装置,用于以目标拍摄角度采集屏幕的第一图像;多个第二图像采集装置,用于以其他不同拍摄角度采集屏幕的多张第二图像;屏幕缺陷检测装置,用于获取第一图像和多张第二图像;以第一图像为基准,将各第二图像与第一图像进行配准;将配准后的各第二图像与第一图像进行融合,得到一张多通道图像;根据多通道图像确定屏幕缺陷;其中,第一图像采集装置和第二图像
采集装置为不同类型的图像采集装置,第二图像采集装置的对焦范围大于第一图像采集装置的对焦范围;从而在对屏幕的缺陷进行检测时,不仅可以采用第一图像采集装置采集屏幕的正拍图像,还可以采用对焦范围比第一图像采集装置还要大的第二图像采集,采集屏幕的多角度侧拍图像,保证在更大范围内将屏幕侧拍图像拍摄清晰,并将多角度侧拍图像和正拍图像进行融合,得到一张各个角度都清晰的多通道图像,然后再基于多通道图像进行缺陷检测,就可以检测到屏幕的所有缺陷,保证屏幕缺陷检测的准确度。
42.在一个可选的实施例中,第二图像采集装置13为移轴相机,移轴相机包括沙姆环,通过调节沙姆环的角度,以调节第二图像采集装置13的对焦范围。
43.在本技术实施例中,由于移轴相机相比普通工业相机,具有更大的对焦范围(景深),从而能够保证在更大范围内将屏幕12侧面图片拍摄清晰,因此,可以直接选定第二图像采集装置13为移轴相机。移轴相机中设置有沙姆环,通过调节沙姆环的角度,使得采用第二图像采集装置13采集屏幕12的第二图像时,既能够覆盖屏幕12的成像区域,又可以得到屏幕12的清晰边缘图像。
44.在一个可选的实施例中,当屏幕12缺陷检测系统的被测物发生了变化,例如,由平板变成了笔记本,则需要及时调整第二图像采集装置13的相机位置、拍摄角度和相机参数。普通工业相机对焦只需要调整相机位置和相机焦距就可以,但是移轴相机需要调整相机位置、相机航向(yaw)角、相机横滚(roll)角、相机俯仰角、沙姆环角度、相机焦距等参数。因此,移轴相机调整对焦十分繁琐困难,不同的对焦范围对应不同的调整方案,不仅需要工程师经验丰富,而且还较难快速调整到所需的对焦效果,同时对焦效果也因人而异。
45.因此,在本技术实施例中,首先可以通过第二图像采集装置13采集屏幕12的多张图像,任意两张图像的相机位置不同和/或拍摄角度不同;根据多张图像中的标定图案确定满足第一条件的目标图像;根据目标图像的相机位置和拍摄角度调整第二图像采集装置13的位置和拍摄角度,以使第二图像采集装置13以调整后的相机位置和拍摄角度采集第二图像。拍摄角度包括相机航向(yaw)角、相机横滚(roll)角。
46.然后,屏幕缺陷检测装置14在将各第二图像与第一图像进行配准之前,屏幕缺陷检测装置14还用于:获得各第二图像的清晰度及对应的相机参数;基于调焦模型对每一张第二图像、该第二图像的清晰度及对应的相机参数进行处理,得到针对该相机参数的目标调整参数;根据目标调整参数调整该第二图像对应的第二图像采集装置13;采用调整后的该第二图像采集装置13重新采集屏幕12图像,得到重新采集的第二图像;重新采集的第二图像满足清晰度条件。
47.在本技术实施例中,如果第二图像采集装置13为移轴相机,则该相机参数包括相机俯仰(pitch)角、沙姆环角度、相机焦距等。屏幕缺陷检测装置14在将各第二图像与第一图像进行配准之前,首先可以基于清晰度检测模型对各第二图像进行处理,得到各第二图像的清晰度。清晰度监测模型可以是提前训练好的。
48.示例性地,基于调焦模型对每一张第二图像、该第二图像的清晰度及对应的相机参数进行处理,得到针对该相机参数的目标调整参数的流程如图6所示,图6中,对角清晰度置信度表征第二图像的清晰度。调焦模型可以是提前训练好的。
49.在本技术实施例中,基于调焦模型生成第二图像采集装置的相机参数的目标调整参数,可以实现对第二图像采集装置的自适应对焦,第二图像采集装置的对焦过程更加高
效、更加鲁棒,即便屏幕缺陷检测过程中,第二图像采集装置被碰动或者被测物发生变化,也仅需要一次调整就可以实现第二图像采集装置的对焦,可以减少第二图像采集装置的对焦时间和对焦的复杂度。
50.在一个可选的实施例中,调焦模型的构建步骤包括:获取训练样本,训练样本包括样本屏幕的多张样本图像,每张样本图像标注有初始相机参数、目标样本调整参数及该样本图像的清晰度;目标样本调整参数为满足清晰度条件的标定图像的标定相机参数与该样本图像的初始相机参数的差值;以样本屏幕的目标拍摄角度的目标图像为基准,将各张样本图像与目标图像进行配准;对于每张配准后的样本图像:将配准后的样本图像输入神经网络,得到对应的初始样本调整参数;将初始样本调整参数、样本图像及标定图像输入生成式对抗网络,得到对应的像素差值;将像素差值及样本图像输入神经网络,得到对应的二次样本调整参数,以训练调焦模型,直到收敛。
51.示例性地,调焦模型的训练过程如图7所示。图7中清晰对焦图片为满足清晰度条件的标定图像。标定图像的清晰度设置为1。图7中未对焦照片为基于目标图像为基准进行配准后的样本图像。初始相机参数包括相机俯仰角、沙姆环角度、相机焦距。对角清晰度置信度表征样本图像的清晰度。
52.对于每张配准后的样本图像:首先输入神经网络,得到对应的初始样本调整参数,样本调整参数包括相机俯仰角差(相机角度差)、相机焦距差、沙姆环角度差。然后将相机角度差、相机焦距差、沙姆环角度差与未对焦照片、清晰对焦图片输入生成式对抗网络(gan),得到与清晰对焦图片的像素差值,将像素差值作为反馈输入神经网络,得到二次样本调整参数,如此反复多次,得到最终的样本调整参数。
53.在本技术实施例中,基于像素差值作为反馈输入神经网络,可以更快、更准确地对神经网络进行训练,得到调焦模型。
54.在一个可选的实施例中,也可以采用实时搜索的方式完成第二图像采集装置13的对焦。首先,屏幕12显示标定图案,针对每个第二图像采集装置13:采用第二图像采集装置13采集屏幕12的多张第三图像,任意两张第三图像的相机位置不同和/或拍摄角度不同;根据多张第三图像中的标定图案确定满足第一条件的目标第三图像;根据目标第三图像的相机位置和拍摄角度调整第二图像采集装置13的位置和拍摄角度。
55.具体地,第一条件可以为屏幕12在第二图像采集装置13中的视野最大,屏幕12在第三图像中是对称的,也即,第三图像的上边缘至屏幕12的上边缘的距离,与第三图像的下边缘至屏幕12的下边缘的距离相等;第三图像的左边缘至屏幕12的左边缘的距离,与第三图像的右边缘至屏幕12的右边缘的距离相等。
56.然后,屏幕缺陷检测装置14在根据目标第三图像的相机位置和拍摄角度调整第二图像采集装置13的位置和拍摄角度之后,屏幕缺陷检测装置14还用于:针对每个第二图像采集装置13:采用第二图像采集装置13采集屏幕12的第四图像及第五图像,第四图像对应第一相机参数,第五图像对应第二相机参数;确定第四图像及第五图像分别对应的清晰度;根据第四图像及第五图像分别对应的清晰度,调整第二相机参数,以使第二图像采集装置13以调整后的第二相机参数采集第二图像。从而可以实时对第二图像采集装置13的相机参数进行调整,使得以调整后的第二相机参数采集的第二图像可以满足清晰度要求。
57.在一个可选的实施方式中,根据第四图像及第五图像分别对应的清晰度,调整第
二相机参数,包括:在判定第五图像对应的清晰度与第四图像对应的清晰度的差值大于或等于阈值的情况下,按照由第一相机参数调整为第二相机参数的方向继续调整第二相机参数,直到满足预设条件;以及在判定第五图像对应的清晰度与第四图像对应的清晰度的差值小于阈值的情况下,按照由第二相机参数调整为第一相机参数的方向继续调整第二相机参数,直到满足预设条件。预设条件可以为以调整后的第二相机参数采集的图像的清晰度最高。从而通过动态调整第二相机参数,可以寻找到一张清晰度最高的图像,保存此时的相机参数即为对焦完成的对焦参数。
58.在本技术实施例中,通过实时对相机位置、拍摄角度及相机参数进行调整,可以实现实时对第二图像采集装置进行对焦,以采集到满足清晰度条件的第二图像。
59.本技术实施例提供了一种屏幕缺陷检测方法,如图8所示,包括:
60.s101,获取屏幕的多张图像,多张图像包括第一图像采集装置以目标拍摄角度采集的第一图像和多个第二图像采集装置以其他不同拍摄角度采集的多张第二图像;其中,第一图像采集装置和第二图像采集装置为不同类型的图像采集装置,第二图像采集装置的对焦范围大于第一图像采集装置的对焦范围。
61.在一些实施例中,第一图像采集装置设置在屏幕的正上方,第一图像采集装置可以为传统的工业相机,目标拍摄角度为正面拍摄角度,即正对屏幕的角度。第一图像至少具有清晰的屏幕中间位置图像。
62.第二图像采集装置设置在屏幕的侧面,例如,前、后、左、右等不同方位。其他不同拍摄角度为区别于正面拍摄角度的不同的侧面拍摄角度。
63.第二图像采集装置的对焦范围要比第一图像采集装置的对焦范围要大,从而保证第二图像采集装置设置在屏幕的侧面时,对焦区域可以覆盖屏幕的整个成像区域,从而第二图像采集装置采集屏幕的侧拍图像,即第二图像时,可以保证第二图像中具有完整的屏幕。第二图像至少具有清晰的屏幕边缘位置图像。
64.s102,以第一图像为基准,将各第二图像与第一图像进行配准。
65.在本技术实施例中,由于第一图像和多张第二图像是从屏幕的不同角度拍摄的,因此,可以将第一图像和多张第二图像进行配准,以便后续将第一图像和多张第二图像进行融合。
66.s103,将配准后的各第二图像与第一图像进行融合,得到一张多通道图像。
67.在本技术实施例中,由于第一图像至少具有清晰的屏幕中间位置图像,第二图像至少具有清晰的屏幕边缘位置图像,因此,该多通道图像中屏幕的各个位置均是清晰的。
68.s104,根据多通道图像确定屏幕缺陷。
69.在本技术实施例中,基于该多通道图像进行检测,就可以检测到屏幕中所以的缺陷。
70.本技术实施例提供的屏幕缺陷检测方法,通过设置第一图像采集装置,用于以目标拍摄角度采集屏幕的第一图像;多个第二图像采集装置,用于以其他不同拍摄角度采集屏幕的多张第二图像;其中,第一图像采集装置和第二图像采集装置为不同类型的图像采集装置,第二图像采集装置的对焦范围大于第一图像采集装置的对焦范围;从而在对屏幕的缺陷进行检测时,不仅可以采用第一图像采集装置采集屏幕的正拍图像,还可以采用对焦范围比第一图像采集装置还要大的第二图像采集,采集屏幕的多角度侧拍图像,保证在
更大范围内将屏幕侧拍图像拍摄清晰,并将多角度侧拍图像和正拍图像进行融合,得到一张各个角度都清晰的多通道图像,然后再基于多通道图像进行缺陷检测,就可以检测到屏幕的所有缺陷,保证屏幕缺陷检测的准确度。
71.在一些实施例中,第二图像采集装置为移轴相机,移轴相机包括沙姆环,通过调节沙姆环的角度,以调节第二图像采集装置的对焦范围。
72.在一些实施例中,在将各第二图像与第一图像进行配准之前,屏幕缺陷检测方法还包括:
73.获得各第二图像的清晰度及对应的相机参数;基于调焦模型对每一张第二图像、该第二图像的清晰度及对应的相机参数进行处理,得到针对该相机参数的目标调整参数;根据目标调整参数调整该第二图像对应的第二图像采集装置;采用调整后的该第二图像采集装置重新采集屏幕图像,得到重新采集的第二图像;重新采集的第二图像满足清晰度条件。
74.在一些实施例中,调焦模型的构建步骤包括:获取训练样本,训练样本包括样本屏幕的多张样本图像,每张样本图像标注有初始相机参数、目标样本调整参数及该样本图像的清晰度;目标样本调整参数为满足清晰度条件的标定图像的标定相机参数与该样本图像的初始相机参数的差值;以样本屏幕的目标拍摄角度的目标图像为基准,将各张样本图像与目标图像进行配准;对于每张配准后的样本图像:将配准后的样本图像输入神经网络,得到对应的初始样本调整参数;将初始样本调整参数、样本图像及标定图像输入生成式对抗网络,得到对应的像素差值;将像素差值及样本图像输入神经网络,得到对应的二次样本调整参数,以训练调焦模型,直到收敛。
75.在一些实施例中,屏幕显示标定图案,在获取多张第二图像之前,屏幕缺陷检测方法还包括:针对每个第二图像采集装置:采用第二图像采集装置采集屏幕的多张第三图像,任意两张第三图像的相机位置不同和/或拍摄角度不同;根据多张第三图像中的标定图案确定满足第一条件的目标第三图像;根据目标第三图像的相机位置和拍摄角度调整第二图像采集装置的位置和拍摄角度。
76.在一些实施例中,在根据目标第三图像的相机位置和拍摄角度调整第二图像采集装置的位置和拍摄角度之后,屏幕缺陷检测方法还包括:针对每个第二图像采集装置:采用第二图像采集装置采集屏幕的第四图像及第五图像,第四图像对应第一相机参数,第五图像对应第二相机参数;确定第四图像及第五图像分别对应的清晰度;根据第四图像及第五图像分别对应的清晰度,调整第二相机参数,以使第二图像采集装置以调整后的第二相机参数采集第二图像。
77.在一些实施例中,根据第四图像及第五图像分别对应的清晰度,调整第二相机参数,包括:在判定第五图像对应的清晰度与第四图像对应的清晰度的差值大于或等于阈值的情况下,按照由第一相机参数调整为第二相机参数的方向继续调整第二相机参数,直到满足预设条件;以及在判定第五图像对应的清晰度与第四图像对应的清晰度的差值小于阈值的情况下,按照由第二相机参数调整为第一相机参数的方向继续调整第二相机参数,直到满足预设条件。
78.根据本技术的实施例,本技术还提供了一种电子设备和一种可读存储介质。
79.图9示出了可以用来实施本技术的实施例的示例电子设备800的示意性框图。电子
设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本技术的实现。
80.如图9所示,设备800包括计算单元801,其可以根据存储在只读存储器(rom)802中的计算机程序或者从存储单元808加载到随机访问存储器(ram)803中的计算机程序,来执行各种适当的动作和处理。在ram 803中,还可存储设备800操作所需的各种程序和数据。计算单元801、rom 802以及ram 803通过总线804彼此相连。输入/输出(i/o)接口805也连接至总线804。
81.设备800中的多个部件连接至i/o接口805,包括:输入单元806,例如键盘、鼠标等;输出单元807,例如各种类型的显示器、扬声器等;存储单元808,例如磁盘、光盘等;以及通信单元809,例如网卡、调制解调器、无线通信收发机等。通信单元809允许设备800通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
82.计算单元801可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元801的一些示例包括但不限于中央处理单元(cpu)、图形处理单元(gpu)、各种专用的人工智能(ai)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(dsp)、以及任何适当的处理器、控制器、微控制器等。计算单元801执行上文所描述的各个方法和处理,例如屏幕缺陷检测方法。例如,在一些实施例中,屏幕缺陷检测方法可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元808。在一些实施例中,计算机程序的部分或者全部可以经由rom 802和/或通信单元809而被载入和/或安装到设备800上。当计算机程序加载到ram 803并由计算单元801执行时,可以执行上文描述的屏幕缺陷检测方法的一个或多个步骤。备选地,在其他实施例中,计算单元801可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行屏幕缺陷检测方法。
83.本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(fpga)、专用集成电路(asic)、专用标准产品(assp)、芯片上系统的系统(soc)、负载可编程逻辑设备(cpld)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
84.用于实施本技术的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
85.在本技术的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可
读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦除可编程只读存储器(eprom或快闪存储器)、光纤、便捷式紧凑盘只读存储器(cd-rom)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
86.为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,crt(阴极射线管)或者lcd(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
87.可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(lan)、广域网(wan)和互联网。
88.计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,也可以为分布式系统的服务器,或者是结合了区块链的服务器。
89.应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发申请中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本技术公开的技术方案所期望的结果,本文在此不进行限制。
90.此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本技术的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
91.以上所述,仅为本技术的具体实施方式,但本技术的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本技术揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本技术的保护范围之内。因此,本技术的保护范围应以所述权利要求的保护范围为准。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献