一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

使用四色滤波阵列传感器进行内容增强的系统和方法与流程

2022-03-23 10:12:14 来源:中国专利 TAG:


1.本公开涉及使用电子装置的图像传感器的内容增强,并且更具体地,涉及用于使用电子装置的四色滤波阵列(qcfa)传感器进行内容增强的系统和方法。


背景技术:

2.通常,电子装置(例如,智能电话)可以利用图像传感器来捕获图像和图像质量。在常规方法中,以高缩放级别缩放的图像的预览导致图像细节的丢失,从而导致模糊且失焦的图像。相应地,在以高缩放级别捕获图像时的图像质量急剧降低。在常规方法中,在使用智能电话的相机应用的实时预览缩放期间,基于缩放比率来裁剪图像传感器的输出图像(实际传感器数据),然后对裁剪图像进行放大。这导致细节丢失,影响预览图像质量。相应地,使用常规方法的预览图像和捕获图像可能是模糊的和/或失焦的。确定图像质量的关键性能指标(kpi)中的一个是捕获图像的清晰度。捕获的图像包含附加的图像细节将是有利的。需要用于实时预览缩放的无损图像质量,即使当缩放级别高时也使得预览图像和捕获图像更清晰且更聚焦。
3.图1示出根据现有技术的使用电子装置的qcfa传感器的数字缩放方法。
4.参照图1,当在qcfa传感器的视场中预览内容时,qcfa传感器以分箱(binning)模式操作。例如,如图1所示,使用64mp qcfa传感器。在预览内容时,qcfa传感器获取64mp的图像数据,并且在分箱模式下,qcfa传感器组合4个相邻像素以创建一个像素。由于4个像素被组合成一个像素,因此最终的传感器输出是传感器尺寸的1/4。如该示例所示,qcfa传感器输出将为16mp(即,实际传感器数据是16mp)。
5.在步骤102,预览内容的缩放级别是1x。在1x缩放级别期间,由于电子装置的显示分辨率为16mp,因此图像处理器提供相同的16mp传感器输出。相应地,在1x缩放级别不存在细节损失。
6.在步骤104,预览内容的缩放级别是2x。在2x缩放级别期间,图像处理器裁剪qcfa传感器输出16mp的中心部分。也就是说,宽度的一半和高度的一半被裁剪,从而产生4mp图像数据(16mp/4=4mp)。在该示例中,由于电子装置的显示分辨率为16mp,因此电子装置不能保存4mp图像数据。相应地,图像处理器将4mp图像数据放大到16mp图像数据,从而导致2x缩放级别的细节丢失。
7.在步骤106,预览内容的缩放级别是8x。在8x缩放级别期间,图像处理器将qcfa传感器输出16mp裁剪为宽度的1/8和高度的1/8,从而产生0.25mp图像数据(即,16mp/64=0.25mp)。在该示例中,由于电子装置的显示分辨率为16mp,因此电子装置不能保存0.25mp图像数据。相应地,图像处理器将0.25mp图像数据放大到16mp图像数据,导致在8x缩放级别的细节严重丢失。类似地,随着缩放级别增大,来自图像处理器的图像数据变得越来越模糊和/或失真。
8.图2示出根据现有技术的用于放大正在预览的内容的实现流程的框图。
9.参照图2,在常规系统中,当用户通过使用电子装置的相机应用放大正在预览的内
容时,相机应用基于正在预览的内容的缩放级别向缩放控制块发送缩放值。缩放值显示关于用户想要放大的矩形的四个角的信息。缩放控制块基于从相机应用接收的缩放值将裁剪参数转换到图像处理器,并且图像处理器裁剪用户可能想要放大的内容。在常规系统中,即使当预览的内容的缩放级别增大时,缩放控制块也不具有输出无损图像或清晰且聚焦的图像的智能。
10.鉴于以上情况,期望解决上述缺陷或其他缺点。


技术实现要素:

11.技术问题
12.根据本公开的特定实施例的一个目的是提供一种用于使用qcfa传感器进行内容增强的系统和方法。
13.根据本公开的特定实施例的另一目的是:在电子装置的第一qcfa传感器的视场中预览内容,其中,第一qcfa传感器正在第一模式下操作。
14.根据本公开的特定实施例的另一目的是检测预览的内容的缩放级别是否满足第一缩放级别标准以及预览的内容的光条件是否满足光标准。
15.根据本公开的特定实施例的另一目的是:响应于检测到在第一qcfa传感器的视场中预览的内容的缩放级别满足第一缩放级别标准并且在第一qcfa传感器的视场中预览的内容的光条件满足光标准,将第一qcfa传感器配置为从第一模式切换到第二模式,以增强在第一qcfa传感器的视场中预览的内容的分辨率。
16.根据本公开的特定实施例的另一目的是:响应于检测到在第一qcfa传感器的视场中预览的内容的缩放级别不满足第一缩放级别标准和在第一qcfa传感器的视场中预览的内容的光条件不满足光标准中的至少一个,将第一qcfa传感器保持在第一模式。
17.根据本公开的特定实施例的另一目的是:显示在第一qcfa传感器的视场中的增强的内容。
18.以上信息仅作为背景信息呈现,以帮助理解本公开。对于以上内容中的任何一个是否可以作为关于本公开的现有技术适用,没有做出任何确定,也没有做出断言。
19.技术方案
20.相应地,这里的实施例公开了一种使用电子装置的qcfa传感器进行内容增强的系统和方法。实施例包括在电子装置的第一qcfa传感器的视场中预览内容,其中,第一qcfa传感器正在第一模式下操作。此外,特定实施例包括检测预览的内容的缩放级别是否满足第一缩放级别标准,以及预览的内容的光条件是否满足光标准。此外,特定实施例包括响应于检测到在第一qcfa传感器的视场中预览的内容的缩放级别满足第一缩放级别标准并且在第一qcfa传感器的视场中预览的内容的光条件满足光标准,将第一qcfa传感器配置为从第一模式切换到第二模式,以增强在第一qcfa传感器的视场中预览的内容的分辨率。此外,特定实施例包括响应于检测到在第一qcfa传感器的视场中预览的内容的缩放级别不满足第一缩放级别标准以及在第一qcfa传感器的视场中预览的内容的光条件不满足光标准中的至少一个,将第一qcfa传感器保持在第一模式。此外,实施例包括显示在第一qcfa传感器的视场中的增强的内容。
21.在实施例中,在将第一qcfa传感器配置为切换到第二模式之后,该方法还包括在
第一qcfa传感器的视场中预览内容,其中,第一qcfa传感器正在第二模式下操作。该方法还包括确定预览的内容的缩放级别满足第二缩放级别标准。
22.在实施例中,该方法还包括在确定预览的内容的缩放级别满足第二缩放级别标准时在第二qcfa传感器的视场中预览内容,其中,第二qcfa传感器正在第一模式下操作。该方法还包括检测在第二qcfa传感器的视场中预览的内容的缩放级别是否满足第三缩放级别标准,以及在第二qcfa传感器的视场中预览的内容的光条件是否满足光标准。该方法还包括响应于检测到在第二qcfa传感器的视场中预览的内容的缩放级别满足第三缩放级别标准并且在第二qcfa传感器的视场中预览的内容的光条件满足光标准,将第二qcfa传感器配置为从第一模式切换到第二模式,以增强在第二qcfa传感器的视场中预览的内容的分辨率。该方法还包括响应于检测到在第二qcfa传感器的视场中预览的内容的缩放级别不满足第三缩放级别标准以及在第二qcfa传感器的视场中预览的内容的光条件不满足光标准中的至少一个,将第二qcfa传感器保持在第一模式。该方法还包括显示在第二qcfa传感器的视场中的增强的内容。
23.在实施例中,将第一qcfa传感器配置为切换到第二模式的步骤包括:将第一qcfa传感器从第一模式切换到第二模式。该方法还包括在第一qcfa传感器的预览场中预览内容,其中,第一qcfa传感器正在第二模式下操作。该方法还包括在两个维度上将在第一qcfa传感器的第二模式下预览的内容中心裁剪为一半。
24.在实施例中,显示在第一qcfa传感器的视场的增强的内容的步骤包括:增强第一qcfa传感器的预览场中的中心裁剪的内容,其中,第一qcfa传感器正在第二模式下操作。该方法还包括显示在第一qcfa传感器的视场中的增强的内容。
25.在实施例中,将第二qcfa传感器配置为切换到第二模式的步骤包括:将第二qcfa传感器从第一模式切换到第二模式。该方法还包括:在第二qcfa传感器的预览场中预览内容,其中,第二qcfa传感器正在第二模式下操作;将在第二qcfa传感器的第二模式下预览的内容在两个维度上中心裁剪为一半。
26.在实施例中,其中,显示在第二qcfa传感器的视场中的增强的内容的步骤包括:增强第二qcfa传感器的预览场中的中心裁剪的内容,其中,第二qcfa传感器正在第二模式下操作。该方法还包括显示在第二qcfa传感器的视场中的增强的内容。
27.当结合以下描述和附图考虑时,将更好地领会和理解这里实施例的这些和其他方面。然而,应当理解,以下描述虽然指示了优选实施例及其许多具体细节,但是是通过说明而非限制的方式给出的。在不脱离本发明的精神的情况下,可以在这里的实施例的范围内进行许多改变和修改,并且这里的实施例包括所有这些修改。
28.本发明的有益效果
29.提出的用于使用电子装置的qcfa传感器进行内容增强的方法可以以2x的缩放级别以及高于2x的缩放级别输出无损图像质量,从而产生高细节图像。在提出的方法中,缩放级别2x和缩放级别2x以上的预览图像和捕获图像更清晰且更聚焦。当图像的主题或图像的内容清晰时,图像看起来清晰,并且可以传达附加细节,从而实现qcfa传感器的视场中的内容增强(高细节图像)。通过使用多个qcfa传感器,8x缩放级别的进一步的无损图像是可能的。
附图说明
30.为了更完整地理解本公开及其优点,现在参考结合附图进行的以下描述,其中,相同的附图标号表示相同的部分:
31.图1示出根据现有技术的使用电子装置的qcfa传感器的数字缩放方法;
32.图2示出根据现有技术的用于放大预览的内容的实现流程的框图;
33.图3a和3b示出根据本公开的特定实施例的qcfa传感器的不同模式的示意图;
34.图4示出根据本公开的特定实施例的示出qcfa传感器的拜耳图像再生成(remosaic)裁剪模式的示意图;
35.图5示出根据本公开的特定实施例的使用qcfa传感器进行内容增强的方法和使用电子装置的qcfa传感器进行数字缩放的方法;
36.图6示出根据本公开的特定实施例的用于使用qcfa传感器进行内容增强的电子装置的框图;
37.图7a示出根据本公开的特定实施例的用于使用qcfa传感器进行内容增强的方法的流程图;
38.图7b示出根据本公开的特定实施例的用于在将第一qcfa传感器配置为切换到第二模式之后进行内容增强的方法的流程图;
39.图8示出根据本公开的特定实施例的用于放大正在预览的内容的实现流程的框图;
40.图9示出根据本公开的特定实施例的示出基于在qcfa传感器的视场中预览的内容的缩放级别和在qcfa传感器的视场中预览的内容的光条件来转换qcfa传感器模式的示意图;
41.图10示出根据本公开的特定实施例的基于在qcfa传感器的视场中预览的内容的缩放级别和在qcfa传感器的视场中预览的内容的光条件来切换qcfa传感器的模式的流程图;
42.图11a和图11b示出根据本公开的特定实施例的示出在使用现有技术和提出的方法以大于2.0x的缩放级别预览图像时的图像质量的示例场景;
43.图12a和图12b示出根据本公开的特定实施例的示出在使用现有技术和提出的方法以大于2.0x的缩放级别捕获图像时的图像质量的示例场景;
44.图13a和图13b示出根据本公开的特定实施例的示出多个qcfa传感器获得8x缩放级别的无损图像的示意图;
45.图14a和图14b示出根据本公开的特定实施例的示出使用现有技术方法和提出的方法的在100x下的数字缩放解决方案增强的示例场景;
46.图15a和图15b示出根据本公开的特定实施例的使用现有技术方法和提出的方法的数字缩放解决方案增强以缩放级别30x捕获的图像的示例;以及
47.图16a和图16b示出根据本公开的特定实施例的使用现有技术和提出的方法的数字缩放解决方案增强以缩放级别100x捕获的图像的示例。
具体实施方式
48.在进行下面的详细描述之前,阐述贯穿本专利文件使用的特定词语和短语的定义
可能是有利的:术语“包括”和“包含”及其派生词表示包括但不限于;术语“或”是包含性的,表示和/或;短语“与...相关联”和“与其相关联”及其派生词可以表示包括、被包括在...内、与...互连、包含、被包含在...内、连接到

或与...连接、耦接到

或与...耦接、可与...通信、与...协作、交错、并置、接近于、绑定到

或与...绑定、具有、具有...的性质等;并且术语“控制器”表示控制至少一个操作的任何装置、系统或其部分,这样的装置可以以硬件、固件或软件或其中至少两个的某种组合来实现。应当注意,与任何特定控制器相关联的功能可以是集中式的或分布式的,无论是本地的还是远程的。
49.此外,下面描述的各种功能可以由一个或更多个计算机程序实现或支持,每个计算机程序由计算机可读程序代码形成并实现在计算机可读介质中。术语“应用”和“程序”是指适于在合适的计算机可读程序代码中实现的一个或更多个计算机程序、软件组件、指令集、进程、功能、对象、类、示例、相关数据或其一部分。短语“计算机可读程序代码”包括任何类型的计算机代码(包括源代码、目标代码和可执行代码)。短语“计算机可读介质”包括能够由计算机访问的任何类型的介质(诸如只读存储器(rom)、随机存取存储器(ram)、硬盘驱动器、光盘(cd)、数字视频光盘(dvd)或任何其他类型的存储器)。“非暂时性”计算机可读介质不包括传输暂时性电信号或其他信号的有线、无线、光学或其他通信链路。非暂时性计算机可读介质包括可以永久存储数据的介质和可以存储数据并稍后重写的介质(诸如可重写光盘或可擦除存储器装置)。
50.贯穿本专利文件提供了对特定词语和短语的定义,本领域普通技术人员应当理解,在许多情况下(如果不是大多数情况),这样的定义适用于这样定义的词语和短语的先前以及将来的使用。
51.下面讨论的图1至图16b以及用于描述本专利文件中的本公开的原理的各种实施例仅是说明性的,并且不应以任何方式解释为限制本公开的范围。本领域技术人员将理解,本公开的原理可以在任何适当布置的系统或装置中实现。
52.参考在附图中示出并在以下描述中详述的非限制性实施例,更全面地解释这里的实施例及其各种特征和有利细节。省略了对公知组件和处理技术的描述,以免不必要地模糊这里的实施例。此外,因为一些实施例可以与一个或更多个其他实施例组合以形成新的实施例,所以这里描述的各种实施例不一定是相互排斥的。除非另有说明,否则如这里所用的术语“或”是指非排他性的“或”。这里使用的示例仅旨在便于理解可以实践这里的实施例的方式,并且进一步使本领域技术人员能够实践这里的实施例。相应地,示例不应被解释为限制这里的实施例的范围。
53.如本领域中传统的,可以根据执行所描述的一个或更多个功能的块来描述和示出实施例。这些块(在这里可以被称为单元或模块等)由模拟或数字电路(诸如逻辑门、集成电路、微处理器、微控制器、存储器电路、无源电子部件、有源电子部件、光学部件、硬连线电路等)物理地实现,并且可以可选地由固件和软件驱动。例如,电路可以实现在一个或更多个半导体芯片中,或者实现在基板支撑件(诸如印刷电路板等)上。构成块的电路可以由专用硬件实现,或者由处理器(例如,一个或更多个编程的微处理器和相关联的电路)实现,或者由执行块的一些功能的专用硬件和执行块的其他功能的处理器的组合实现。在不脱离本公开的范围的情况下,实施例的每个块可以物理地分成两个或更多个相互作用和离散的块。同样地,在不脱离本公开的范围的情况下,实施例的块可以物理地组合成更复杂的块。
54.附图用于帮助容易地理解各种技术特征,并且应当理解,这里呈现的实施例不受附图的限制。因此,本公开应当被解释为扩展到除了在附图中特别阐述的那些之外的任何改变、等同和替代。尽管这里可以使用术语第一、第二等来描述各种元件,但是这些元件不应受这些术语的限制。这些术语通常仅用于将一个元件与另一元件区分开。
55.根据本公开的特定实施例公开了用于使用电子装置的qcfa传感器进行内容增强的系统和方法。实施例包括在电子装置的第一qcfa传感器的视场中预览内容,其中,第一qcfa传感器正在第一模式下操作。此外,实施例包括检测预览的内容的缩放级别是否满足第一缩放级别标准以及预览的内容的光条件是否满足光标准。此外,实施例包括:响应于检测到在第一qcfa传感器的视场中预览的内容的缩放级别满足第一缩放级别标准并且在第一qcfa传感器的视场中预览的内容的光条件满足光标准,将第一qcfa传感器配置为从第一模式切换到第二模式,以增强在第一qcfa传感器的视场中预览的内容的分辨率。此外,实施例包括:响应于检测到在第一qcfa传感器的视场中预览的内容的缩放级别不满足第一缩放级别标准和在第一qcfa传感器的视场中预览的内容的光条件不满足光标准中的至少一个,将第一qcfa传感器保持在第一模式。此外,实施例包括:显示在第一qcfa传感器的视场中的增强的内容。
56.现在参照附图,并且更具体地,参照图3至图16的说明性示例。在类似的附图标号在整个附图中一致地表示对应的特征的情况下,在特定实施例中示出这些特征。
57.图3a和图3b示出根据这里公开的实施例的qcfa传感器的不同模式的示意图。
58.图3a示出qcfa传感器的第一模式的示例。这可以是可以在暗光场景中生成更亮的图像的分箱模式。在暗光场景中,qcfa传感器以分箱模式操作。在以qcfa传感器的分箱模式操作的暗光场景中,图像的4个相邻像素可以组合成一个像素,从而显示更低分辨率、更少噪声、更亮的图像。由于4个像素被组合成一个,因此最终的传感器输出是传感器尺寸的1/4。如图3a所示,在预览内容时,qcfa传感器获取64mp的图像数据。在分箱模式下,qcfa传感器可组合4个相邻像素以产生一个像素。在图3a所示的示例中,qcfa传感器输出将为16mp(即,实际传感器数据是16mp)。
59.图3b示出qcfa传感器的第二模式的示例。该示例可以是在拜耳图像再生成模式下操作,其中,拜耳图像再生成模式可在亮光场景中生成全分辨率输出。在亮光场景中,qcfa传感器的全分辨率拜耳图像再生成模式可以输出qcfa传感器的全兆像素能力。在该示例中,qcfa传感器可以在亮光场景中提供改进的兆像素图像。如图3b的示例所示,在捕获图像内容时,qcfa传感器获取64mp的图像数据;并且在全分辨率拜耳图像再生成模式下,qcfa传感器输出将为64mp(即,实际传感器数据为64mp)。
60.在现有系统中,在qcfa传感器的视场中预览内容时,qcfa传感器以分箱模式操作。与现有系统不同,在根据本公开的至少一种方法中,qcfa传感器可以被配置为当预览的内容的缩放级别满足缩放级别标准并且预览的内容的光条件满足光标准时,从分箱模式切换到全分辨率拜耳图像再生成模式。例如,缩放级别标准可以是2x的缩放,并且光标准可以是环境光标准。当在qcfa传感器的视场中预览的内容的缩放级别满足2x缩放并且在qcfa传感器的视场中预览的内容的光条件满足光标准(即,环境光标准(正常光或亮光))时,qcfa传感器从分箱模式切换到全分辨率拜耳图像再生成模式。提出的使用电子装置600的qcfa传感器的内容增强方法(参见例如图6)可以在2x及以上的缩放级别下生成无损图像质量,从
而产生高细节图像。在该提出的方法中,缩放级别为2x和2x以上的预览图像和捕获图像可以更清晰且更好地聚焦。当图像的主题或图像的内容清晰时,图像看起来更清晰,并且图像可以传达附加细节,从而在qcfa传感器的视场中提供增强的内容(高细节图像)。
61.图4示出根据本公开的特定实施例的qcfa传感器的拜耳图像再生成裁剪模式的示意图。
62.参照图4的说明性示例,在提出的方法中,公开了使用qcfa传感器进行内容增强的新模式(例如,拜耳图像再生成裁剪模式)。
63.在图4的拜耳图像再生成裁剪模式的说明性示例中,当预览的内容的缩放级别满足缩放级别标准并且预览的内容的光条件满足光标准时,电子装置600可以将qcfa传感器从分箱模式切换到拜耳图像再生成模式。qcfa传感器硬件可以在qcfa传感器的拜耳图像再生成模式下在两个维度上将图像内容中心裁剪一半(即,宽度的一半和高度的一半被裁剪)。
64.在图4的拜耳图像再生成裁剪模式的说明性示例中,首先,qcfa传感器被配置为拜耳图像再生成模式,并且qcfa传感器硬件通过配置qcfa传感器的裁剪寄存器设置来输出拜耳图像再生成模式的中心裁剪输出。由于宽度的1/2和高度的1/2被裁剪,因此最终的qcfa传感器输出是传感器尺寸的1/4,但是视场被放大了2倍。如图4所示,当预览的内容的缩放级别满足缩放级别标准并且预览的内容的光条件满足光标准时,qcfa传感器开始以全分辨率拜耳图像再生成模式操作。qcfa传感器获取64mp的图像数据,并且在全分辨率拜耳图像再生成模式下,实现拜耳编码,从而产生64mp全分辨率图像。qcfa传感器硬件裁剪64mp图像的中心部分。当qcfa传感器硬件将图像的中心部分裁剪宽度的1/2和高度的1/2时,qcfa传感器自动生成2x缩放图像作为输出。如图4的示例中所示,qcfa传感器输出为16mp。因此,在该示例的新模式(即,拜耳图像再生成裁剪模式)下,qcfa传感器输出是裁剪的2x缩放图像。此外,在高于2x的缩放级别下,电子装置600的图像处理器660(参见例如图6)基于缩放级别进一步裁剪qcfa传感器的2x缩放图像输出。
65.图5示出根据本公开的特定实施例的使用qcfa传感器进行内容增强的方法的框图,并且还示出使用电子装置600的qcfa传感器进行数字缩放的方法。
66.参照图5的说明性示例,当在qcfa传感器的视场中预览的内容的缩放级别为1x缩放级别时,qcfa传感器以第一模式(分箱模式)操作。例如,如图5所示,使用64mp qcfa传感器。在预览内容时,qcfa传感器获取64mp的图像数据,并且在分箱模式下,qcfa传感器组合4个相邻像素以产生一个像素。由于4个像素被组合成一个像素,因此最终的传感器输出是传感器尺寸的1/4。这里,如通过示例所示,qcfa传感器输出将是16mp(即,实际传感器数据是16mp)。
67.在1x缩放级别期间(在步骤502),由于电子装置600的显示分辨率为16mp,因此图像处理器660输出相同的16mp传感器输出。相应地,在1x缩放级别不存在细节损失。
68.当在电子装置600的qcfa传感器的视场中预览内容时,qcfa传感器正在分箱模式下操作。现在,当预览的内容的缩放级别满足缩放级别标准并且预览的内容的光条件满足光标准时,电子装置600被配置为将qcfa传感器从分箱模式切换到拜耳图像再生成模式。例如,缩放级别标准可以是2x缩放级别,并且光标准可以是环境光标准(正常光或亮光)。图像内容在拜耳图像再生成模式下被预览。qcfa传感器硬件在qcfa传感器的拜耳图像再生成模
式下在两个维度(即,长度和宽度)上将图像内容中心裁剪一半。因此,在拜耳图像再生成裁剪模式下,qcfa传感器硬件通过配置qcfa传感器的裁剪寄存器设置来输出拜耳图像再生成模式的中心裁剪输出。由于宽度的1/2和高度的1/2被裁剪,因此最终的qcfa传感器输出是传感器尺寸的1/4,但是视场被放大了2倍。
69.如图5的示例中所示,当在qcfa传感器的视场中预览的内容的缩放级别处于2x缩放级别并且预览的内容的光条件满足光标准时,电子装置600可以将qcfa传感器从分箱模式切换到拜耳图像再生成模式。在这种情况下,qcfa传感器获取64mp的图像数据,并且在全分辨率拜耳图像再生成模式下,实现拜耳编码,从而产生64mp全分辨率图像。qcfa传感器硬件可以裁剪64mp图像的中心部分。当qcfa传感器硬件以宽度的1/2和高度的1/2裁剪图像的中心部分时,qcfa传感器自动生成2x缩放图像作为输出。如图5中所示,qcfa传感器输出为16mp,并且qcfa传感器输出为2x缩放图像。
70.在2x缩放级别期间(步骤504),由于电子装置600的显示分辨率为16mp,因此图像处理器660输出相同的16mp传感器输出。换句话说,在2x缩放级别不存在细节损失。可以保存16mp传感器输出。电子装置600以2x缩放级别输出无损图像。
71.在提出的方法中,在高于2x的缩放级别下,电子装置600的图像处理器660基于缩放级别进一步裁剪qcfa传感器的2x缩放图像输出。
72.如图5中所示,在步骤506,在qcfa传感器的视场中预览的内容的缩放级别是8x,并且预览的内容的光条件满足配置的光标准。在该示例中,由于在qcfa传感器的视场中预览的内容的缩放级别超过2x缩放级别,并且预览的内容的光条件满足光标准,因此qcfa传感器自动提供2x缩放图像作为输出。如图5中所示,qcfa传感器输出为16mp,qcfa传感器输出为2x缩放图像。在8x缩放级别期间,电子装置600的图像处理器660进一步裁剪2x缩放传感器输出。图像处理器660将qcfa传感器输出16mp进一步裁剪高度的1/4和1/4,从而产生1mp图像数据(16mp/16=1mp)。由于电子装置600的显示分辨率为16mp,因此图像处理器660将1mp图像数据放大为16mp图像数据。
73.如提出的方法中所示,qcfa传感器硬件输出2x缩放图像作为最终qcfa传感器输出。因此,在2x缩放级别下,不需要缩放和放大由电子装置600的图像处理器660输出的最终qcfa传感器。如图5中所示,从qcfa传感器硬件接收的16mp图像数据由电子装置600显示。与现有系统不同,在2x缩放级别不需要裁剪和放大。相应地,在提出的方法中用于实时预览缩放的图像质量更好,并且预览图像和捕获图像是清晰且聚焦的。
74.与现有系统不同,在提出的方法中,不是以8x缩放级别将0.25mp图像数据放大到16mp,而是以8x缩放级别将1mp图像数据放大到16mp。相应地,在提出的方法中改进了实时预览缩放的图像质量,并且预览图像和捕获图像两者都更清晰且更聚焦。类似地,随着缩放级别增大,与现有系统不同,提出的方法中的实时预览缩放的图像质量得到改善,并且预览图像和捕获图像更清晰且更聚焦。
75.图6示出根据本公开的特定实施例的用于使用qcfa传感器进行内容增强的电子装置600的框图。
76.电子装置600的示例包括但不限于移动电话、智能电话、平板电脑、手持设备、膝上型电脑、计算机、可穿戴计算装置、物联网(iot)装置、相机、网络相机、数字单反(dslr)相机、视频相机、数字相机、无镜相机、静态相机等。电子装置600还可以包括用于预览和捕获
媒体或图像的用户应用界面和相机应用。相机应用可以用于开发图形用户界面(gui)。电子装置600可以包括两个图像传感器、三个图像传感器、四个图像传感器等中的至少一个。图像传感器的示例可以是qcfa传感器。
77.参照图6的说明性示例,电子装置600包括通信器610、存储器620、处理器630、内容增强单元640、传感器650和图像处理器660。传感器650可以是图像传感器(例如qcfa传感器)。图像处理器660(也称为图像信号处理器(isp)660)是电子装置600中用于图像处理的专用数字信号处理器。电子装置600可以包括多于一个传感器650(诸如第一qcfa传感器和第二qcfa传感器)。
78.通信器610可以被配置为经由一个或更多个网络在内部单元和外部装置之间进行内部通信。存储器620可以包括一个或更多个计算机可读存储介质。存储器620可以包括非易失性存储元件。这种非易失性存储元件的示例可以包括磁性硬盘、光盘、软盘、闪存或电可编程存储器(eprom)或电可擦除可编程(eeprom)存储器的形式。另外,在一些示例中,存储器620可以被认为是非暂时性存储介质。术语“非暂时性”可以指示存储介质不实现在载波或传播信号中。然而,术语“非暂时性”不应被解释为存储器620是不可移动的。在一些示例中,存储器620可以被配置为存储比存储器620更大量的信息。在某些示例中,非暂时性存储介质(例如,在随机存取存储器(ram)或高速缓冲存储器中)可存储可随时间改变的数据。
79.处理器630可以耦接到存储器620和通信器610;并且处理器630可以通信地耦接到内容增强单元640、传感器650和图像处理器660。处理器630可以被配置为在电子装置600的第一qcfa传感器的视场中预览内容,其中,第一qcfa传感器正在第一模式下操作。例如,第一模式可以是qcfa传感器的分箱模式。
80.处理器630可以被配置为检测预览的内容的缩放级别是否满足第一缩放级别标准以及预览的内容的光条件是否满足光标准。例如,第一缩放级别标准可以是在第一qcfa传感器的视场中预览的内容的2x缩放级别。光标准可以是环境光标准(例如,正常光或亮光)。
81.在检测到在第一qcfa传感器的视场中预览的内容的缩放级别满足第一缩放级别标准并且在第一qcfa传感器的视场中预览的内容的光条件满足光标准时,处理器630被配置为将第一qcfa传感器从第一模式切换到第二模式,以便增强在第一qcfa传感器的视场中预览的内容的分辨率。例如,第二模式可以是qcfa传感器的拜耳图像再生成模式。
82.在检测到在第一qcfa传感器的视场中预览的内容的缩放级别不满足第一缩放级别标准和在第一qcfa传感器的视场中预览的内容的光条件不满足光标准中的至少一个时,处理器630被配置为将第一qcfa传感器保持在第一模式。处理器630还被配置为显示在第一qcfa传感器的视场中的增强的内容。
83.在将第一qcfa传感器配置为切换到第二模式之后,处理器630还被配置为在第一qcfa传感器的视场中预览内容,其中,第一qcfa传感器正在第二模式下操作。处理器630可以被配置为确定预览的内容的缩放级别满足第二缩放级别标准。例如,第二缩放级别标准可以是4x缩放级别。处理器630还可以被配置为激活第二qcfa传感器,其中,第二qcfa传感器正在第一模式下操作。例如,第一qcfa传感器可以是广角传感器,并且第二qcfa传感器可以是长焦传感器。
84.处理器630可以被配置为在电子装置600的第二qcfa传感器的视场中预览内容,其中,第二qcfa传感器正在第一模式下操作。处理器630还可以被配置为检测预览的内容的缩
放级别是否满足第三缩放级别标准以及预览的内容的光条件是否满足光标准。例如,第三缩放级别标准可以是8x缩放级别。光标准可以是环境光标准(例如,正常光或亮光)。
85.处理器630在检测到在第二qcfa传感器的视场中预览的内容的缩放级别满足第三缩放级别标准并且在第二qcfa传感器的视场中预览的内容的光条件满足光标准时可以被配置为将第二qcfa传感器从第一模式切换到第二模式,以增强在第二qcfa传感器的视场中预览的内容的分辨率。
86.在检测到在第二qcfa传感器的视场中预览的内容的缩放级别不满足第三缩放级别标准和在第二qcfa传感器的视场中预览的内容的光条件不满足光标准中的至少一个时,处理器630可以被配置为将第二qcfa传感器保持在第一模式。处理器630还被配置为显示在第二qcfa传感器的视场中的增强的内容。
87.尽管图6的说明性示例示出电子装置600的硬件元件,但是应当理解,其他实施例不限于此。例如,在其他实施例中,电子装置600可以包括更少或更多数量的元件。此外,元件的标记或名称仅用于说明性目的,并且不应以任何方式解释为限制本公开的范围。可以将一个或更多个组件组合在一起,以执行使用电子装置600的qcfa传感器进行内容增强的相同或基本相似的功能。
88.图7a示出根据本公开的特定实施例的用于使用qcfa传感器进行内容增强的方法的流程700的流程图。
89.参照图7a的说明性示例,在步骤710,该方法可以包括在电子装置600的第一qcfa传感器的视场中预览内容,其中,第一qcfa传感器正在第一模式下操作。在步骤720,该方法可以包括检测预览的内容的缩放级别是否满足第一缩放级别标准以及预览的内容的光条件是否满足光标准。在步骤730,在检测到在第一qcfa传感器的视场中预览的内容的缩放级别满足第一缩放级别标准时,并且在检测到在第一qcfa传感器的视场中预览的内容的光条件满足光标准时,该方法还可以包括:将第一qcfa传感器配置为从第一模式切换到第二模式,以增强在第一qcfa传感器的视场中预览的内容的分辨率。在步骤740,在检测到在第一qcfa传感器的视场中预览的内容的缩放级别不满足第一缩放级别标准以及在第一qcfa传感器的视场中预览的内容的光条件不满足光标准中的至少一个时,该方法可以包括将第一qcfa传感器保持在第一模式。该方法还可以包括显示在第一qcfa传感器的视场中的增强的内容。
90.该方法中的各种动作、行动、块、步骤等可以以所呈现的顺序、以不同的顺序或同时执行。此外,在一些实施例中,在不脱离本发明的范围的情况下,可以省略、添加、修改、跳过等一些动作、行动、块、步骤等。
91.图7b示出根据本公开的特定实施例的用于在配置第一qcfa传感器以切换到第二模式之后进行内容增强的方法的流程730的流程图。
92.参照图7b的说明性示例,在步骤731,该方法可以包括在第一qcfa传感器的视场中预览内容,其中,第一qcfa传感器正在第二模式下操作。在步骤732,该方法可以包括确定正在预览的内容的缩放级别是否满足第二缩放级别标准。在步骤733,该方法可以包括激活第二qcfa传感器,其中,第二qcfa传感器正在第一模式下操作。在步骤734,该方法还可以包括在电子装置600的第二qcfa传感器的视场中预览内容,其中,第二qcfa传感器正在第一模式下操作。在步骤735,该方法可以包括检测正在预览的内容的缩放级别是否满足第三缩放级
别标准以及预览的内容的光条件是否满足光标准。在步骤736,在检测到在第二qcfa传感器的视场中预览的内容的缩放级别满足第三缩放级别标准并且检测到在第一qcfa传感器的视场中预览的内容的光条件满足光标准时,该方法还包括将第二qcfa传感器配置为从第一模式切换到第二模式,以增强在第二qcfa传感器的视场中预览的内容的分辨率。在步骤737,在检测到在第二qcfa传感器的视场中预览的内容的缩放级别不满足第三缩放级别标准和在第二qcfa传感器的视场中预览的内容的光条件不满足光标准中的至少一个时,该方法可以包括将第二qcfa传感器保持在第一模式。该方法还包括显示在第二qcfa传感器的视场中的增强的内容。
93.该方法中的各种动作、行动、块、步骤等可以以所呈现的顺序、以不同的顺序或同时执行。此外,在一些实施例中,在不脱离本发明的范围的情况下,可以省略、添加、修改、跳过等一些动作、行动、块、步骤等。
94.图8示出根据本公开的特定实施例的用于放大预览的内容的实现流程的框图。参照图8的说明性示例,用户可以在电子装置600的qcfa传感器的视场中预览内容。每当用户使用电子装置600的相机应用放大正在预览的内容时,相机应用可以基于正在预览的内容的缩放级别向智能缩放控制块发送缩放值。缩放值输出关于用户可能想要缩放的矩形的四个角的信息(即,矩形的四个角的坐标)。3a块可以计算在qcfa传感器的视场中预览的内容的勒克斯指数。在提出的方法中,如图8所示,在计算勒克斯指数之后,3a块可以向智能缩放控制块发送勒克斯值。勒克斯值可使智能缩放控制块能够确定环境光条件。基于从相机应用接收到的缩放值和从3a块接收到的勒克斯值,智能缩放控制块可以检查从相机应用接收到的缩放值(即,预览的内容的缩放级别)是处于2x缩放级别还是高于2x缩放级别。智能缩放控制块还可以检查从3a块接收的勒克斯值(即,在qcfa传感器的视场中预览的内容的光条件)是弱光,是正常光,是亮光,还是其他。
95.如果qcfa传感器正在第一模式下操作,则在检查缩放值和勒克斯值之后,智能缩放控制块可以确定是将qcfa传感器从第一模式(例如,分箱模式)切换到第二模式(例如,拜耳图像再生成模式),还是将qcfa传感器保持在第一模式(分箱模式)。类似地,在提出的方法中,如果qcfa传感器正在第二模式下操作,则智能缩放控制块确定是将qcfa传感器从第二模式(拜耳图像再生成模式)切换到第一模式(分箱模式),还是将qcfa传感器保持在第二模式(分箱模式)。
96.依据缩放值和勒克斯值,如果qcfa传感器需要被从第一模式切换到第二模式或从第二模式切换到第一模式,则智能缩放控制块向qcfa传感器发送命令以切换模式,从而qcfa传感器切换其模式。智能缩放控制块还根据从相机应用接收的缩放值向图像处理器660发送关于在qcfa传感器的视场中预览的内容的裁剪参数(矩形的四个角的坐标)的命令。
97.与常规系统不同,如果智能缩放控制块检测到在qcfa传感器的视场中预览的内容的缩放级别满足缩放级别标准并且在qcfa传感器的视场中预览的内容的光条件满足光标准,则qcfa传感器可以被电子装置600配置为从第一模式(分箱模式)切换到第二模式(拜耳图像再生成模式),以增强在qcfa传感器的视场中预览的内容的分辨率。如果在qcfa传感器的视场中预览的内容的缩放级别不满足缩放级别标准以及在qcfa传感器的视场中预览的内容的光条件不满足光标准中的至少一个,则qcfa传感器保持在第一模式(分箱模式)。
98.在至少一种提出的方法中,智能缩放控制块可以通过控制qcfa传感器和图像处理器660来帮助实现改善的图像质量。根据预览的内容的缩放级别和预览的内容的光条件,智能缩放控制块可以智能地选择低分辨率分箱模式或高分辨率拜耳图像再生成模式,从而保持最佳图像质量。
99.图9是示出根据本公开的特定实施例的基于在qcfa传感器的视场中预览的内容的缩放级别和在qcfa传感器的视场中预览的内容的光条件来转换qcfa传感器模式的示意图的说明性示例。
100.参照图9的说明性示例,在状态1下,在qcfa传感器的视场中预览的内容的缩放级别小于2x缩放级别,并且在预览qcfa传感器的视场中的内容时存在低光照条件。因此,qcfa传感器可以在分箱模式下操作。在步骤902,将在qcfa传感器的视场中预览的内容的缩放级别增大到2倍缩放级别以上,但是如上面在状态2中所示,由于在qcfa传感器的视场中预览内容时低光照条件占主导,因此qcfa传感器以分箱模式操作。qcfa传感器可能对光照条件敏感,并且在低光照条件下以分箱模式操作qcfa传感器可以输出改善的图像质量。在步骤904,当预览的内容的缩放级别降低到低于2x缩放级别时,qcfa传感器返回到状态1并以分箱模式操作。在步骤906,环境照度增大(即,在qcfa传感器的视场中预览内容时的光照条件被改善为正常光或亮光)。如图9的状态3所示,由于预览的内容的缩放级别大于或等于2x缩放级别,并且预览的内容的光照条件是正常光或亮光,因此qcfa传感器可以开始在裁剪拜耳图像再生成模式下操作。在裁剪拜耳图像再生成模式下操作qcfa传感器包括将qcfa传感器从分箱模式切换到全分辨率拜耳图像再生成模式,并且将qcfa传感器的拜耳图像再生成模式下的内容在两个维度上中心裁剪为一半,从而在裁剪拜耳图像再生成模式下以2x缩放级别提供无损图像。这里,传感器输出是2x缩放图像,并且进一步在高于2x的缩放级别下,电子装置600的图像处理器660基于缩放级别进一步裁剪qcfa传感器的2x缩放图像输出。
101.在步骤910,如状态4中所见,缩放级别减小到低于2x缩放级别,然后qcfa传感器开始在分箱模式下操作。在状态4下,即使光照条件是正常的或明亮的,由于预览的内容的缩放级别已经降低到低于2x缩放级别,因此qcfa传感器也可以在分箱模式下操作。在步骤912,如果预览的内容的缩放级别增大到高于2x缩放级别,则qcfa传感器可以开始以拜耳图像再生成裁剪模式操作(如图9的状态3所示)。在步骤914,环境照度可以减小(即,在qcfa传感器的视场中预览内容时的光照条件是弱光)。如在图9的状态1中所示,qcfa传感器可以在分箱模式下开始操作。在步骤916,如图9的状态4中所示,即使在qcfa传感器的视场中预览内容时的光照条件是正常光或亮光,由于缩放级别低于2x缩放级别,因此qcfa传感器也可以在分箱模式下操作。
102.表1示出当基于缩放级别和光条件来选择分箱模式或拜耳图像再生成裁剪模式时的一些考虑因素。
103.[表1]
[0104][0105][0106]
为了保持平稳转换,不推荐在模式之间频繁切换。这可以通过在切换之后设置滞后来实现(即,仅在已经处理了特定数量的帧之后更新光条件和缩放变量)。这确保了在两个连续切换中存在固定数量的帧的延迟,并且传感器已经处于稳定状态。
[0107]
与一些方法和系统不同,qcfa传感器可以根据在qcfa传感器的视场中预览的内容的缩放级别和在qcfa传感器的视场中预览的内容的光条件来智能地切换模式,因此qcfa传感器模式的转换智能地保持最佳图像质量。
[0108]
图10示出本公开的特定实施例的用于基于在qcfa传感器的视场中预览的内容的缩放级别和在qcfa传感器的视场中预览的内容的光条件来切换qcfa传感器的模式的流程1000的流程图。
[0109]
参照图10的说明性示例,在一个实施例中,在步骤1002,当用户在qcfa传感器的视场中预览内容时,来自相机应用的框请求指示将被放大的区域。来自相机应用的框请求输出表示将被放大的区域的裁剪区域[上方、左侧、宽度和高度]。在步骤1004,使用来自相机应用的框请求,智能缩放控制块可以确定预览的内容的缩放级别从1x改变为1.9x。在步骤1010,智能缩放控制块确定是否需要切换qcfa传感器的模式,并且是否需要切换qcfa传感器的模式是基于预览的内容的缩放级别和预览的内容的光条件被确定的。由于预览的内容
的缩放级别是1.9x,因此qcfa传感器以分箱模式操作,在1x缩放级别下qcfa传感器也正在分箱模式下操作。相应地,不需要切换qcfa传感器的模式。在步骤1012,响应于确定不需要切换qcfa传感器的模式,智能缩放控制块还可以确定不需要缩放变换。裁剪区域的值可以基于qcfa传感器的分箱模式的分辨率(固定大小);并且因此,在分箱模式中,这些值可以在没有任何改变的情况下被转发到图像处理器660(即,不需要裁剪区域的值的缩放变换)。在步骤1014,结合步骤1024和步骤1026,可以将基于分箱模式分辨率的裁剪区域参数输入到电子装置600的图像处理器660。
[0110]
在一个实施例中,在步骤1002,当用户正在qcfa传感器的视场中预览内容时,来自相机应用程序的框请求指示将被放大的区域。来自相机应用的框请求输出表示将被放大的区域的裁剪区域[上方、左侧、宽度、高度]。在步骤1006,使用来自相机应用的框请求,智能缩放控制块可以确定预览的内容的缩放级别从1.9x改变为2x。智能缩放控制块还可以确定预览的内容的光条件是正常光还是亮光。在步骤1010,智能缩放控制块可以确定是否需要切换qcfa传感器的模式,并且智能缩放控制块可以基于预览的内容的缩放级别和预览的内容的光条件来确定。预览的内容的缩放级别被从1.9x改变为2x,并且预览内容的光条件是正常或亮光。因为在1.9x缩放级别下qcfa传感器正在分箱模式下操作。因此,需要切换qcfa传感器的模式。在步骤1016结合步骤1018,响应于确定需要将qcfa传感器的模式从分箱模式切换到拜耳图像再生成裁剪模式,智能缩放控制块向qcfa传感器发送命令以切换模式(写入i2c设置以切换qcfa传感器)。在步骤1020,智能缩放控制块可以确定是否需要缩放变换。裁剪区域的值可以基于qcfa传感器的分箱模式的分辨率(固定尺寸)。当qcfa传感器从分箱模式切换到拜耳图像再生成裁剪模式时,可能需要裁剪区域的值的缩放变换。当传感器模式改变为拜耳图像再生成裁剪模式时,基于分箱模式的分辨率的裁剪区域不与拜耳图像再生成裁剪模式的实际视场(fov)对应,并且可能需要被转换。在步骤1022,结合步骤1024和步骤1026,基于qcfa传感器的分箱模式分辨率的裁剪区域参数的值被电子装置600变换为根据在qcfa传感器的视场中预览的内容的缩放级别的值,并被馈送到电子装置600的图像处理器660。
[0111]
在一个实施例中,在步骤1002,当用户正在qcfa传感器的视场中预览内容时,来自相机应用的框请求显示或以其他方式指示将被放大的区域。来自相机应用的框请求可以输出指示将被放大的区域的裁剪区域[上方、左侧、宽度和高度]。在步骤1008,使用来自相机应用程序的框请求,智能缩放控制块确定预览内容的缩放级别大于或等于2x。智能缩放控制块确定预览内容的光条件从正常光改变为低光。在步骤1010,智能缩放控制块确定是否需要切换qcfa传感器的模式,并且是否需要切换qcfa传感器的模式是基于预览内容的缩放级别和预览内容的光条件被确定的。预览的内容的缩放级别大于或等于2x缩放级别,但是预览的内容的光条件是低光。qcfa传感器在大于或等于2x缩放级别的缩放级别下正在拜耳图像再生成裁剪模式下操作,但是由于光条件是低光,因此需要将qcfa传感器的模式从拜耳图像再生成裁剪模式切换到分箱模式。在步骤1016结合步骤1018,响应于确定需要将qcfa传感器的模式从拜耳图像再生成裁剪模式切换到分箱模式,智能缩放控制块向qcfa传感器发送命令以切换模式(写入i2c设置以切换qcfa传感器)。在步骤1020,智能缩放控制块确定是否需要缩放变换。裁剪区域的值可以基于qcfa传感器的分箱模式的分辨率(固定大小),因此,在分箱模式下,这些值可以在未经任何改变(即,不需要转换裁剪区域的值)的情
况下被转发到图像处理器660。在步骤1014,结合步骤1024和步骤1026,可以将基于分箱模式分辨率的裁剪区域参数输入到电子装置600的图像处理器660。
[0112]
图11a和图11b示出根据本公开的特定实施例的示出在使用现有技术和提出的方法以大于2.0x的缩放级别预览图像时的图像质量的示例场景。
[0113]
如图11b的示例中所示,当预览被缩放到8x时,提出的方法可以更清晰地显示场景中的文本,并且与其他方法的预览图像相比,整体图像被更清楚地聚焦。
[0114]
图12a和图12b示出根据本公开的特定实施例的示出在使用现有技术和提出的方法以大于2.0x的缩放级别捕获图像时的图像质量的示例场景。
[0115]
如图12b的示例中所示,在图像以2x被捕获并在2x缩放以上被再次放大时,提出的方法可以输出更清晰的文本并且还可以向场景添加附加细节。
[0116]
图13a和13b示出根据本公开的特定实施例的多个qcfa传感器获得8倍缩放级别的无损图像的示意图。
[0117]
参照图13a的说明性示例,使用2个qcfa传感器以便获得8倍缩放级别的无损缩放。第一qcfa传感器可以作为广角相机操作,并且第二qcfa传感器可以作为长焦相机操作,使得第二qcfa传感器以第一qcfa传感器的4a x缩放级别开始操作。第二qcfa传感器的基本视场(fov)与第一qcfa传感器的被中心裁剪到4.0x缩放的fov相同。
[0118]
可以在4.0x的缩放级别下激活第二qcfa相机。在4.0x-8.0x缩放级别之间,第二qcfa传感器可以在分箱模式下操作,并且可以在8.0x下切换到拜耳图像再生成裁剪模式。结果,8.0x的缩放是无损的。
[0119]
参照图13b的说明性示例,示出使用多个qcfa传感器进行内容增强的方法。该提出的方法可以包括由电子装置600在第一qcfa传感器的视场中预览内容。第一qcfa传感器可以正在第一模式(例如,分箱模式)下操作。当预览的内容的缩放级别满足第一缩放级别标准(如图13b中的示例所示,2x缩放级别)并且预览的内容的光条件满足光标准(正常光或亮光)时,电子装置600可以将第一qcfa传感器切换到拜耳图像再生成裁剪模式,以增强在第一qcfa传感器的视场中预览的内容的分辨率。为了在拜耳图像再生成裁剪模式下操作第一qcfa传感器,第一qcfa传感器可以切换到第二模式(拜耳图像再生成模式)并且可以被电子装置600中心裁剪(即,在第一qcfa传感器的第二模式下预览的内容在两个维度上被裁剪为一半(即,宽度的一半和高度的一半))。如图13b中所示,在2x缩放级别之后,第一qcfa传感器可以正在拜耳图像再生成裁剪模式下操作。当在第一qcfa传感器的视场中预览的内容的缩放级别满足第二缩放级别标准(例如,如图13b中所示,4x缩放级别)时,电子装置600可以激活第二qcfa传感器。当第二qcfa传感器被激活时,第一qcfa传感器被电子装置600去激活。在4x缩放级别下激活第二qcfa传感器,输出4x无损缩放。提出的方法包括由电子装置600在第二qcfa传感器的视场中预览内容。第二qcfa传感器正在第一模式(分箱模式)下操作。
[0120]
当预览的内容的缩放级别满足第三缩放级别标准(例如,如图13b中所示,8x缩放级别)并且预览的内容的光条件满足光标准(正常光或亮光)时,电子装置600可以将第二qcfa传感器切换到拜耳图像再生成裁剪模式,以增强在第二qcfa传感器的视场中预览的内容的分辨率。为了在拜耳图像再生成裁剪模式下操作第二qcfa传感器,第二qcfa传感器可以被切换到第二模式(拜耳图像再生成模式),并且可以被电子装置600中心裁剪(即,在第
二qcfa传感器的第二模式下预览的内容被裁剪为宽度的一半和高度的一半)。
[0121]
在8x缩放下,第二qcfa传感器(远程qcfa传感器)可以被切换到拜耳图像再生成裁剪模式,以输出第二qcfa传感器的2x无损缩放,其中,该2x无损缩放转换为4*2=8x无损缩放。
[0122]
图14a和图14b示出根据本公开的特定实施例的示出使用现有技术方法以及提出的方法的在100x下的数字缩放解决方案增强的示例场景。
[0123]
参照图14b的说明性示例,现有方法中的数字缩放方法可以使用从传感器获取的多个帧以及降噪方法和帧融合方法来输出最终的缩放图像输出。至少一种提出的用于内容增强(无损缩放)的方法可以与现有的数字解决方案一起应用,以在诸如30x、50x、100x等缩放级别下增强图像捕获能力。如图14b所示,由于提出的方法输出无损2x图像,因此可能仅需要通过现有数字解决方案对输入图像应用50x缩放,以便获得100x缩放图像。100x缩放下的所得图像(在图14b中的示例中示出)示出与使用现有技术方法的100x缩放图像相比针对图像细节的改善。
[0124]
图15a和图15b示出根据本公开的特定实施例的在缩放级别30x下使用现有技术方法和提出的方法两者的数字缩放解决方案增强捕获的图像的示例。
[0125]
图16a和16b示出根据本公开的特定实施例的在缩放级别100x下使用现有技术方法和提出的方法两者的数字缩放解决方案增强捕获的图像的示例。
[0126]
如图15b和图16b中的示例所示,利用提出的解决方案捕获的图像可以更聚焦、更清晰,并且即使在100x缩放级别下也保留图像细节。
[0127]
与一些现有系统不同,提出的使用电子装置600的qcfa传感器进行内容增强的方法可以在2x的缩放级别以及高于2x的缩放级别下输出无损图像质量,从而产生高细节图像。在提出的方法中,缩放级别2x及以上的预览图像和捕获图像更清晰且更聚焦。当图像的主题或图像的内容清晰时,图像看起来清楚,并且可以传达附加细节,从而生成在qcfa传感器的视场中的增强的内容(高细节图像)。通过使用多个qcfa传感器,8x缩放级别下的进一步的无损图像是可能的。
[0128]
这里公开的实施例可以通过在至少一个硬件装置上运行并执行网络管理功能以控制元件的至少一个软件程序被实现。图3至图16中所示的元件包括可以是硬件装置或硬件装置和软件模块的组合中的至少一个的块、元件、动作、行动、步骤等。
[0129]
具体实施例的前述描述将如此充分地揭示这里的实施例的一般性质,使得其他人可以通过应用当前知识在不脱离一般概念的情况下容易地修改和/或调整这些具体实施例的各种应用,并且因此,这些调整和修改应当并且旨在被理解为在所公开的实施例的等同物的含义和范围内。应当理解,这里采用的措辞或术语是为了描述而不是限制的目的。因此,虽然已经根据优选实施例描述了这里的实施例,但是本领域技术人员将认识到,可以在如这里所述的实施例的精神和范围内通过修改来实践这里的实施例。
[0130]
尽管已经利用各种实施例描述了本公开,但是可以向本领域技术人员建议各种改变和修改。本公开旨在涵盖落入所附权利要求的范围内的这些改变和修改。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献