显示方法、显示优化装置、电子设备及存储介质与流程

1.本公开实施例涉及但不限于显示技术领域，尤其涉及一种显示方法、显示优化装置、电子设备及存储介质。


背景技术：

2.显示装置中，由于堆叠设置的两层显示面板之间通常存在1mm(毫米)至1.3mm的间隙层，那么，在一定视角下，容易产生重影现象，即用户眼睛观察到上下像素不重合，影响视觉体验。改善重影现象，对提高显示面板的显示质量具有重要意义。


技术实现要素：

3.以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。
4.本公开实施例主要提供如下技术方案：
5.第一方面，本公开实施例提供了一种显示方法，包括：
6.获得n个用户眼睛的位置信息和待显示图像的原始灰阶数据；其中，n为大于1的正整数；
7.基于所述n个用户眼睛的位置信息，确定与所述n个用户眼睛的位置信息一一对应的n个像素对应关系，其中，每个用户眼睛的位置信息所对应的像素对应关系为在该用户眼睛的位置信息所对应的视角下，控光面板中的像素与液晶显示面板中的像素之间的对应关系；
8.根据所述n个像素对应关系对所述原始灰阶数据进行调整，获得目标灰阶数据；
9.将所述原始灰阶数据输出至所述液晶显示面板，并将所述目标灰阶数据输出至所述控光面板，以执行显示。
10.第二方面，本公开实施例提供了一种计算机可读存储介质，包括存储的程序，其中，在所述程序运行时控制所述存储介质所在的设备执行上述的显示方法的步骤。
11.第三方面，本公开实施例提供了一种显示优化装置，包括：处理器以及存储有可在处理器上运行的计算机程序的存储器，其中，所述处理器执行所述程序时实现上述的显示方法的步骤。
12.第四方面，本公开实施例提供了一种电子设备，包括：显示装置、双目摄像头和显示优化装置；其中，
13.所述显示装置包括：控光面板和位于所述控光面板的出光侧的液晶显示面板；
14.所述双目摄像头，被配置为采集第一图像和第二图像；
15.所述显示优化装置，包括：
16.第一获得单元，被配置为基于所述双目摄像头的位置信息、所述第一图像和所述第二图像，获得n个用户眼睛的位置信息；其中，n为大于1的正整数；
17.第二获得单元，被配置为获得待显示图像的原始灰阶数据；
18.确定单元，被配置为基于所述n个用户眼睛的位置信息，确定与所述n个用户眼睛的位置信息一一对应的n个像素对应关系，其中，每个用户眼睛的位置信息所对应的像素对应关系为在该用户眼睛的位置信息所对应的视角下，控光面板中的像素与液晶显示面板中的像素之间的对应关系；
19.第三获得单元，被配置为根据所述n个像素对应关系对所述原始灰阶数据进行调整，获得目标灰阶数据；
20.输出单元，被配置为将所述原始灰阶数据输出至所述液晶显示面板，并将所述目标灰阶数据输出至所述控光面板。
21.本公开实施例提供的显示方法、显示优化装置、电子设备及存储介质，在获得待显示图像的原始灰阶数据和n个用户眼睛相对于显示面板的位置信息后，可以基于n个用户眼睛的位置信息，针对每个用户眼睛的位置信息所对应的视角，确定出在该视角下控光面板中的像素与液晶显示面板中的像素之间的对应关系，这样，就根据n个用户眼睛当前相对于显示面板的位置信息，实时得到了与n个用户眼睛的位置信息一一对应的n个像素对应关系。接下来，就可以根据该实时确定出的n个像素对应关系，对用于使得液晶显示面板显示的原始灰阶数据进行调整，重新确定出用于使得控光面板显示的目标灰阶数据。这样，就获得了与n个用户眼睛的位置信息所对应的视角相对应的目标灰阶数据。最后，将原始灰阶数据输出至液晶显示面板，并将目标灰阶数据输出至控光面板来执行显示。如此，通过用户眼睛的位置信息，来确定在该用户眼睛的位置信息所对应的视角下，控光面板中的像素与液晶显示面板中的像素之间的像素对应关系，并根据像素对应关系来确定控光面板的目标灰阶数据，就使得所得到的目标灰阶数据是一个多视角没有重影的控光面板的显示画面，那么，将原始灰阶数据输出至液晶显示面板，并将目标灰阶数据输出至控光面板，以执行显示时，在该用户眼睛的位置信息所对应的视角下，液晶显示面板中的像素所显示的内容和控光面板中的像素所显示的内容是对应的，不会出现不重合的问题，从而，能够使用户在任何角度观看显示面板时，不会出现重影的问题。而且，还没有明显光晕，保证了对比度。进而，提高了显示效果，提升了用户的视觉体验。
22.本技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本技术而了解。本技术的其他优点可通过在说明书以及附图中所描述的方案来实现和获得。
附图说明
23.附图用来提供对本公开技术方案的进一步理解，并且构成说明书的一部分，与本公开实施例一起用于解释本公开的技术方案，并不构成对本公开技术方案的限制。附图中各部件的形状和大小不反映真实比例，目的只是示意说明本公开内容。
24.图1为本公开实施例中的显示装置的一种结构示意图；
25.图2a为一些技术中的显示装置的一种显示效果示意图；
26.图2b为一些技术中的显示装置的另一种显示效果示意图；
27.图3为本公开实施例中的显示方法的流程示意图；
28.图4为本公开实施例中的显示装置的另一种结构示意图；
29.图5为本公开实施例中的获得目标灰阶数据的过程示意图；
30.图6本公开实施例中的电子设备的结构示意图；
31.图7为本公开实施例中的显示装置的又一种结构示意图；
32.图8为本公开实施例中的显示优化装置的结构示意图。
33.附图标记说明：
34.11-控光面板；
ꢀꢀꢀꢀꢀꢀꢀꢀꢀ
12-液晶显示面板；
ꢀꢀꢀꢀꢀꢀꢀꢀ
40-显示面板；
35.41-第一摄像头；
ꢀꢀꢀꢀꢀꢀꢀ
42-第二摄像头；
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
61-显示装置；
36.62-双目摄像头；
ꢀꢀꢀꢀꢀꢀꢀ
63-显示优化装置；
ꢀꢀꢀꢀꢀꢀꢀꢀ
64-背光模组；
37.121-第一基板；
ꢀꢀꢀꢀꢀꢀꢀꢀ
122-第一液晶层；
ꢀꢀꢀꢀꢀꢀꢀꢀꢀ
123-彩膜层；
38.124-黑矩阵层；
ꢀꢀꢀꢀꢀꢀꢀꢀ
125-第二基板；
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
126-上偏光片；
39.111-第三基板；
ꢀꢀꢀꢀꢀꢀꢀꢀ
112-第二液晶层；
ꢀꢀꢀꢀꢀꢀꢀꢀꢀ
113-第四基板；
40.114-下偏光片；
ꢀꢀꢀꢀꢀꢀꢀꢀ
71-黏附层；
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
72-中间偏光片；
41.641-背板；
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
642-光源组件；
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
643-扩散板；
42.644-光学组件；
ꢀꢀꢀꢀꢀꢀꢀꢀ
645-胶框；
ꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀꢀ
73-前框；
43.74-橡胶层。
具体实施方式
44.本文描述了多个实施例，但是该描述是示例性的，而不是限制性的，在本文所描述的实施例包含的范围内可以有更多的实施例和实现方案。尽管在附图中示出了许多可能的特征组合，并在具体实施方式中进行了讨论，但是所公开的特征的许多其它组合方式也是可能的。除非特意加以限制的情况以外，任何实施例的任何特征或元件可以与任何其它实施例中的任何其他特征或元件结合使用，或可以替代任何其它实施例中的任何其他特征或元件。
45.在描述具有代表性的实施例时，说明书可能已经将方法和/或过程呈现为特定的步骤序列。然而，在该方法或过程不依赖于本文所述步骤的特定顺序的程度上，该方法或过程不应限于所述的特定顺序的步骤。如本领域普通技术人员将理解的，其它的步骤顺序也是可能的。因此，说明书中阐述的步骤的特定顺序不应被解释为对权利要求的限制。此外，针对该方法和/或过程的权利要求不应限于按照所写顺序执行它们的步骤，本领域技术人员可以容易地理解，这些顺序可以变化，并且仍然保持在本技术实施例的精神和范围内。
46.除非另外定义，本公开实施例使用的技术术语或者科学术语应当为本发明所属领域内具有一般技能的人士所理解的通常意义。本公开实施例中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而只是用来区分不同的组成部分。“包括”或者“包含”等类似的词语意指出现该词前面的元件或物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接，而是可以包括电性的连接，不管是直接的还是间接的。
47.图1为本公开实施例中的显示装置的一种结构示意图，如图1所示，该显示装置是一种两层显示面板贴合结构，可以包括：堆叠设置的控光面板11和液晶显示面板12。其中，控光面板11也可称为子显示面板(sub cell)，液晶显示面板12也可称为主显示面板(main cell)。该显示装置还可以包括：设置在显示面板两侧的双目摄像头。
48.经本公开发明人研究发现：如图1所示，在液晶显示面板12和控光面板11之间的原
始像素对应关系中，控光面板中的第二像素与位于该第一像素上方的液晶显示面板中的第一像素是对应的(例如，控光面板11中的第二像素s1至s4与液晶显示面板12中的第二像素m1至m4是一一对应的)，但是，由于该显示装置本身的结构限制，控光面板11和液晶显示面板12之间会存在1mm至1.3mm的间隙层，这就会导致在一定视角o(由用户眼睛相对于显示面板的位置决定)下，液晶显示面板与控光面板之间的像素对应关系会发生变化，出现上下像素不重合(即不对应)的问题(例如，液晶显示面板的第二像素m2原本应该与控光面板中的第一像素s2重合，但是在一定视角o下，液晶显示面板的第二像素m2实际上与控光面板中的第一像素s2并不重合，而是与控光面板中的第二像素s1重合)。这样，在一定视角o下，上下像素显示的内容不重合，会产生重影的问题。例如，如图2a所示，在一定视角o下，显示装置所显示的显示内容出现了重影，使得显示效果变差，影响用户的视觉体验。此外，由于在一定视角o下，用户眼睛还容易看到显示面板内金属层反光，更会加剧这一现象。而在一些技术中常用的方式是：通过区域调光(local dimming)技术，对控光面板各个像素周围进行模糊化处理，使控光面板的白画面显示范围大于液晶显示面板的图像显示范围，这种方式虽然在一定程度上可以解决重影的问题，但是，会在显示面板上产生光晕(如图2b所示)，并且光晕在较暗的环境下会更加明显。
49.本公开实施例提供一种显示方法，应用于显示优化装置中，该显示优化装置，与上述显示装置连接，可用于对上述显示装置进行显示优化，改善重影现象，提高显示装置中显示面板的显示质量，提升用户的视觉体验。
50.在一种示例性实施例中，上述显示装置可以为带有双目摄像头的显示器，上述显示优化装置可以为主机。当然，本公开实施例不限于此，还可以为其它。例如，上述显示装置可以为电视机的显示器，上述显示优化装置可以为电视机的处理器。这里，本公开实施例对此不做限定。
51.图3为本公开实施例中的显示方法的流程示意图，如图3所示，该显示方法可以包括：
52.步骤301：获得n个用户眼睛的位置信息和待显示图像的原始灰阶数据。
53.其中，n为大于1的正整数。
54.举例来说，当一个用户使用显示装置时，n可以为2，(即获得了该用户左右眼睛相对于显示面板的位置信息，通过执行步骤302至步骤304就可以实现单人多视角的显示优化)。当多个用户同时使用显示装置时，例如两个用户共用一个显示装置时，n可以为4，(即分别获得了多个用户左右眼睛相对于显示面板的位置信息，通过执行步骤302至步骤304就可以实现多人多视角的显示优化)。这里，本公开实施例对此不做限定。
55.这里，待显示图像的原始灰阶数据是液晶显示面板显示画面时的灰阶数据。其中，原始灰阶数据可以包括：与液晶显示面板中每个像素对应的用于使得液晶显示面板中该像素显示的原始子灰阶值。如果液晶显示面板和控光面板均按照该原始灰阶数据进行显示，那么，在n个用户眼睛的位置信息所对应的n个视角下，就很容易出现重影问题。
56.这里，用户眼睛的位置信息是指用户眼睛相对于显示面板的位置信息。通常来说，每个用户的眼睛的位置信息可以包括：该用户的第一眼睛的位置信息和该用户的第二眼睛的位置信息。
57.步骤302：基于n个用户眼睛的位置信息，确定与n个用户眼睛的位置信息一一对应
的n个像素对应关系。
58.这里，每个用户眼睛的位置信息所对应的像素对应关系为在该用户眼睛的位置信息所对应的视角下，控光面板中的像素与液晶显示面板中的像素之间的对应关系。
59.步骤303：根据n个像素对应关系对原始灰阶数据进行调整，获得目标灰阶数据。
60.步骤304：将原始灰阶数据输出至液晶显示面板，并将目标灰阶数据输出至控光面板，以执行显示。
61.这里，目标灰阶数据是控光面板显示画面时的灰阶数据。其中，目标灰阶数据可以包括：与控光面板中的每个像素对应的用于使得控光面板中的该像素显示的子灰阶数据。
62.如此，在获得待显示图像的原始灰阶数据和n个用户眼睛相对于显示面板的位置信息后，可以基于n个用户眼睛的位置信息，针对每个用户眼睛的位置信息所对应的视角，确定出在该视角下控光面板中的像素与液晶显示面板中的像素之间的对应关系，这样，就根据n个用户眼睛当前相对于显示面板的位置信息，实时得到了与n个用户眼睛的位置信息一一对应的n个像素对应关系。接下来，就可以根据该实时确定出的n个像素对应关系对用于使得液晶显示面板显示的原始灰阶数据进行调整，重新确定出用于使得控光面板显示的目标灰阶数据。这样，就获得了与n个用户眼睛的位置信息所对应的视角相对应的目标灰阶数据。最后，将原始灰阶数据输出至液晶显示面板，并将目标灰阶数据输出至控光面板来执行显示。如此，通过用户眼睛的位置信息，来确定在该用户眼睛的位置信息所对应的视角下，控光面板中的像素与液晶显示面板中的像素之间的像素对应关系，并根据像素对应关系来确定控光面板的灰阶数据，就使得在该用户眼睛的位置信息所对应的视角下，液晶显示面板中的像素所显示的内容和控光面板中的像素所显示的内容是对应的，不会出现不重合的问题，从而，能够使用户在任何角度观看显示面板时，不会出现重影的问题。进而，提高了显示效果，提升了用户的视觉体验。
63.在一种示例性实施例中，可以通过设置在显示装置中的双目摄像头(例如，以显示装置为显示器为例，如图4所示，在显示面板40两侧可以设置有第一摄像头41和第二摄像头42)所获取的两幅图像来获取用户眼睛相对于显示面板在三维坐标系中的位置信息。那么，步骤301可以包括以下步骤3011～步骤3013：
64.步骤3011：通过显示装置中的双目摄像头获取第一图像和第二图像；
65.步骤3012：基于双目摄像头的位置信息、第一图像和第二图像，获得n个用户眼睛的位置信息。
66.在一种示例性实施例中，步骤3012可以包括：
67.步骤3012a：通过人眼识别技术，确定n个用户眼睛在第一图像中的第一像素位置和在第二图像中的第二像素位置；
68.步骤3012b：通过双目视觉定位技术，基于双目摄像头的位置信息、以及n个用户眼睛在第一图像中的第一像素位置和在第二图像中的第二像素位置，计算出n个用户眼睛的位置信息。
69.举例来说，以一个用户为例，则n等于2，分别通过第一摄像头和第二摄像头(即双目摄像头)拍摄图像，得到第一图像和第二图像，然后，通过人眼识别技术，从第一图像中得到用户的第一眼睛的第一像素位置和用户的第二眼睛的第一像素位置，并从第二图像中得到用户的第一眼睛的第二像素位置和用户的第二眼睛的第二像素位置。接下来，通过摄像
头拍摄的图像中像素位置与球坐标轴一一对应的原理，将将第一图像中用户的第一眼睛的第一像素位置和用户的第二眼睛的第一像素位置分别转化为第一图像用户的第一眼睛的第一球坐标系位置和用户的第二眼睛的第一球坐标系位置，并将第二图像中用户的第一眼睛的第二像素位置和用户的第二眼睛的第二像素位置分别转化为第二图像用户的第一眼睛的第二球坐标系位置和用户的第二眼睛的第二球坐标系位置，最后，结合第一摄像头的位置信息和第二摄像头的位置信息进行换算，将眼睛的球坐标位置转化为三维空间的三维坐标(即根据双目摄像头的位置信息以及用户的第一眼睛的第一球坐标系位置和第二球坐标系位置，计算出用户的第一眼睛的三维坐标，并根据双目摄像头的位置信息以及用户的第二眼睛的第一球坐标系位置和第二球坐标系位置，计算出用户的第二眼睛的三维坐标)。如此，就得到了一个用户对应的2个用户眼睛的位置信息(即得到了第一个用户眼睛e1的位置信息(xe1，ye1，ze1)以及第二个用户眼睛e2的位置信息为(xe2，ye2，ze2))。
70.在一种示例性实施例中，可以实时根据n个用户眼睛的位置信息，计算出在n个用户眼睛的位置信息所对应的n个视角下的n个像素对应关系，那么，步骤302可以包括：
71.步骤3021：基于n个用户眼睛的位置信息、液晶显示面板中每个像素的位置信息、控光面板中每个像素的位置信息、以及控光面板与液晶显示面板之间的间隔厚度，确定与n个用户眼睛的位置信息一一对应的n个像素对应关系。这里，每个用户眼睛的位置信息所对应的像素对应关系为在该用户眼睛的位置信息所对应的视角下，控光面板中的像素与液晶显示面板中的像素之间的对应关系。
72.在一种示例性实施例中，步骤3021可以包括：步骤3021a～步骤3021b：
73.步骤3021a：根据n个用户眼睛的位置信息、液晶显示面板中每个像素的位置信息、以及控光面板与液晶显示面板之间的间隔厚度，计算出与n个用户眼睛的位置信息一一对应的n组投影位置信息；其中，每个用户眼睛的位置信息所对应的一组投影位置信息包括：在该用户眼睛的位置信息所对应的视角下，液晶显示面板中所有像素在控光面板上的投影的位置信息；
74.步骤3021b：将与n个用户眼睛的位置信息一一对应的n组投影位置信息分别与控光面板中每个像素的位置信息进行投影复合，得到与n个用户眼睛的位置信息一一对应的n个像素对应关系。
75.在一种示例性实施例中，以液晶显示面板包括p行q列第一像素为例，控光面板包括p行q列的第二像素为例，可以根据以下公式(1)和公式(2)，计算出与第k个用户眼睛的位置信息对应的第k组投影位置信息(即在第k个用户眼睛的位置信息对应的第k个视角下，液晶显示面板中像素mc
i,j
在控光面板上的上的投影的位置信息。
[0076][0077][0078]
其中，(xtc
i,j,k
，ytc
i,j,k
)表示在第k个用户眼睛的位置信息对应的第k个视角下，
液晶显示面板中第i行第j列的像素mc
i,j
在控光面板上的投影的位置信息；(xmc
i,j
，ymc
i,j
，zmc
i,j
)表示液晶显示面板中第i行第j列的像素mc
i,j
的位置信息；(xek,yek,zek)表示第k个用户眼睛的位置信息；d表示控光面板与液晶显示面板之间的间隔厚度；i为大于或者等于1，且小于或者等于p的正整数，j为大于或者等于1，且小于或者等于q的正整数，p、q为正整数k为小于或等于n的正整数。
[0079]
举例来说，以第k个用户眼睛的位置信息对应的第k组投影位置信息包括：液晶显示面板中的第2行第2列的像素mc
2,2
在控光面板上的上的投影的位置信息、以及液晶显示面板中的第2行第1列的像素mc
2,1
在控光面板上的上的投影的位置信息为例，假设液晶显示面板中的第2行第1列的像素mc
2,2
在控光面板上的上的投影的位置信息以及液晶显示面板中的第2行第1列的像素mc
2,1
在控光面板上的上的投影的位置信息与控光面板中每个像素的位置信息进行投影复合，可以得到以下投影复合结果：
[0080]
投影复合结果1：液晶显示面板中的第2行第2列的像素mc
2,2
的投影的30％面积位于控光面板上的第2行第1列的像素sc
2,1
，并且，液晶显示面板中的第2行第2列的像素mc
2,2
的投影的70％面积位于控光面板上的第2行第2列的像素sc
2,2
，即得到了控光面板上的第2行第1列的像素sc
2,1
与液晶显示面板中的第2行第2列的像素mc
2,2
的30％面积对应，控光面板上的第2行第2列的像素sc
2,2
与液晶显示面板中的第2行第2列的像素mc
2,2
的70％面积；
[0081]
投影复合结果2：液晶显示面板中的第2行第1列的像素mc
2,1
的投影的70％面积位于控光面板上的第2行第1列的像素sc
2,1
，即得到了控光面板上的第2行第1列的像素sc
2,1
与液晶显示面板中的第2行第1列的像素mc
2,1
的投影的70％面积对应。
[0082]
结合投影复合结果1和投影复合结果2，就可以得到在第k个用户眼睛的位置信息所对应视角下，控光面板上的第2行第1列的像素sc
2,1
对应的子像素对应关系(也可称为子投影转移矩阵)如下所示：控光面板上的第2行第1列的像素sc
2,1
与液晶显示面板中的第2行第1列的像素mc
2,1
的投影的70％面积对应，且与液晶显示面板中第2行第2列的像素mc
2,2
的30％面积对应。
[0083]
那么，在第k个用户眼睛的位置信息所对应视角下，控光面板上的像素第2行第1列的sc
2,1
对应的子像素对应关系tk(2,1)(也可称为子投影转移矩阵)可以如下公式(3)所示：
[0084][0085]
以此类推，可以得到在第k个用户眼睛的位置信息所对应视角下，控光面板上的每个像素对应的子像素对应关系(也可称为子投影转移矩阵)，从而，就可以得到在第k个用户眼睛的位置信息对应的第k个视角下的像素对应关系。
[0086]
在一种示例性实施例中，步骤303可以包括以下步骤3031～步骤3032：
[0087]
步骤3031：根据原始灰阶数据和与n个用户眼睛的位置信息一一对应的n个像素对应关系，得到与n个像素对应关系一一对应的n个待处理灰阶数据；
[0088]
步骤3032：基于与n个像素对应关系一一对应的n个待处理灰阶数据，确定目标灰
阶数据。
[0089]
下面以具体实例对如何得到n个像素对应关系一一对应的n个待处理灰阶数据进行说明。
[0090]
以液晶显示面板包括p行q列的像素、控光面板包括p行q列的像素为例，在得到与n个用户眼睛的位置信息一一对应的n个像素对应关系之后，针对每个用户眼睛的位置信息所对应的像素对应关系，通过以下公式(4)至公式(9)，基于该用户眼睛的位置信息所对应的像素对应关系与原始灰阶数据，计算出与该用户眼睛的位置信息所对应的像素对应关系对应的灰阶数据。
[0091][0092]
其中，img0表示原始灰阶数据；x
1,1
表示第1行第1列的像素所对应的原始子灰阶值；x
1,q
表示第1行第q列的像素所对应的原始子灰阶值；x
p,1
表示第p行第1列的像素所对应的原始子灰阶值；x
p,q
表示第p行第q列的像素所对应的原始子灰阶值；p、q为正整数。
[0093][0094]
其中，tk表示第k个用户眼睛的位置信息所对应的像素对应关系(即第k个像素对应关系)；tk(1,1)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第1行第1列的像素所对应的子像素对应关系(也可称为子投影转移矩阵)；tk(1,q)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第1行第q列的像素所对应的子像素对应关系；tk(p,1)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第p行第1列的像素所对应的子像素对应关系；tk(p,q)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第p行第q列的像素所对应的子像素对应关系；p、q为正整数；k为小于或等于n的正整数。
[0095][0096]
其中，imgk表示第k个像素对应关系所对应的灰阶数据(即第k个灰阶数据)；nk(1,1)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第1行第1列的像素所对应的子灰阶值；tk(1,q)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第1行第q列的像素所对应的子灰阶值；tk(p,1)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第p行第1列的像素所对应的子灰阶值；tk(p,q)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第p行第q列的像素所对应的子灰阶值；p、q为正整
数；k为小于或等于n的正整数。
[0097]
举例来说，在第k个用户眼睛的位置信息所对应视角下，控光面板上的第2行第1列的像素sc
2,1
对应的子像素对应关系(子投影转移矩阵)如下所示：控光面板上的第2行第1列的像素sc
2,1
与液晶显示面板中的第2行第1列的像素mc
2,1
的投影的70％面积对应，且与液晶显示面板中第2行第2列的像素mc
2,2
的30％面积对应。进而，控光面板上的第2行第1列的像素sc
2,1
对应的灰阶值可以等于液晶显示面板中的第2行第1列的像素mc
2,1
的灰阶值的70％，再加上液晶显示面板中第2行第2列的像素mc
2,2
的灰阶值的30％。(即nk(2,1)＝sum(tk(2,1)
×
img0))。
[0098]
也就是说，将如公式(7)所示的在第k个用户眼睛的位置信息所对应视角下，控光面板中的第i行第j列的像素所对应的子像素对应关系(也可称为子投影转移矩阵)tk(i,j)与如公式(4)所示的原始灰阶数据img0叉乘并求和，那么，如公式(8)所示，就可以得到在第k个用户眼睛的位置信息所对应视角下，控光面板中的第i行第j列的像素对应的待处理灰阶值nk(i,j)。
[0099][0100]
其中，tk(i,j)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第i行第j列的像素所对应的子像素对应关系(也可称为子投影转移矩阵)；t
1,1
表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第i行第j列的像素与液晶显示面板中的第1行第1列的像素之间的对应关系；t
1,q
表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第i行第j列的像素与液晶显示面板中的第1行第q列的像素之间的对应关系；t
p,1
表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第i行第j列的像素与液晶显示面板中的第p行第1列的像素之间的对应关系；t
p,q
表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第i行第j列的像素与液晶显示面板中的第p行第q列的像素之间的对应关系；i为大于或者等于1，且小于或者等于p的正整数，j为大于或者等于1，且小于或者等于q的正整数，p、q为正整数；k为小于或等于n的正整数。
[0101][0102]
其中，nk(i,j)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第i行第j列的像素对应的待处理灰阶值；sum(
·
)表示求和；tk(i,j)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第i行第j列的像素所对应的子像素对应关系(也可称为子投影转移矩阵)；img0表示原始灰阶数据；i为大于或者等于1，且小于或者等于p的正整数，j为大于或者等于1，且小于或者等于q的正整数，p、q为正整数；k为小于或等于n的正
整数。
[0103]
以此类推，可以得到控光面板中的其它像素对应的待处理灰阶值。从而，就可以得到如下公式(9)所示的第k个待处理灰阶数据imgk。
[0104][0105]
其中，imgk表示第k个像素对应关系所对应的待处理灰阶数据；sum(
·
)表示求和；img0表示原始灰阶数据；nk(1,1)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第1行第1列的像素对应的待处理灰阶值；nk(1,q)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第1行第q列的像素对应的待处理灰阶值；nk(p,1)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第p行第1列的像素对应的待处理灰阶值；nk(p,q)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第p行第q列的像素对应的待处理灰阶值；tk(1,1)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第1行第1列的像素所对应的子像素对应关系；tk(1,q)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第1行第q列的像素所对应的子像素对应关系；tk(p,1)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第p行第1列的像素所对应的子像素对应关系；tk(p,q)表示在第k个用户眼睛的位置信息所对应视角下，控光面板中的第p行第q列的像素所对应的子像素对应关系；p、q为正整数；k为小于或等于n的正整数。
[0106]
在一种示例性实施例中，步骤3032可以包括以下步骤3032a～步骤3032b：
[0107]
步骤3032a：将n个待处理灰阶数据进行叠加处理，计算出处理后的灰阶数据；
[0108]
步骤3032b：将处理后的灰阶数据作为目标灰阶数据。
[0109]
在一种示例性实施例中，步骤3032可以包括以下步骤3032c～步骤3032e：
[0110]
步骤3032c：将n个待处理灰阶数据进行叠加处理，计算出处理后的灰阶数据；
[0111]
步骤3032d：对处理后的灰阶数据进行平滑处理，得到平滑后的灰阶数据；
[0112]
步骤3032e：将平滑后的灰阶数据作为目标灰阶数据。
[0113]
在一种示例性实施例中，步骤3032a或步骤3032c可以包括：在获得与n个像素对应关系一一对应的n个待处理灰阶数据后，通过如下公式(10)，计算出处理后的灰阶数据：
[0114]
img＝max(img1，img2，
…
，imgn)
ꢀꢀꢀꢀꢀꢀꢀ
公式(10)；
[0115]
其中，img表示处理后的灰阶数据，img1表示第1个待处理灰阶数据，img2表示第2个待处理灰阶数据，imgn表示第n个待处理灰阶数据，max(
·
)表示n个待处理灰阶数据中对应元素中较大元素组成的矩阵。
[0116]
举例来说，如图5所示，根据第一用户眼睛的位置信息所对应的像素对应关系和原始灰阶数据得到第一待处理灰阶数据，并根据第二用户眼睛的位置信息所对应的像素对应关系和原始灰阶数据得到第二待处理灰阶数据；接下来，第一待处理灰阶数据和第二待处理灰阶数据进行叠加处理(即灰度最大化处理)并进行平滑处理，就可以目标灰阶数据。这
里，为直观起见，在图5中，将图像的灰阶数据以波形进行表示。
[0117]
在一种示例性实施例中，步骤3032d可以包括：通过图像均值平滑滤波、高斯滤波和中值滤波中的任意一种方法，对处理后的灰阶数据进行平滑处理，得到平滑后的灰阶数据。
[0118]
由上述内容可知，本公开实施例所提供的显示方法，通过用户眼睛的位置信息，来确定在该用户眼睛的位置信息所对应的视角下，控光面板中的像素与液晶显示面板中的像素之间的像素对应关系，并根据像素对应关系来确定控光面板的目标灰阶数据，如此，由于目标灰阶数据是一个多视角没有重影的控光面板的显示画面，那么，将原始灰阶数据输出至液晶显示面板，并将目标灰阶数据输出至控光面板，以执行显示时，使得在该用户眼睛的位置信息所对应的视角下，液晶显示面板中的像素所显示的内容和控光面板中的像素所显示的内容不会出现不重合的问题，从而，能够使用户在任何角度观看显示面板时，不会出现重影的问题。而且，还没有明显光晕，保证了对比度。进而，提高了显示效果，提升了用户的视觉体验。
[0119]
本公开实施例提供一种电子设备，图6为本公开实施例中的电子设备的结构示意图，如图6所示，该电子设备可以包括：显示装置61、双目摄像头62和显示优化装置63，其中，
[0120]
显示装置61包括：控光面板11和位于控光面板11的出光侧的液晶显示面板12；
[0121]
双目摄像头62，被配置为采集第一图像和第二图像；
[0122]
显示优化装置63，可以包括：
[0123]
第一获得单元631，被配置为基于双目摄像头的位置信息、第一图像和第二图像，获得n个用户眼睛的位置信息；其中，n为大于1的正整数；
[0124]
第二获得单元632，被配置为获得待显示图像的原始灰阶数据；
[0125]
确定单元633，被配置为基于n个用户眼睛的位置信息，确定与n个用户眼睛的位置信息一一对应的n个像素对应关系，其中，每个用户眼睛的位置信息所对应的像素对应关系为在该用户眼睛的位置信息所对应的视角下，控光面板中的像素与液晶显示面板中的像素之间的对应关系；
[0126]
第三获得单元634，被配置为根据n个像素对应关系对原始灰阶数据进行调整，获得目标灰阶数据；
[0127]
输出单元635，被配置为将原始灰阶数据输出至液晶显示面板12，并将目标灰阶数据输出至控光面板11。
[0128]
在一种示例性实施例中，如图6所示，该显示装置还可以包括：设置在控光面板11远离液晶显示面板12一侧的背光模组64背光模组。
[0129]
在一种示例性实施例中，在物理上，双目摄像头可以与显示装置合设或者分设，这里，本公开实施例不做限定。
[0130]
在一种示例性实施例中，如图6所示，以双目摄像头与显示装置合设为例，双目摄像头62设置在背光模组64与控光面板11之间(即设置在背光模组64靠近控光面板的一侧)。
[0131]
在一种示例性实施例中，双目摄像头可以为红外摄像头。
[0132]
在一种示例性实施例中，以双目摄像头为红外摄像头、双目摄像头可以与显示装置合设为例，显示装置还包括：设置在控光面板远离液晶显示面板一侧的背光模组，双目摄像头为红外摄像头，红外摄像头设置在背光模组与控光面板之间。
[0133]
在一种示例性实施例中，以双目摄像头为红外摄像头、双目摄像头与显示装置合设为例，该背光模组可以包括：光源组件被配置为向控光面板提供初始背光；胶框包括：用于承载和固定控光面板的承载部；红外摄像头设置在承载部远离控光面板的一侧。
[0134]
下面以双目摄像头与显示装置合设，双目摄像头设置在承载部远离控光面板的一侧为例，对本公开实施例中的显示装置的结构进行说明。
[0135]
图7为本公开实施例中显示装置的另一种结构示意图，如图7所示，该显示装置61可以包括：背光模组64、位于背光模组64的出光侧的控光面板11、以及位于控光面板11的出光侧的液晶显示面板12，显示装置61还可以包括：设置在背光模组64与控光面板11之间的双目摄像头62。
[0136]
其中，背光模组64，被配置为向控光面板11提供初始背光；控光面板11，被配置为基于显示优化装置63输出的目标灰阶数据对初始背光进行调节，并向液晶显示面板12提供调节后的背光；液晶显示面板12，被配置为接收调节后的背光，并基于显示优化装置63输出的原始灰阶数据进行显示；该双目摄像头被配置为采集第一图像和第二图像。
[0137]
在一种示例性实施例中，本公开实施例提供的显示装置可以为液晶显示装置或其他具有显示功能的装置。
[0138]
在一种示例性实施例中，控光面板可以为控光液晶面板，也可以为其他类型的具有光控功能的面板，例如，电子墨水面板或电致变色面板等。
[0139]
在一种示例性实施例中，通过设置在显示液晶面板和背光模组之间的控光面板可以对提供给显示液晶面板的背光的亮度进行分区域控制。例如，控光面板通常为控光液晶面板，通过调节控光液晶面板的液晶层中液晶分子的偏转角度可以对提供给显示液晶面板的背光的亮度进行调节。例如，通过调节控光液晶面板中液晶分子的偏转角度可以减小向显示液晶面板中对应显示画面的暗态区域的部分提供的背光的亮度，以降低显示画面中暗态区域的透过光强，从而避免或减弱液晶显示装置的暗态漏光现象。
[0140]
在一种示例性实施例中，显示液晶面板和控光面板具有相同的外观尺寸及功能尺寸，例如显示液晶面板与控光面板的形状及大小均相同，显示液晶面板中的显示区域与控光面板中的控光区域的形状及大小均相同，以使对位贴合显示液晶面板和控光面板后，控光区域可以与显示区域相对应，从而背光模组发出的背光在经控光区域调控之后被提供至显示区域。例如，显示液晶面板中的显示区域包括：多个显示像素；控光面板中的控光区域包括：多个控光像素。
[0141]
在一种示例性实施例中，控光面板可以为未设置彩膜的黑白液晶显示面板。或者，控光面板可以为白色的有机电致发光显示面板。
[0142]
在一种示例性实施例中，如图7所示，液晶显示面板12可以包括：第一基板121、第一液晶层122、彩膜层123、黑矩阵层124、第二基板125以及上偏光片126，其中，
[0143]
第一液晶层122设置在第一基板121远离控光面板11的一侧；
[0144]
彩膜层123设置在第一液晶层122远离第一基板121的一侧；
[0145]
黑矩阵层124设置在彩膜层123之间，并与彩膜层123同层设置；
[0146]
第二基板125设置在彩膜层123远离第一液晶层122的一侧；
[0147]
上偏光片126设置在第二基板125远离彩膜层123的一侧。
[0148]
在一种示例性实施例中，如图7所示，控光面板11可以包括：第三基板111、第二液
晶层112、第四基板113和下偏光片114，其中，
[0149]
第二液晶层112设置在第三基板111远离液晶显示面板12的一侧；
[0150]
第四基板113设置在第二液晶层112远离第三基板111的一侧；
[0151]
下偏光片114设置在第四基板113远离第二液晶层112的一侧。
[0152]
在一种示例性实施例中，显示装置还可以包括：黏附层71和中间偏光片72，其中，
[0153]
黏附层71设置在第三基板111靠近液晶显示面板12的一侧；
[0154]
中间偏光片72设置在黏附层71远离第三基板111的一侧。
[0155]
这里，采用中间黏附层将液晶显示面板与控光面板黏附在一起，并且在显示装置中设置了3张偏光片(即上偏光片、中间偏光片和下偏光片)。
[0156]
在一种示例性实施例中，如图7所示，该显示装置还可以包括：背光模组64，背光模组64设置在控光面板11的背光侧(即控光面板11远离液晶显示面板12的一侧)。
[0157]
在一种示例性实施例中，如图7所示，背光模组64可以包括：背板641、光源组件642、扩散板643、光学组件644和胶框645，其中，
[0158]
光源组件642设置在背板641靠近控光面板11的一侧，被配置为产生初始背光，并向控光面板11提供初始背光；
[0159]
扩散板643设置在光源组件642远离背板641的一侧(即位于光源组件642的出光侧)；
[0160]
光学组件644设置在扩散板643远离光源组件642的一侧(即位于光源组件642的出光侧)；
[0161]
胶框645设置在光学组件644远离光源组件642的一侧(即位于光源组件642的出光侧)，胶框645可以包括：用于承载和固定控光面板的承载部以及与承载部连接的支撑部，承载部在平行于控光面板的平面延伸，支撑部在垂直于控光面板的平面延伸；
[0162]
双目摄像头62(例如，红外摄像头)设置在承载部远离控光面板11的一侧。
[0163]
这里，以双目摄像头为红外摄像头为例，双目摄像头可以包括红外线的发射与接收两个功能，将其设置在胶框下侧的主要原因是由于这个位置的上侧没有太多的光学膜片(雾度)会影响摄像头图像的采集，同时考虑到偏光片对于红外波长(＞780nm)的透过性较好；而且背光模组产生的红外波段较少，红外摄像头不容易被干扰；此外，另外眼睛对于红外线的反射较优。如此，能够提高用户眼睛的位置信息的准确度。
[0164]
在一种示例性实施例中，光源组件包括多个光源，例如多个线光源或由多个点状光源组成，例如点光源可以为led(light emitting diode，发光二极管)光源，线光源可以为ccfl(cold cathode fluorescent lamp，冷阴极荧光灯管)光源等；例如，光源组件可以为直下式背光源或侧入式背光源等，侧入式背光源还包括导光板。
[0165]
在一种示例性实施例中，光学组件可以包括棱镜膜等光学功能膜。
[0166]
此外，上述显示装置还可以包括其他结构或膜层，例如，如图7所示，显示装置还可以包括前框73和橡胶层(rubber)74，本公开的实施例对此不作限定。例如，在一种示例性实施例中，双目摄像头可以设置在前框。例如，显示液晶面板可以包括例如栅线、数据线、像素电极、公共电极等用于显示的各种部件等。类似地，控光面板可以包括例如栅线、数据线、像素电极、公共电极等用于实现光控的各种部件等。
[0167]
在一种示例性实施例中，显示装置可以为：手机、平板电脑、电视机、显示器、笔记
本电脑、数码相框、导航仪等任何具有显示功能的产品或部件。对于该显示装置的其它必不可少的组成部分均为本领域的普通技术人员应该理解具有的，在此不做赘述，也不应作为对本发明的限制。
[0168]
由上述内容可知，本公开实施例提供的电子设备，结合偏光片的滤波特性，通过在显示面板与背光模组之间设置红外摄像头，达到一体式的效果。由于用户眼睛对于红外线的反射较优，更容易识别到用户眼睛的位置，这样，能够获得更准确的用户眼睛的位置信息。进而，通过更准确的用户眼睛的位置信息，就可以得到更准的在该用户眼睛的位置信息所对应的视角下，控光面板中的像素与液晶显示面板中的像素之间的像素对应关系，接下来，根据更准确的像素对应关系，就可以确定出更准确的控光面板的目标灰阶数据，如此，由于目标灰阶数据是一个多视角没有重影的控光面板的显示画面，那么，将原始灰阶数据输出至液晶显示面板，并将目标灰阶数据输出至控光面板，以执行显示时，使得在该用户眼睛的位置信息所对应的视角下，液晶显示面板中的像素所显示的内容和控光面板中的像素所显示的内容不会出现不重合的问题，从而，能够使用户在任何角度观看显示面板时，不会出现重影的问题。而且，还没有明显光晕，保证了对比度。进而，提高了显示效果，提升了用户的视觉体验。
[0169]
在一种示例性实施例中，本公开还提供了一种显示优化装置。该显示优化装置可以包括：处理器以及存储有可在处理器上运行的计算机程序的存储器，其中，处理器执行程序时实现上述一个或多个实施例中的显示方法的步骤。
[0170]
在一种示例性实施例中，如图8所示，该显示优化装置80可以包括：至少一个处理器801；以及与处理器801连接的至少一个存储器802、总线803；其中，处理器801、存储器802通过总线803完成相互间的通信；处理器801用于调用存储器802中的程序指令，以执行上述一个或多个实施例中的显示方法的步骤。
[0171]
在实际应用中，上述处理器可以是中央处理单元(central processing unit，cpu)、其他通用处理器、数字信号处理器(digital signal processor，dsp)、现场可编程门阵列(field programmable gate array，fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件、专用集成电路等。通用处理器可以是微处理器(micro processor unit，mpu)或者该处理器也可以是任何常规的处理器等。
[0172]
存储器可能包括计算机可读存储介质中的非永久性存储器，随机存储器(random access memory，ram)和/或非易失性内存等形式，如只读存储器(read only memory，rom)或闪存(flash ram)，存储器包括至少一个存储芯片。
[0173]
总线除包括数据总线之外，还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见，在图8中将各种总线都标为总线803。
[0174]
在实现过程中，显示优化装置所执行的处理可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。即本公开实施例的方法步骤可以体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等存储介质中。该存储介质位于存储器，处理器读取存储器中的信息，结合其硬件完成上述方法的步骤。为避免重复，这里不再详细描述。
[0175]
在一种示例性实施例中，本公开还提供了一种计算机可读存储介质，包括存储的
程序，其中，在程序运行时控制存储介质所在的设备执行上述一个或多个实施例中的显示方法的步骤。
[0176]
在实际应用中，上述计算机可读存储介质可以如：rom/ram、磁碟、光盘等。
[0177]
以上显示优化装置、电子设备或计算机可读存储介质实施例的描述，与上述方法实施例的描述是类似的，具有同方法实施例相似的有益效果。对于本公开显示优化装置、电子设备或计算机可读存储介质实施例中未披露的技术细节，请参照本公开方法实施例的描述而理解。在此不再赘述。
[0178]
本领域普通技术人员可以理解，上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。在硬件实施方式中，在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分；例如，一个物理组件可以具有多个功能，或者一个功能或步骤可以由若干物理组件合作执行。某些组件或所有组件可以被实施为由处理器，如数字信号处理器或微处理器执行的软件，或者被实施为硬件，或者被实施为集成电路，如专用集成电路。这样的软件可以分布在计算机可读介质上，计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的，术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于随机存储器(random access memory，ram)、只读存储器(read only memory，rom)、eeprom、闪存(flash ram)或其他存储器技术、cd-rom、数字多功能盘(dvd)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外，本领域普通技术人员公知的是，通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据，并且可包括任何信息递送介质。
[0179]
虽然本公开所揭露的实施方式如上，但所述的内容仅为便于理解本公开而采用的实施方式，并非用以限定本公开。任何本公开所属领域内的技术人员，在不脱离本公开所揭露的精神和范围的前提下，可以在实施的形式及细节上进行任何的修改与变化，但本公开的保护范围，仍须以所附的权利要求书所界定的范围为准。