用于显示器的投放对象调整方法、装置及显示器与流程

1.本技术涉及光学技术领域，例如涉及用于显示器的投放对象调整方法、装置及显示器。


背景技术：

2.目前，显示器在显示三维画面时可以基于观看对象的面部特征（比如眼球位置）来投放三维画面。但是，当观看场景中有多个观看对象时，显示器则需要从众多观看对象中选择一个投放对象来显示画面。
3.相关技术中，显示器会针对固定位置对应的观看对象进行持续的三维画面的投放，导致其他位置的观看对象在更有观看意愿的情况下（例如靠近显示器）也无法被投放三维画面，从而影响观看体验。


技术实现要素：

4.为了对披露的实施例的一些方面有基本的理解，下面给出了简单的概括。该概括不是泛泛评述，也不是要确定关键／重要组成元素或描绘这些实施例的保护范围，而是作为后面的详细说明的序言。
5.本公开实施例提供了一种用于显示器的投放对象调整方法、装置及显示器，以解决多人观看时观看对象固定不变的技术问题。
6.本公开实施例提供一种用于显示器的投放对象调整方法，包括：获取显示器的多个观看对象的面部图像，面部图像包含与多个观看对象对应的多个面部区域；获取多个面部区域中的每个面部区域相对显示器的距离变化量；基于距离变化量，动态调整显示器所投放的观看对象对应的目标面部区域。
7.在一些实施例中，获取多个面部区域中的每个面部区域相对显示器的距离变化量，可以包括：获取每个面部区域相对显示器中的参考点的距离变化量。
8.在一些实施例中，参考点，可以包括：预设固定参考点，或，显示器显示的特征点。
9.在一些实施例中，固定参考点，可以包括：显示器中的任意点，或，在显示器与观看对象之间的任意点。
10.在一些实施例中，特征点，可以包括：显示器显示画面的特征区域中的指定点。
11.在一些实施例中，特征区域根据显示画面的特征变化而动态变化。
12.在一些实施例中，基于距离变化量，动态调整显示器所投放的观看对象对应的目标面部区域，可以包括：基于距离变化量获取每个面部区域的速度变化量；
基于速度变化量确定目标面部区域。
13.在一些实施例中，速度变化量，可以包括：速度参数和加速度参数中的至少之一。
14.在一些实施例中，基于速度变化量确定所述目标面部区域，可以包括：当速度变化量中包含加速度参数时，确定加速度参数最大的面部区域为目标面部区域。
15.本公开实施例还提供一种用于显示器的投放对象调整装置，包括处理器和存储有程序指令的存储器，所述处理器被配置为在执行所述程序指令时，执行上述的用于显示器的投放对象调整方法。
16.本公开实施例还提供一种用于显示器的投放对象调整装置，包括：第一获取模块，被配置为获取显示器的多个观看对象的面部图像，面部图像包含与多个观看对象对应的多个面部区域；第二获取模块，被配置为获取多个面部区域中的每个面部区域相对显示器的距离变化量；对象调整模块，被配置为基于所述距离变化量，动态调整显示器所投放的观看对象对应的目标面部区域。
17.在一些实施例中，第二获取模块，可以被配置为：获取每个面部区域相对显示器中的参考点的距离变化量。
18.在一些实施例中，参考点，可以包括：预设固定参考点，或，显示器显示的特征点。
19.在一些实施例中，固定参考点，可以包括：显示器中的任意点，或，在显示器与观看对象之间的任意点。
20.在一些实施例中，特征点，可以包括：显示器显示画面的特征区域中的指定点。
21.在一些实施例中，特征区域根据显示画面的特征变化而动态变化。
22.在一些实施例中，对象调整模块，可以被配置为：基于距离变化量获取每个面部区域的速度变化量；基于速度变化量确定目标面部区域。
23.在一些实施例中，速度变化量，可以包括：速度参数和加速度参数中的至少之一。
24.在一些实施例中，对象调整模块基于速度变化量确定目标面部区域，可以被配置为：当速度变化量中包含加速度参数时，确定加速度参数最大的面部区域为目标面部区域。
25.本公开实施例还提供一种显示器，所述显示器包括上述的用于显示器的投放对象调整装置。
26.本公开实施例提供的用于显示器的投放对象调整方法、装置及显示器，可以实现以下技术效果：可以在多人观看显示器时，基于观看对象与显示器之间的距离变化动态调整显示
器的投放对象，提升观看体验。
27.以上的总体描述和下文中的描述仅是示例性和解释性的，不用于限制本技术。
附图说明
28.至少一个实施例通过与之对应的附图进行示例性说明，这些示例性说明和附图并不构成对实施例的限定，附图中具有相同参考数字标号的元件示为类似的元件，附图不构成比例限制，并且其中：图1是本公开实施例提供的用于显示器的投放对象调整方法的流程示意图；图2是本公开实施例提供的一种观看场景示意图；图3是本公开实施例提供的一种面部图像示意图；图4是本公开实施例提供的一种参考点的示意图；图5是本公开实施例提供的另一种参考点的示意图；图6是本公开实施例提供的另一种参考点的示意图；图7是本公开实施例提供的另一种观看场景的示意图；图8是本公开实施例提供的另一种观看场景的示意图；图9是本公开实施例提供的一种参考点变化后的观看场景的示意图；图10是本公开实施例提供的一种观看对象移动后的观看场景的示意图；图11是本公开实施例提供的观看对象移动后的面部图像示意图；图12是本公开实施例提供的观看对象移动前后的面部图像对比示意图；图13是本公开实施例提供的一种用于显示器的投放对象调整装置的结构示意图；图14是本公开实施例提供的另一种用于显示器的投放对象调整装置的结构示意图。
29.附图标记：10：显示器；11：摄像头；12：显示界面；a、b、c：观看对象；20：面部图像；21、22、23：面部区域；30、40、50：显示内容；80：用于显示器的投放对象调整装置；801：处理器；802：存储器；803：通信接口；804：总线；90：用于显示器的投放对象调整装置；901：第一获取模块；902：第二获取模块；903：对象调整模块。
具体实施方式
30.为了能够更加详尽地了解本公开实施例的特点与技术内容，下面结合附图对本公开实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本公开实施例。在以下的技术描述中，为方便解释起见，通过多个细节以提供对所披露实施例的充分理解。然而，在没有这些细节的情况下，至少一个实施例仍然可以实施。在其它情况下，为简化附图，熟知的结构和装置可以简化展示。
31.如图1所示，本公开实施例提供的用于显示器的投放对象调整方法，包括：s101、获取显示器的多个观看对象的面部图像，面部图像包含与多个观看对象对
应的多个面部区域；s102、获取多个面部区域中的每个面部区域相对显示器的距离变化量；s103、基于距离变化量，动态调整显示器所投放的观看对象对应的目标面部区域。
32.本公开可以在多人观看显示器时，基于观看对象与显示器之间的距离变化比较观看对象的观看欲望，从而动态调整显示器的投放对象，因此可以尽量满足观看欲望较高的观看对象的观看需求，提升观看体验。
33.在一些实施例中，显示器可以用于各种显示场景，例如手机显示器、平板电脑显示器、计算机显示器、电视显示器、电影院屏幕等。
34.在一些实施例中，显示器可以基于观看对象的面部区域来获取观看对象的眼球位置，从而基于眼球位置为观看对象投放三维立体画面。当多个观看对象观看同一个显示器时，该显示器可以获取多个观看对象中的每个观看对应的面部区域，然后显示器可以在这些面部区域中，选择一个或多个目标面部区域，然后基于选择出的一个或多个目标面部区域中的眼球位置为对应的一个或多个观看对象进行画面投放，以使被投放的观看对象观看到效果较佳的三维立体画面。
35.在一些实施例中，如图2所示的场景中包括观看对象a、观看对象b、观看对象c（图中示例性示出3个观看对象，实际观看对象的数量不限）观看显示器10的显示界面12时，显示器10可以通过摄像头11来获取当前多个观看对象的面部图像20。该面部图像20中包含与多个观看对象对应的多个面部区域，如图3所示，与观看对象a对应的面部区域21、与观看对象b对应的面部区域22、与观看对象c对应的面部区域23。可选地，该面部区域可以是观看对象的面部的外轮廓所覆盖的区域，或者是包含该面部外轮廓的最小矩形覆盖的区域，或者是包含该面部外轮廓的其他形状覆盖的区域。
36.在一些实施例中，摄像头11可以是显示器10自带的内置摄像头，也可以是显示器10的外接摄像头。可选地，摄像头11可以是单目相机、双目相机、3d相机、以及tof（time of flight，飞行时间）相机等等。
37.在一些实施例中，显示器10获取多个面部区域中的每个面部区域相对所述显示器的距离变化量可以包括：获取每个面部区域相对显示器10中的参考点的距离变化量。可选地，上述距离变化量可以是一段时间内的距离变化量。距离变化量可以基于至少两个时刻对应的面部图像计算得到。这至少两个时刻可以是相邻的时刻，或按照固定周期获取的至少两个时刻，或者是指定的至少两个时刻。
38.例如，假设摄像头11每一秒拍摄得到一帧面部图像20，如果显示器10需要获取一段时间内（如2秒）的面部区域相对显示器10中的参考点的距离变化量，则显示器10可以获取包含当前帧的两帧历史面部图像，通过计算这2帧历史面部图像来得到面部区域相对显示器10中的参考点在2秒内的距离变化量。可选地，这两帧面部图像可以是相邻两秒获取的面部图像，也可以是不相邻的时间获取的面部图像，例如第1秒的一帧面部图像和第三秒的一帧面部图像。
39.例如，假设摄像头11每一秒拍摄得到一帧面部图像20，如果显示器10需要获取一段时间内（如10秒）的面部区域相对显示器10中的参考点的距离变化量，则显示器10可以获取包含当前帧的10帧历史面部图像，通过计算这10帧历史面部图像来得到面部区域相对显示器10中的参考点在10秒内的距离变化量。
40.在一些实施例中，该面部图像20可以包含每个面部区域的空间坐标系下的位置信息，其中，该位置信息可以包含深度信息。该面部图像20也可以通过坐标系转换得到包含每个面部区域的空间坐标系下的位置信息。
41.如图4所示，面部区域相对显示器10中的参考点的距离变化量，可以是空间坐标系下的面部区域和显示器中的参考点p在各个坐标轴（例如x轴、y轴、z轴）上对应的距离变化量，也可以是空间坐标系下的面部区域和显示器中的参考点p的直线距离变化量，或者是平面坐标系下的面部区域和显示器中的参考点p的直线距离变化量。例如，空间坐标系下，显示器中的参考点的坐标为（0，0，0），某一面部区域中的指定点（例如面部区域的中心点或眼球）的第一帧的坐标是（1，2，3），该指定点的第二帧的坐标是（4，5，6），则该距离变化量可以包括以下情况至少之一：空间坐标系下的面部区域和参考点在x轴上对应的距离变化量，即4-1=3；空间坐标系下的面部区域和参考点在y轴上对应的距离变化量，即5-2=3；空间坐标系下的面部区域和参考点在z轴上对应的距离变化量，即6-3=3；平面坐标系下的面部区域和参考点的直线距离变化量，即（1，2）和（4，5）的欧氏距离=sqrt((4-1)^2 (5-2)^2)=sqrt(18)≈4；空间坐标系下的面部区域和参考点的直线距离变化量，即（1，2，3）和（4，5，6）的欧氏距离=sqrt((4-1)^2 (5-2)^2 (6-3)^2)=sqrt(27)≈5。
42.在一些实施例中，参考点可以包括：预设固定参考点，或，所述显示器显示的特征点。
43.在一些实施例中，该预设固定参考点可以是一个位置固定的点，该固定参考点可以包括：显示器中的任意点，或，在显示器与观看对象之间的任意点。其中：显示器中的任意点，例如摄像头11的光心，或者显示器10的显示界面12中心点，或者是显示器10的左上角，等等，位于显示器中的或显示器表面的任意固定位置的点；如图4所示，参考点p位于摄像头11光心。
44.在显示器与观看对象之间的任意点，例如，垂直于摄像头11光心的直线上的，与观看对象之间任意空间位置的点；或者是垂直于显示器10的显示界面12中心点的直线上的，与观看对象之间任意空间位置的点；还可以是在显示器和观看对象之间的在摄像头11拍摄范围内的其他空间位置中的点。如图5所示，参考点p位于垂直于摄像头11光心的直线上。
45.在一些实施例中，该面部图像20可以包含每个面部区域在面部图像20的图像像素坐标系下的位置信息。如图6所示，面部图像20中的图像中心点可以作为参考点p，每个面部区域相对参考点的距离可以通过：在每个面部区域制作最小矩形（如图6中虚线框所示），以最小矩形的中心点（图中未示出）为面部区域的指定点，基于面部区域的指定点和参考点p计算面部区域相对参考点的距离变化量。
46.在一些实施例中，显示器显示的特征点可以包括显示器显示画面的特征区域中的指定点。显示器显示的画面中的具有指定特征的区域可以称为特征区域。由于显示内容会不断变化，因此特征区域也会根据显示画面的特征变化而动态变化。
47.可选地，显示画面中的具有明显3d效果的图像区域可以作为特征区域。如图7所示，显示器10的显示画面中包括显示内容30、显示内容40，其中显示内容30这个飞行员相对显示内容40的3d效果更佳明显，因此可以以显示内容30所在的图像区域为特征区域，显示
内容30中的某一点可以作为特征点。
48.可选地，当多个显示内容都具有3d效果时，可以以画面主体所在的区域作为特征区域。如图8所示，显示器10的显示画面中包括显示内容30、显示内容40、显示内容50，其中显示内容30这个飞行员和显示内容50的土星都有明显的3d效果，而显示内容30最大且靠近画面中心，则显示内容30为画面主体，因此以画面主体（显示内容30）所在的区域为特征区域，显示内容30中的某一点可以作为特征点。而当显示内容后续发生变化后，如图9所示，此时显示内容50最大且靠近画面中心，因此显示内容50变为了画面主体，则显示内容50所在的区域作为新的特征区域，显示内容50中的某一点可以作为新的特征点。
49.在一些实施例中，可以以特征区域中的指定点为特征点，例如特征区域中的画面中心点可以作为特征点。
50.在一些实施例中，显示器可以基于上述距离变化量，动态调整所述显示器所投放的观看对象对应的目标面部区域，例如，可以从多个面部区域中选择靠近参考点方向的距离变化量最大的面部区域为目标面部区域，由于该面部区域相对其他面部区域更向参考点方向靠近，可以说明该面部区域对应的观看对象有靠近参考点的移动趋势，从而推断出该观看对象相比其他观看对象的观看期望更高，因此以该观看对象作为显示器投放的观看对象最符合用户需求。
51.在一些实施例中，显示器可以基于上述距离变化量，动态调整所述显示器所投放的观看对象对应的目标面部区域，可以具体包括：先基于距离变化量获取每个面部区域的速度变化量，再基于速度变化量确定所述目标面部区域。可选地速度变化量，可以包括但不限于：速度参数和加速度参数中的至少之一。
52.在一些实施例中，显示器可以根据获取的面部图像的时间段，以及面部图像中的每个面部区域的距离变化量，通过速度或加速度公式计算出每个面部区域在这个时间段内移动的速度参数、以及加速度参数。假设，某一面部区域匀速运动，其5秒内距离变化量是100cm，则速度参数为100cm/5s=0.2m/s；假设某一面部区域加速运动，其5秒内，每一秒的距离变化量是分别是10cm、20cm、30cm、40cm、50cm，则每一秒的速度参数分别为10cm/1s=0.1m/s、20cm/1s=0.2m/s、30cm/1s=0.3m/s、40cm/1s=0.4m/s、50cm/1s=0.5m/s，则这5秒钟的加速度参数为：（0.5-0.1）/5=0.08m/s
²
。
53.在一些实施例中，显示器基于速度变化量确定目标面部区域时，可以基于速度参数或加速度参数中至少之一确定目标面部区域。
54.可选地，当速度变化量中只有速度参数时，可以基于速度参数大小来确定目标面部区域，例如，速度参数最大的面部区域可以作为目标面部区域。
55.可选地，当速度变化量中包含加速度参数时，可以确定加速度参数最大的面部区域可以作为所述目标面部区域。
56.可选地，当速度变化量中包含加速度参数时，还可以结合速度和加速度一起确定目标面部区域，例如给速度参数设置一个较小的权重值，给加速度参数设置一个较大的权重值，对速度参数和加速度参数加权处理，结果数值最大的面部区域可以作为目标面部区域。
57.在一些实施例中，以图8和图10所示场景为例，假设第一时刻的观看场景为图8所示，显示器10的摄像头拍摄的观看对象的面部图像如图3所示，此时观看对象a距离显示器
最近，假设当前以观看对象a的面部区域作为目标面部区域，则可以基于观看对象a的面部区域21获取观看对象a的眼球位置，从而基于该眼球位置使显示器10的显示画面向观看对象a的眼球方向投放。如果第二时刻的观看场景为图10所示，此时观看对象b向显示器方向移动，从第一时刻的观看对象b’位置移动到了当前的观看对象b的位置，观看对象a和观看对象c没有移动，因此第二时刻拍摄的面部图像20的内容发生了变化，第二时刻的面部图像20如图11所示，观看对象b对应的面部区域的位置和大小都发生了变化。为了更好的对比面部区域的变化，参见图12，移动前的观看对象b’的面部区域22’和移动后的观看对象b的面部区域22比较可以知道观看对象b移动的距离变化量d。假设显示器的摄像头光心为参考点，由于观看对象a和观看对象c没有移动，观看对象b向参考点移动，因此观看对象a和观看对象c的距离变化量为0，观看对象b移动的距离变化量d。从而确定以面部图像20中的观看对象b的面部区域22作为目标面部区域，则可以基于观看对象b的面部区域22获取观看对象b的眼球位置，从而基于该眼球位置使显示器10的显示画面向观看对象b的眼球方向投放。根据本实施例可知，观看对象b通过移动靠近显示器，代表观看对象b的观看期望更大，因此将显示画面投放给观看对象b可以满足用户需求。
58.在一些实施例中，当由于参考点的位置发生变化导致观看对象与参考点的距离变化量发生变化时，投放对象也会发生改变。以图8和图9所示场景为例，假设第一时刻的观看场景为图8所示，此时的参考点为显示内容30的中心点，假设此时观看对象a距离参考点最近，则当前以观看对象a的面部区域作为目标面部区域，则可以基于观看对象a的面部区域21获取观看对象a的眼球位置，从而基于该眼球位置使显示器10向观看对象a的眼球方向投放显示内容30的效果相对最佳。如果第二时刻的观看场景为图9所示，此时显示对象50变为了画面中心，则显示对象50的中心点作为了新的参考点，由于参考点变了，观看对象没有移动的情况下，观看对象和参考点的距离也会发生改变。假设此时观看对象b的距离变化量最大，则确定以图3的面部图像20中的观看对象b的面部区域22作为目标面部区域，则可以基于观看对象b的面部区域22获取观看对象b的眼球位置，从而基于该眼球位置使显示器10向观看对象b的眼球方向投放显示内容50的效果相对最佳。因此即使观看对象位置不变，当显示内容发生变化时，可以基于距离变化量调整投放对象，从而使用户体验更好的观看效果。
59.在一些实施例中，如果在获取距离变化量的期间内，部分或全部的观看对象离开该观看场景，则删除这些观看对象的距离变化量。
60.在一些实施例中，如果在获取距离变化量的期间内，该观看场景新增一个或多个观看对象，则可以将新增的观看对象与当前存在的观看对象一起比较，一直存在的观看对象的计算速度变化量的时间参数不变，新增的观看对象的计算速度变化量的时间参数以进入到观看场景时的时间起算。
61.本公开实施例提供了一种用于显示器的投放对象调整装置，包括处理器和存储有程序指令的存储器，处理器被配置为在执行程序指令时，执行上述的用于显示器的投放对象调整方法。
62.参见图13，在一些实施例中，用于显示器的投放对象调整装置80可以包括：处理器（processor）801和存储器（memory）802，还可以包括通信接口（communication interface）803和总线804。其中，处理器801、通信接口802、存储器802可以通过总线804完成相互间的通信。通信接口803可以用于信息传输。处理器801可以调用存储器802中的逻辑指令，以执
行上述实施例的用于显示器的投放对象调整方法。
63.此外，上述的存储器802中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。
64.存储器802作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序，如本公开实施例中的方法对应的程序指令/模块。处理器801通过运行存储在存储器802中的程序指令/模块，从而执行功能应用以及数据处理，即实现上述方法实施例中的用于显示器的投放对象调整方法。
65.存储器802可包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端设备的使用所创建的数据等。此外，存储器802可以包括高速随机存取存储器，还可以包括非易失性存储器。
66.本公开实施例提供了另一种用于显示器的投放对象调整装置，参见图14，在一些实施例中，用于显示器的投放对象调整装置90可以包括：第一获取模块901，被配置为获取显示器的多个观看对象的面部图像，面部图像包含与多个观看对象对应的多个面部区域；第二获取模块902，被配置为获取多个面部区域中的每个面部区域相对所述显示器的距离变化量；对象调整模块903，被配置为基于所述距离变化量，动态调整显示器所投放的观看对象对应的目标面部区域。
67.在一些实施例中， 第二获取模块902可以被配置为：获取每个面部区域相对显示器中的参考点的距离变化量。
68.在一些实施例中，参考点可以包括：预设固定参考点，或，显示器显示的特征点。
69.在一些实施例中，固定参考点可以包括：显示器中的任意点，或，在显示器与观看对象之间的任意点。
70.在一些实施例中，特征点可以包括：显示器显示画面的特征区域中的指定点。
71.在一些实施例中，特征区域根据显示画面的特征变化而动态变化。
72.在一些实施例中，对象调整模块903可以被配置为：基于距离变化量获取每个面部区域的速度变化量；基于速度变化量确定目标面部区域。
73.在一些实施例中，速度变化量可以包括：速度参数和加速度参数中的至少之一。
74.在一些实施例中，对象调整模块基于速度变化量确定目标面部区域，被配置为：当速度变化量中包含加速度参数时，确定加速度参数最大的面部区域为目标面部区域。
75.在一些实施例中，用于显示器的投放对象调整装置90中的各个模块可以是虚拟的功能模块或者是逻辑硬件，各个模块之间具有逻辑连接关系。
76.本公开实施例提供了一种显示器，包含上述的用于显示器的投放对象调整装置。
77.本公开实施例提供的用于显示器的投放对象调整方法、装置和显示器，在多人观看显示器时可以动态调整显示器的投放对象，从而提升观看体验。
78.本公开实施例提供了一种计算机可读存储介质，存储有计算机可执行指令，该计算机可执行指令设置为执行上述用于显示器的投放对象调整方法。
79.本公开实施例提供了一种计算机程序产品，包括存储在计算机可读存储介质上的计算机程序，该计算机程序包括程序指令，当该程序指令被计算机执行时，使上述计算机执行上述用于显示器的投放对象调整方法。
80.上述的计算机可读存储介质可以是暂态计算机可读存储介质，也可以是非暂态计算机可读存储介质。
81.本公开实施例提供的计算机可读存储介质和计算机程序产品，可以在多人观看显示器时可以动态调整显示器的投放对象，从而提升观看体验。
82.本公开实施例的技术方案可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括至少一个指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本公开实施例的方法的全部或部分步骤。而前述的存储介质可以是非暂态存储介质，包括：u盘、移动硬盘、只读存储器（rom，read-only memory）、随机存取存储器（ram，random access memory）、磁碟或者光盘等多种可以存储程序代码的介质，也可以是暂态存储介质。
83.以上描述和附图充分地示出了本公开的实施例，以使本领域技术人员能够实践它们。其他实施例可以包括结构的、逻辑的、电气的、过程的以及其他的改变。实施例仅代表可能的变化。除非明确要求，否则单独的部件和功能是可选的，并且操作的顺序可以变化。一些实施例的部分和特征可以被包括在或替换其他实施例的部分和特征。本公开实施例的范围包括权利要求书的整个范围，以及权利要求书的所有可获得的等同物。当用于本技术中时，虽然术语“第一”、“第二”等可能会在本技术中使用以描述各元件，但这些元件不应受到这些术语的限制。这些术语仅用于将一个元件与另一个元件区别开。比如，在不改变描述的含义的情况下，第一元件可以叫做第二元件，并且同样地，第二元件可以叫做第一元件，只要所有出现的“第一元件”一致重命名并且所有出现的“第二元件”一致重命名即可。第一元件和第二元件都是元件，但可以不是相同的元件。而且，本技术中使用的用词仅用于描述实施例并且不用于限制权利要求。如在实施例以及权利要求的描述中使用的，除非上下文清楚地表明，否则单数形式的“一个”（a）、“一个”（an）和“所述”（the）旨在同样包括复数形式。类似地，如在本技术中所使用的术语“和/或”是指包含一个或一个以上相关联的列出的任何以及所有可能的组合。另外，当用于本技术中时，术语“包括”（comprise）及其变型“包括”（comprises）和/或包括（comprising）等指陈述的特征、整体、步骤、操作、元素，和/或组件的存在，但不排除一个或一个以上其它特征、整体、步骤、操作、元素、组件和/或这些的分组的存在或添加。在没有更多限制的情况下，由语句“包括一个
…”
限定的要素，并不排除在包括该要素的过程、方法或者设备中还存在另外的相同要素。本文中，每个实施例重点说明的可以是与其他实施例的不同之处，各个实施例之间相同相似部分可以互相参见。对于实施例公开的方法、产品等而言，如果其与实施例公开的方法部分相对应，那么相关之处可以参见方法部分的描述。
84.本领域技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，可以取决于技术方案的特定应用和设计约束条件。本领域技术人
员可以对每个特定的应用来使用不同方法以实现所描述的功能，但是这种实现不应认为超出本公开实施例的范围。本领域技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
85.本文所披露的实施例中，所揭露的方法、产品（包括但不限于装置、设备等），可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，单元的划分，可以仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例。另外，在本公开实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
86.在附图中，考虑到清楚性和描述性，可以夸大元件或层等结构的宽度、长度、厚度等。当元件或层等结构被称为“设置在”（或“安装在”、“铺设在”、“贴合在”、“涂布在”等类似描述）另一元件或层“上方”或“上”时，该元件或层等结构可以直接“设置在”上述的另一元件或层“上方”或“上”，或者可以存在与上述的另一元件或层之间的中间元件或层等结构，甚至有一部分嵌入上述的另一元件或层。
87.附图中的流程图和框图显示了根据本公开实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，上述模块、程序段或代码的一部分包含至少一个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个或更多的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这可以依所涉及的功能而定。在附图中的流程图和框图所对应的描述中，不同的方框所对应的操作或步骤也可以以不同于描述中所披露的顺序发生，有时不同的操作或步骤之间不存在特定的顺序。例如，两个或更多的操作或步骤实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这可以依所涉及的功能而定。框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。以上所述方式可以应用于附图及其对应的描述，也可以应用于不与附图对应的描述。