显示装置、光场采集方法、图像数据传输方法及相关设备与流程

1.本公开涉及显示技术领域，尤其涉及一种显示装置、光场采集方法、图像数据传输方法及相关设备。


背景技术：

2.由于3d图像具有突出的立体感，使得观看3d图像时的沉浸式的效果更好，进而越来越多的人喜欢3d图像的成像产品。
3.现有的3d图像采集设备，需要通过多个相机采集多幅图像通过算法进行合成，但是通过算法合成耗时较长，这样就会导致图像采集的实时效果较差。


技术实现要素：

4.有鉴于此，本公开的目的在于提出一种显示装置、光场采集方法、图像数据传输方法及相关设备。
5.基于上述目的，本公开第一方面提供了一种显示装置，设置显示区和光场采集区，所述显示装置包括：
6.显示面板，包括设置在所述显示区的显示结构和设置在所述光场采集区的选光结构，被配置为根据观看用户的位置确定所述选光结构的透光区域，控制所述透光区域处于透光状态：
7.背光模组，设置在所述显示结构的背光侧；
8.相机阵列，设置在所述选光结构的背光侧，被配置为启动与所述透光区域对应的至少一个相机进行3d图像采集，得到3d图像信息。
9.本公开的第二方面，提供了一种应用于第一方面所述的显示装置的光场采集方法，包括：
10.根据观看用户的位置，确定显示面板中选光结构与所述观看用户的位置相应的透光区域，控制所述透光区域处于透光状态；
11.控制相机阵列中所述透光区域对应的至少一个相机启动进行3d图像采集，得到3d图像信息。
12.本公开第三方面，提供了一种图像数据传输方法，包括：
13.接收观看用户端发来的3d图像采集指令；
14.接收位置追踪设备发来的观看用户的位置；
15.利用第二方面所述的光场采集方法，基于所述3d图像采集指令和所述观看用户的位置采集3d图像信息；
16.将所述3d图像信息发送至所述观看用户端进行3d显示。
17.本公开第四方面，提供了一种图像数据传输装置，包括：
18.接收模块，被配置为接收观看用户端发来的3d图像采集指令，以及接收位置追踪设备发来的观看用户的位置；
19.3d成像模块，被配置为利用权利要求5至8任一项所述的光场采集方法，基于所述3d图像采集指令和所述观看用户的位置采集3d图像信息；
20.发送模块，被配置为将所述3d图像信息发送至所述观看用户端进行3d显示。
21.本公开第五方面，提供了一种计算机设备，包括一个或者多个处理器、存储器；和一个或多个程序，其中所述一个或多个程序被存储在所述存储器中，并且被所述一个或多个处理器执行，所述程序包括用于执行第二方面或第三方面所述的方法的指令。
22.本公开第六方面，提供了一种包含计算机程序的非易失性计算机可读存储介质，当所述计算机程序被一个或多个处理器执行时，使得所述处理器执行第二方面或第三方面所述的方法。
23.本公开第七方面，提供了一种计算机程序产品，包括计算机程序指令，当所述计算机程序指令在计算机上运行时，使得所述计算机执行如第二方面或第三方面所述的方法。
24.从上面所述可以看出，本公开提供的显示装置、光场采集方法、图像数据传输方法及相关设备，进行光场采集的部分能够与显示部分共用同一个显示面板，这样使用更加方便，整体结构更加美观。进行光场采集时，能够根据观看用户的位置确定相应的透光区域，让该透光区域处于透光状态，并打开该透光区域对应的相机，使得图像光线能够通过透光区域透射至相机上，进而通过相机进行3d图像采集，然后将采集的3d图像发送到观看用户端进行显示。这样能够根据观看用户的位置对透光区域进行调节，设置在显示装置上的相机能够以观看用户的视角采集对应的3d图像，无需算法合成，在保证3d图像质量的同时，能够减少时延时间，保证了3d图像传输的实时性。
附图说明
25.为了更清楚地说明本公开或相关技术中的技术方案，下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本公开的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
26.图1a示出了相关技术中两个用户进行视频通话时的应用场景的示意图；
27.图1b示出了相关技术中控制不同的相机进行图像采集的示意图；
28.图1c示出了相关技术中进行视点差值合成的示意图；
29.图2a示出了本公开实施例的显示装置的结构示意图；
30.图2b示出了本公开实施例的显示装置的显示区和光场采集区的分布示意图；
31.图2c示出了本公开实施例的透光区域的选择示意图；
32.图2d示出了本公开实施例的相机阵列的排布示意图；
33.图2e示出了本公开实施例的透光组件的结构示意图；
34.图3a示出了本公开实施例的显示装置的光场采集方法的流程图；
35.图3b示出了0视场下两个相机采集像素的示意图；
36.图3c示出了1视场下两个相机采集像素的示意图；
37.图3d示出了两个相机以及透光区域对应的孔径的示意图；
38.图3e示出了对两个相机拍摄的像素进行加和的示意图；
39.图3f示出了一个相机采集像素的示意图；
40.图4示出了本公开实施例的图像数据传输方法的流程图；
41.图5示出了本公开实施例的图像数据传输装置的结构框图；
42.图6示出了本公开实施例的计算机设备的硬件结构示意图。
43.附图标记说明：200、显示装置；
44.210、显示面板，210a、显示结构，210b、选光结构，211、第一偏光片，212、第一基板，2121、彩膜层，213、液晶层，214、第二基板，2141、透光组件，21411、透明像素电极，21412、驱动单元，215、第二偏光片；
45.220、背光模组；
46.230、相机阵列；
47.500、图像数据传输装置；
48.510、接收模块，520、3d成像模块，530、发送模块。
具体实施方式
49.为使本公开的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本公开进一步详细说明。
50.需要说明的是，除非另外定义，本公开实施例使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。本公开实施例中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而只是用来区分不同的组成部分。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接，而是可以包括电性的连接，不管是直接的还是间接的。
51.下述各个实施例中描述的观看用户的位置的获取过程均是经过观看用户确认允许获取的前提下获取得到的。具体实施时，会在观看用户使用的终端设备上弹出“是否允许获取位置”的弹窗，用户点击确认后，再获取观看用户的位置，或者是观看用户通过终端设备预先设置好能够允许获取位置，进而在获取观看用户的位置时，不会弹出相应的对话框。
52.另外，下述实施例中描述的进行3d图像采集也是经过显示装置的用户授权之后，再进行3d图像的采集和传输过程。
53.相关技术中，如图1a所示，主要由2个分别配备有光场相机阵列(图1a中的光场相机阵列a和光场相机阵列b)的3d显示端口(图1a中的显示屏a和显示屏b)组成。用户a可在显示屏a前看到用户b的3d像，用户b则可在显示屏b前看到用户a的3d像，并且2个用户的3d图像信号分别由另外一个显示端口配备的光场相机阵列实时采集而来。
54.进行3d图像采集所用的相机为rgbd(red green blue depth，深度图像采集)相机，能够采集图像的深度信息。通过rgbd相机采集带有深度信息的图像，对拍摄的图像进行3d建模，再将建模后的3d图像模型传输至另外一个端口，进行排图后显示。
55.这种方式针对用户b想要看用户a的3d图像时，如图1b所示，用户b相对于用户a的位置是随机且连续的，但是相机阵列的数量有限，位置是离散且固定的，因此需要根据用户b的位置来决定在装置a使用离该位置最近的2个相机来采集图像，然后再进行视点合成。如图1c所示，用户b的位置对应装置a虚线相机的位置，但该位置没有实体相机，因此装置b在
显示前先使用相机n和相机n 1采集的图像进行视点插值算法进行合成。
56.这样做带来的问题有：视点插值图像毕竟是使用视点插值算法进行的合成，因此图像质量不如在该位置直接拍摄好，并且视点插值算法需要较长的时间，实时性较差。
57.基于上述问题，本公开实施例提供了一种显示装置200，如图2a所示，设置显示区和光场采集区，所述显示装置200包括：
58.显示面板210，包括设置在所述显示区的显示结构210a和设置在所述光场采集区的选光结构210b，被配置为根据观看用户的位置确定所述选光结构210b的透光区域(如图2c所示的像素打开区)，控制所述透光区域处于透光状态：背光模组220，设置在所述显示结构210a的背光侧；相机阵列230，设置在所述选光结构210b的背光侧，被配置为启动与所述透光区域对应的至少一个相机进行3d图像采集。
59.具体实施时，没有进行3d图像采集时，光场采集区处于不透光的黑暗状态，用户可以通过显示区观看相应的画面播放内容。需要进行3d图像采集时，观看用户会通过终端设备发来获取3d图像的请求，请求中会携带观看用户的位置。这样显示装置200就可以根据观看用户的位置，将选光结构210b中与观看用户的位置相应的透光区域打开，让光线通过该透光区域透射过来；并控制相机阵列230中透光区域对应的至少一个相机启动进行3d图像采集，得到3d图像信息，将该3d图像信息发送给观看用户的终端设备，观看用户就可以观看到3d图像。如果观看用户位置产生移动，显示装置200会实时调整对应的透光区域以及启动的相机。
60.其中，光场采集部分可以设置在显示装置200的上部或者下部，具体的设置位置这里不作具体限定(如图2b所示，光场采集区设置在显示装置200的上部)。观看用户的终端设备为能够进行3d图像显示的终端设备。
61.通过上述方案，进行光场采集的部分能够与显示部分共用同一个显示面板210，这样使用更加方便，整体结构更加美观。进行光场采集时，能够根据观看用户的位置确定相应的透光区域，让该透光区域处于透光状态，并打开该透光区域对应的相机，使得图像光线能够通过透光区域透射至相机上，进而通过相机进行3d图像采集，然后将采集的3d图像发送到观看用户端进行显示。这样能够根据观看用户的位置对透光区域进行调节，设置在显示装置200上的相机能够以观看用户的视角采集对应的3d图像，无需算法合成，在保证3d图像质量的同时，能够减少时延时间，保证了3d图像传输的实时性。
62.在一些实施例中，所述显示面板210为lcd(liquid crystal display，液晶显示)面板。如图2a所示，所述显示面板210包括：
63.第一基板212，包括正投影位于所述显示区的彩膜层2121；液晶层213；第二基板214，包括正投影位于所述光场采集区的多个透光组件2141，被配置为根据观看用户的位置确定光场采集区的透光区域，并打开所述透光区域对应的至少一个透光组件2141。另外显示面板210还包括：第一偏光片211，设置在所示第一基板的向光侧；第二偏光片215，设置在所述第二基板214正投影位于所述光场采集区的背光侧。
64.具体实施时，显示面板210中第一偏光片211、第一基板212、液晶层213、第二基板214和第二偏光片215，是沿入光方向依次设置的。其中第一基板212和第二基板214为透明的基板，本实施例优选为玻璃基板。
65.在显示区，对应的第一基板212设置彩膜层2121，并且在第二偏光片215的后面设
置背光模组220，进而保证能够在显示区正常播放画面内容。
66.在光场采集区，对应的第一基板212上没有彩膜层2121，是为了使得该光场采集区的第一基板212为纯色透明状，这样才能保证透光效果。并且在第二基板214的光场采集区部分设置多个透光组件2141，能够使得透光组件2141在不工作时关闭，进而使得该透光组件2141对应的液晶层213能够保持不透光状态，当需要进行透光时，控制相应的透光组件2141开启，通过透光组件2141调控对应的液晶层213的透光率，使得光线能够从该透光组件2141对应的液晶层213透射过来。在第二偏光片215的背光侧设置相机阵列230，进而保证能够利用相机阵列230进行光场采集，形成3d图像。
67.通过上述方案，能够使得光场采集的部分与显示部分共用同一个显示面板210，这样用户就可以实现在一个显示装置200中同时实现显示和光场采集的两种功能，使用方便。
68.在一些实施例中，如图2e所示，所述透光组件2141包括：
69.透明像素电极21411；驱动单元21412，与所述透明像素电极21411电连接，被配置为向所述透明像素电极21411提供电信号，以改变所述透明像素电极21411对应的液晶层213的透光率。
70.具体实施时，透明像素电极21411是由可透光的金属构成的，例如ito(indium tin oxide，氧化铟锡透明导电玻璃膜)，均匀密集的排布在第二基板214的光场采集部分。确定透光区域后，控制透光区域对应的驱动单元21412启动，利用驱动单元21412向透明像素电极21411提供高电平的电信号，使得透明像素电极21411处于高电压的状态，进而改变液晶层213的电场，使得液晶层213透光率变大，进而保证透光区域能够处于透光状态。进而实现选光结构210b部分形成透光区域可控的目的。
71.在一些实施例中，如图2d所示，所述相机阵列230为线性排列的相机阵列230。
72.具体实施时，该线性排布的相机阵列230的长度与光场采集区域的宽度相对应，并且相机阵列230中相邻的相机是紧密设置的，对应相机阵列230中设置相机的数量可以根据相机的尺寸以及光场采集区域的宽度进行相应调整，这里不作具体限定。
73.在一些实施例中，所述相机阵列230中的每个相机为rgb(红red、绿green、蓝blue)相机。
74.具体实施时，传统的3d图像采集的相机是rgbd相机，能够采集图像的深度信息，需要基于深度信息对采集图像进行建模，生成3d图像。本实施例的显示装置200使用的是普通的rgb相机，成本更小，并且3d图像采集的过程更加简单快捷。
75.基于同一个发明构思，本实施提出一种应用于上述各实施例所述的显示装置的光场采集方法。
76.如图3a所示，所述光场采集方法的执行过程包括：
77.步骤301，根据观看用户的位置，确定显示面板中选光结构与所述观看用户的位置相应的透光区域，控制所述透光区域处于透光状态。
78.步骤302，控制相机阵列中所述透光区域对应的至少一个相机启动进行3d图像采集，得到3d图像信息。
79.在一些实施例中，步骤302分为两种情况：
80.第一种，如图3b和3c所示：
81.步骤3021，响应于确定所述透光区域位于所述相机阵列中的两个相机的入光孔径
之间，将所述两个相机分别作为第一目标相机和第二目标相机(如图3b和3c中的第一目标相机s和第二目标相机s 1)。
82.步骤3022，控制所述第一目标相机采集第一图像信息，控制所述第二目标相机采集第二图像信息，将所述第一图像信息和所述第二图像信息进行加和形成3d图像信息。
83.具体实施时，将两个相机采集的视场分为垂直光线摄入的0视场(例如，图3b所示)和倾斜光线摄入的1视场(例如，图3c所示)。进行3d图像采集时基本上大部分的情况都会是通过两个相机进行3d图像采集，再将采集的两个图像的像素(例如，图3b中的0视场的感光像素s_0、感光像素s 1_0，以及图3c中1视场的的感光像素s_1、感光像素s 1_1)进行加和形成最终的3d图像。这个成像的过程是在显示装置上进行成像的，并且将两个图像进行像素加和即可得到，无需复杂的算法(例如，视点差值合成算法)，能够减少延时，进而保证3d图像获取的实时性。
84.图3d示出了两个相机以及透光区域对应的孔径的示意图；图3e示出了对两个相机拍摄的像素进行加和的示意图。
85.在一些实施例中，步骤3022中的将所述第一图像信息和所述第二图像信息进行加和形成3d图像信息，具体包括：
86.步骤30221，确定所述透光区域的孔径(例如图3d和3e中的c0)。
87.步骤30222，依据所述透光区域的孔径、所述第一目标相机(例如图3d和3e中的cn)和所述第二目标相机(例如图3d和3e中的cn 1)的几何关系，将所述第一图像信息中的像素点(例如图3d和3e中的fn’和en’)与所述第二图像信息中的像素点(例如图3d和3e中的fn 1’和en 1’)进行加和得到加和结果。
88.步骤30223，将所述加和结果填充至所述透光区域的孔径对应成像的像素点上，形成所述3d图像信息。
89.具体实施时，透光区域可以根据实际需要设定为相应的形状，优选为圆形区域。通过上述方案，将两个相机采集的图像通过几何关系进行加和，加和的算法比较简单，并且会将第一图像信息和第二图像信息加和至透光区域的孔径对应成像的像素点上，这种方式得到的3d图像信息比较清晰，不会出现图像失真的情况。
90.第二种，如图3f所示：
91.步骤3021’，响应于确定所述透光区域与所述相机阵列中的一个相机的入光孔径相匹配，将所述一个相机作为目标相机。
92.步骤3022’，控制所述目标相机在所述入光孔径内进行3d图像采集，得到3d图像信息。
93.具体实施时，相机的入光孔径与透光区域正好吻合的情况相对较少，针对这种情况，只需利用该相机进行3d图像采集即可，无需进行图像加和就能直接得到相应的3d图像信息。
94.在一些实施例中，由于用户直观的感受来自于双眼，因此直接将观看用户的双眼位置作为观看用户的位置。这样能够保证用户具有更加真实的3d视觉体验。
95.通过上述实施例，根据观看用户的位置对透光区域进行调节，设置在显示装置上的相机能够以观看用户的视角采集对应的3d图像，无需算法合成，在保证3d图像质量的同时，能够减少时延时间，保证了3d图像传输的实时性。
96.需要说明的是，上述对本公开的一些实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于上述实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。
97.基于同一个发明构思，本实施例提出了一种图像数据传输方法，具体可以应用于单方进行视频监控的过程中，也可以用于双方进行视频通话的过程中。
98.对于单方视频监控过程中，观看用户是监控方，下述方法的执行主体是设有显示装置的终端设备(例如，能够进行3d图像采集的电视、手机、平板、计算机等)。
99.对于双方视频通话的过程中，观看用户分别为双方(例如，用户a或用户b)，下述方法的执行主体分别双方所用的设有显示装置的终端设备(例如，终端a或终端b)。也就是说，终端a将获取的3d图像发送给终端b进行显示，以及终端b将获取的3d图像发送给终端a进行显示。
100.如图4所示，该图像数据传输方法的执行过程包括：
101.步骤401，接收观看用户端发来的3d图像采集指令。
102.步骤402，接收位置追踪设备发来的观看用户的位置。
103.步骤403，利用上述实施例所述的光场采集方法，基于所述3d图像采集指令和所述观看用户的位置采集3d图像信息。3d图像信息的光场采集过程与上述实施例同理，这里就不再赘述。
104.步骤404，将所述3d图像信息发送至所述观看用户端进行3d显示。
105.具体实施时，3d图像采集指令可以是上述的监控请求或者视频通话请求。对应的位置追踪设备也是设置在观看用户侧，能够采集观看用户的位置，将观看用户的位置发送给本实施例方法的执行主体(例如，终端设备)。
106.其中，追踪设备可以与观看用户端集成为一体结构，也可以分别设置，但是为了保证追踪设备获取的观看用户的位置相对准确，需要将追踪设备与观看用户端的放置位置相近。另外，3d图像采集指令可以跟观看用户的位置合成在一起发送，也可以先发送3d图像采集指令再发送观看用户的位置。
107.在一些实施例中，步骤402包括：接收眼球追踪设备发来的观看用户的双眼位置。对应能够确定观看用户的双眼位置的是眼球追踪设备。优选地，眼球追踪设备设置在观看用户端上。其中双眼位置是根据观看用户的双眼的眼球确定的位置，如果观看用户为单眼，那么就将眼球追踪设备获取到的该单眼位置作为双眼位置。
108.通过上述实施例的方案，能够根据观看用户的位置确定相应的透光区域，让该透光区域处于透光状态，并打开该透光区域对应的相机，使得图像光线能够通过透光区域透射至相机上，进而通过相机进行3d图像采集，3d成像的过程都是在进行3d图像采集的终端设备上完成的，观看用户端只需对3d图像进行3d显示即可，无需进行算法处理，减少了时延时间，保证了实时效果。
109.需要说明的是，本公开实施例的方法可以由单个设备执行，例如一台计算机或服务器等。本实施例的方法也可以应用于分布式场景下，由多台设备相互配合来完成。在这种分布式场景的情况下，这多台设备中的一台设备可以只执行本公开实施例的方法中的某一
个或多个步骤，这多台设备相互之间会进行交互以完成所述的方法。
110.需要说明的是，上述对本公开的一些实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于上述实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。
111.本公开实施例还提供了一种图像数据传输装置，能够进行3d图像采集。
112.如图5所示，图像数据传输装置500包括：
113.接收模块510，被配置为接收观看用户端发来的3d图像采集指令，以及接收位置追踪设备发来的观看用户的位置；
114.3d成像模块520，被配置为利用上述实施例所述的光场采集方法，基于所述3d图像采集指令和所述观看用户的位置采集3d图像信息；
115.发送模块530，被配置为将所述3d图像信息发送至所述观看用户端进行3d显示。
116.在一些实施例中，接收模块510，还被配置为接收眼球追踪设备发来的观看用户的双眼位置。
117.为了描述的方便，描述以上装置时以功能分为各种模块分别描述。当然，在实施本技术时可以把各模块的功能在同一个或多个软件和/或硬件中实现。
118.上述实施例的装置用于实现前述任一实施例中相应的图像数据传输方法，并且具有相应的图像数据传输方法实施例的有益效果，在此不再赘述。
119.基于同一发明构思，与上述任意实施例方法相对应的，本公开还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上任意一实施例所述的方法。
120.图6示出了本公开实施例所提供的一种示例性计算机设备600的硬件结构示意图。该设备600可以包括：处理器602、存储器604、输入/输出接口606、通信接口608和总线610。其中处理器602、存储器604、输入/输出接口606和通信接口608通过总线610实现彼此之间在设备内部的通信连接。
121.处理器602可以采用通用的cpu(central processing unit，中央处理器)、微处理器、应用专用集成电路(application specific integrated circuit，asic)、或者一个或多个集成电路等方式实现，用于执行相关程序，以实现本说明书实施例所提供的技术方案。
122.存储器604可以采用rom(read only memory，只读存储器)、ram(random access memory，随机存取存储器)、静态存储设备，动态存储设备等形式实现。存储器604可以存储操作系统和其他应用程序，在通过软件或者固件来实现本说明书实施例所提供的技术方案时，相关的程序代码保存在存储器604中，并由处理器602来调用执行。
123.输入/输出接口606用于连接输入/输出模块，以实现信息输入及输出。输入输出/模块可以作为组件配置在设备中(图中未示出)，也可以外接于设备以提供相应功能。其中输入设备可以包括键盘、鼠标、触摸屏、麦克风、各类传感器等，输出设备可以包括显示器、扬声器、振动器、指示灯等。
124.通信接口608用于连接通信模块(图中未示出)，以实现本设备与其他设备的通信交互。其中通信模块可以通过有线方式(例如usb、网线等)实现通信，也可以通过无线方式
(例如移动网络、wifi、蓝牙等)实现通信。
125.总线610包括一通路，在设备的各个组件(例如处理器602、存储器604、输入/输出接口606和通信接口608)之间传输信息。
126.需要说明的是，尽管上述设备600仅示出了处理器602、存储器604、输入/输出接口606、通信接口608以及总线610，但是在具体实施过程中，该设备600还可以包括实现正常运行所必需的其他组件。此外，本领域的技术人员可以理解的是，上述设备600中也可以仅包含实现本说明书实施例方案所必需的组件，而不必包含图中所示的全部组件。
127.上述实施例的计算机设备600用于实现前述任一实施例中相应的方法，并且具有相应的方法实施例的有益效果，在此不再赘述。
128.基于同一发明构思，与上述任意实施例方法相对应的，本公开还提供了一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令用于使所述计算机执行如上任一实施例所述的方法。
129.本实施例的计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(pram)、静态随机存取存储器(sram)、动态随机存取存储器(dram)、其他类型的随机存取存储器(ram)、只读存储器(rom)、电可擦除可编程只读存储器(eeprom)、快闪记忆体或其他内存技术、只读光盘只读存储器(cd-rom)、数字多功能光盘(dvd)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。
130.上述实施例的存储介质存储的计算机指令用于使所述计算机执行如上任一实施例所述的方法，并且具有相应的方法实施例的有益效果，在此不再赘述。
131.基于同一发明构思，与上述任意实施例方法相对应的，本公开还提供了一种计算机程序产品，其包括计算机程序。在一些实施例中，所述计算机程序由一个或多个处理器可执行以使得所述处理器执行所述的方法。对应于方法各实施例中各步骤对应的执行主体，执行相应步骤的处理器可以是属于相应执行主体的。
132.上述实施例的计算机程序产品用于使处理器执行如上任一实施例所述的方法，并且具有相应的方法实施例的有益效果，在此不再赘述。
133.所属领域的普通技术人员应当理解：以上任何实施例的讨论仅为示例性的，并非旨在暗示本公开的范围(包括权利要求)被限于这些例子；在本公开的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，步骤可以以任意顺序实现，并存在如上所述的本公开实施例的不同方面的许多其它变化，为了简明它们没有在细节中提供。
134.另外，为简化说明和讨论，并且为了不会使本公开实施例难以理解，在所提供的附图中可以示出或可以不示出与集成电路(ic)芯片和其它部件的公知的电源/接地连接。此外，可以以框图的形式示出装置，以便避免使本公开实施例难以理解，并且这也考虑了以下事实，即关于这些框图装置的实施方式的细节是高度取决于将要实施本公开实施例的平台的(即，这些细节应当完全处于本领域技术人员的理解范围内)。在阐述了具体细节(例如，电路)以描述本公开的示例性实施例的情况下，对本领域技术人员来说显而易见的是，可以在没有这些具体细节的情况下或者这些具体细节有变化的情况下实施本公开实施例。因此，这些描述应被认为是说明性的而不是限制性的。
135.尽管已经结合了本公开的具体实施例对本公开进行了描述，但是根据前面的描述，这些实施例的很多替换、修改和变型对本领域普通技术人员来说将是显而易见的。例如，其它存储器架构(例如，动态ram(dram))可以使用所讨论的实施例。
136.本公开实施例旨在涵盖落入所附权利要求的宽泛范围之内的所有这样的替换、修改和变型。因此，凡在本公开实施例的精神和原则之内，所做的任何省略、修改、等同替换、改进等，均应包含在本公开的保护范围之内。