头戴式信息处理装置和头戴式显示系统的制作方法

本发明涉及头戴式信息处理装置和头戴式显示系统，尤其是涉及对于在虚拟对象中的位置的掌握有效的技术。

背景技术

近年来，虚拟现实(Virtual Reality：VR)技术、增强现实(Augmented Reality：AR)技术或混合现实(Mixed Reality：MR)技术被广泛利用。

虚拟现实是创造出与现实相似的虚拟世界并且能够体验仿佛身临其境的感觉的技术。增强现实是将数字信息添加于现实世界并将用CG(Computer Graphics：计算机制图)等创建的虚拟空间(虚拟对象)反映在现实空间中并对其进行扩展的技术。混合现实是将用CG等人工创建的虚拟世界与现实世界的信息相组合而融合的技术。

作为将这些技术具体化的工具，佩戴在头部的具有显示器和摄像机等的头戴式信息处理装置被广泛利用。在头戴式信息处理装置中，为了增加虚拟对象的现实感，将虚拟对象关联到现实空间的空间坐标来表示，仿佛在这里存在现实的对象的显示方法正在实用化。

这样的显示方法，如果能够去到关联地配置有目标虚拟对象的现实空间中，则能够观看目标虚拟对象，能够实现直观的操作体系，但如果不能去到关联着目标虚拟对象的现实空间，则存在不能进行目标虚拟对象的阅览和操作这样的问题。

作为解决该问题的技术，存在即使佩戴者在真实世界空间中四处走动，增强现实对象的至少一部分仍保留在真实世界空间内而能够容易地访问的技术(例如参照专利文献1)。

现有技术文献

专利文献

专利文献1：日本特表2018-505472号公报

技术实现要素：

发明要解决的技术问题

上述专利文献1的技术，虽然记载有关于相对于用户的视野移动仍将虚拟对象保留在视野内进行显示的主旨，但是关于对处于另外的现实空间中的虚拟对象的显示没有考虑。因此，存在难以以良好的使用便利性进行处于另外的现实空间中的虚拟对象的阅览和操作的问题。

本发明的目的在于提供能够容易地掌握与现实空间处于不同的现实空间中的虚拟对象的存在位置等的技术。

关于本发明的上述以及其它的目的和新的特征，根据本说明书的记载和附图能够明确。

用于解决课题的技术方案

在本申请中公开的发明中，对代表性的技术方案的概要进行简单说明如下。

即，代表性的头戴式信息处理装置包括操作输入接口、摄像机部、显示部和控制部。操作输入接口输入信息。摄像机部拍摄现实空间。显示部显示摄像机部拍摄的实拍图像。控制部控制显示部。

另外，控制部具有虚拟对象生成处理部，其生成要由显示部显示的虚拟对象。虚拟对象生成处理部生成与用户所在的第一现实空间相关联地配置的第一虚拟对象以及与不同于第一现实空间的第二现实空间相关联地配置的第二虚拟对象。

并且，控制部按照从操作输入接口输入的、指示要第一虚拟对象和第二虚拟对象的显示的虚拟对象显示指示信息，使第一虚拟对象和第二虚拟对象显示于显示部。

发明效果

对于在本申请公开的发明中通过代表性的技术方案获得的效果进行简单说明如下。

因为能够可靠地观看配置在不同的现实空间中的虚拟对象的配置场所等，所以能够提高便利性。

附图说明

图1是表示实施方式1的头戴式信息处理装置的结构的一例的模块图。

图2是表示图1的头戴式信息处理装置的使用状况的周围全景的一例的说明图。

图3是表示图1的头戴式信息处理装置的虚拟对象组的一览显示的一例的说明图。

图4是表示图3的虚拟对象组的一览显示的另一例的说明图。

图5是表示图4的虚拟对象组的一览显示的另一例的说明图。

图6是表示图1的头戴式信息处理装置中的使用状况的一例的说明图。

图7是表示在图6的周围全景例中的一览显示的虚拟对象组的显示画面的一例的说明图。

图8是表示图6的使用状况的另一例的说明图。

图9是表示在图8的周围全景例中的一览显示的虚拟对象组的显示画面的一例的说明图。

图10是表示图1的头戴式信息处理装置的虚拟对象组的显示的一例的说明图。

图11是表示图10的虚拟对象组的显示的另一例的说明图。

图12是表示图1的头戴式信息处理装置的虚拟对象组的切换显示的一例的说明图。

图13是表示基于图1的头戴式信息处理装置的虚拟对象的放大缩小和姿态操作的一例的说明图。

图14是表示图13的另一例的说明图。

图15是表示观看在多个现实空间中的全部的虚拟对象的情况下的周围全景的一例的说明图。

图16是表示从与图15的后方的出入口相反的方向观看的状态下的虚拟对象的显示的一例的说明图。

图17是表示图16的虚拟对象的显示的另一例的说明图。

图18是表示图16的虚拟对象组的一览显示的另一例的说明图。

图19是表示图1的头戴式信息处理装置的多重显示画面的一例的说明图。

图20是表示图19的另一显示例的说明图。

图21是表示实施方式2的头戴式显示系统的结构的一例的模块图。

具体实施方式

在用于说明实施方式的全部附图中，对于相同的部件原则上标注相同的附图标记，而省略其重复的说明。

(实施方式1)

以下，对实施方式进行详细说明。

<头戴式信息处理装置的构成例>

图1是表示本实施方式1的头戴式信息处理装置的构成的一例的模块图。

如图1所示，头戴式信息处理装置100由摄像机部111、右眼视线检测部112、左眼视线检测部113、振动产生部117、周围声音麦克风118、人声麦克风119、耳机120、操作输入接口121、显示器122、控制部125、存储器124、深度传感器142、加速度传感器143、陀螺仪144、地磁传感器145和刺激产生部146构成。这些功能模块经由母线140相互连接。

摄像机部111拍摄用户前方的风景。作为显示部的显示器122显示摄像机部111所拍摄到的现实空间的实拍图像。摄像机部111可以由多个摄像机构成，或者为1个或者组合多个摄像机而能够拍摄全方位的图像的360度全方位摄像机(Omnidirectional camera)。

控制部125通过执行保存在存储器124中的后述的程序126，控制各功能模块，并控制头戴式信息处理装置100整体的动作。

控制部125具有显示控制部151、数据管理部152、影像加工部153、虚拟对象姿态操作处理部154、虚拟对象生成处理部155和虚拟对象变形操作处理部156。

虚拟对象生成处理部155生成处于与现实空间不同的虚拟空间中的、至少1个虚拟对象构成的虚拟对象组。另外，虚拟对象生成处理部155将所生成的虚拟对象组与现实空间相关联地配置。

在此，将与被观看或者显示于显示器122的第一现实空间相关联地配置的虚拟对象组作为第一虚拟对象组。另外，将与和第一现实空间不同的现实空间即第二现实空间相关联地配置的虚拟对象组作为第二虚拟对象组。

同样地，将与和第一以及第二现实空间不同的现实空间即第三现实空间相关联地配置的虚拟对象组作为第三虚拟对象组。将与不同于第一～第三现实空间的现实空间即第四现实空间相关联地配置的虚拟对象组作为第四虚拟对象组。

虚拟对象生成处理部155根据从操作输入接口121输入的用户操作，基于从存储器124读取的虚拟对象的雏形数据来生成虚拟对象。

此外，虚拟对象的雏形数据不是一定需要的，也可以通过用户操作不需要雏形而生成直接虚拟对象数据。例如，在生成长方体的虚拟对象时，通过使用了操作输入接口121的用户操作，在实际空间上指定成为虚拟对象的各顶点的8点。

虚拟对象姿态操作处理部154将在显示器122中显示的虚拟对象进行旋转、放大和缩小，以形成容易观看的形状的姿态的方式进行操作。将其称为姿态操作。姿态操作的结果是，原本的虚拟对象的姿态、形状和方向等没有被反映。

虚拟对象变形操作处理部156进行在显示器122中显示的虚拟对象的变形操作。变形操作例如是改变虚拟对象的方向、改变大小、改变形状、删除一部分、或者删除全部等。基于虚拟对象变形操作处理部156的变形操作的结构是，原本的虚拟对象的姿态、形状和方向等没有被反映。

影像加工部153对摄像机部111所拍摄到的影像数据进行加工，将所加工的影像数据作为信息数据127保存在存储器124中。影像加工部153主要以显示数据量的减少、观看性的提高为目的，将摄像机部111所拍摄到的影像数据简化。例如，在影像数据中存在四边形状的书架的情况下，外形简化为相同尺寸的长方体等的形状从而将影像数据简化。

另外，影像加工部153进行为了使各空间的识别容易的影像加工。例如，基于摄像机部111所拍摄到的来自用户的视线的影像数据，生成在拍摄时以向下看用户所在的空间的方式俯视的影像数据等。

显示控制部151使在存储器124中保存的信息数据127适当地组合而生成显示用数据，并使其显示在显示器122中。在该情况下，信息数据127为虚拟对象数据、摄像机部111拍摄的影像数据和影像加工部153生成的加工后的显示用数据等。

数据管理部152对摄像机部111拍摄的实拍影像数据、虚拟对象的数据和影像加工部153生成的加工后的显示用数据等进行管理。

控制部125由包含GPU(Graphics Processing Unit：图形处理器)等的各运算处理专用处理器的CPU(Central Processing Unit：中央处理器)等构成，通过执行在存储器124中存储保存的程序126来控制各功能模块，从而控制头戴式信息处理装置100整体的动作。程序126为头戴式信息处理装置100的OS(Operating System：操作系统)和动作控制用应用等的程序。

控制部125按照从操作输入接口121输入的虚拟对象显示指示信息来控制显示控制部151，使得与和第一现实空间不同的现实空间相关联配置的虚拟对象组、例如与第二现实空间等相关联配置的第二虚拟对象组等配置并显示于第一现实空间内。由此，能够实现与和第一现实空间不同的现实空间相关联地配置的虚拟对象组的观看或操作。

此外，在将虚拟对象生成处理部155生成的虚拟对象组显示在显示器122的显示视野内时，例如来自头戴式信息处理装置100的显示整个周围景观的全方位图像投影并反映在显示器122中，将虚拟对象组配置在所反映的全方位图像的规定的位置。

在该情况下，控制部125通过控制显示控制部151，使第一虚拟对象组、以及不同于第一现实空间的现实空间相关联配置的虚拟对象组、例如与第二现实空间等相关联配置的第二虚拟对象组配置并显示在第一现实空间内。

另外，控制部125也可以将第一虚拟对象组和与第二现实空间相关联地配置的第二虚拟对象组等依次地切换，显示在显示器122的显示画面中。

并且，控制部125也可以构成为，根据第一现实空间的视野位置，使第一虚拟对象组、以及不同于第一现实空间的现实空间相关联地配置的虚拟对象组等一并配置在显示器的显示画面内来显示。

另外，控制部125也可以将表示与各现实空间相关联地配置的虚拟对象组的各个显示画面缩小地排列而进行多重显示，而将所选择的现实空间的虚拟对象组的显示画面恢复通常的大小来显示，以使得能够进行配置于所选择的现实空间内的所希望的虚拟对象的观看和操作。

或者，控制部125对于配置在显示视野内的难以辨认的虚拟对象，通过虚拟对象姿态操作处理部154以操作虚拟对象的放大缩小或姿态的方式进行控制，以使得虚拟对象的整体形状容易辨认，并使用显示控制部151显示姿态操作后的虚拟对象。

存储器124为以闪存存储器等为例的非易失性存储器，存储控制部125使用的各种程序126和信息数据127等。信息数据127为虚拟对象组的数据、虚拟对象组的坐标位置信息和实拍图像等的数据。

显示器122由液晶面板等构成，显示虚拟对象、现实空间的实拍图像等。另外，显示器122将向用户的提示通知信息和动作状态等的显示内容进行画面显示。

例如，在进行摄像机部111拍摄的实拍图像和虚拟对象的显示时，在显示头戴式信息处理装置100的整个周围景观的全方位图像上的规定的位置配置并显示虚拟对象。另外，显示器122将与多个现实空间相关联的各个虚拟对象组在显示画面内进行多重显示。

右眼视线检测部112检测用户的右眼的视线。左眼视线检测部113检测用户的左眼的视线。此外，在检测视线的处理中，作为眼球追踪处理可以利用通常使用的公知技术。

例如，公知的是，在利用了角膜反射的方法中，将红外线LED(Light Emitting Diode：发光二极管)照射到脸部用红外线摄像机进行拍摄，以由红外线LED照射而形成的反射光的角膜上的位置(角膜反射)作为基准点，基于相对角膜反射的位置的瞳孔的位置，来检测视线的技术。

加速度传感器143为检测每单位时间的速度的变化即加速度的传感器，能够掌握运动、振动和碰撞等。陀螺仪144是检测旋转方向的角速度的传感器，能够掌握纵、横、倾斜的姿态的状态。由此，使用加速度传感器143和陀螺仪144，能够检测佩戴着头戴式信息处理装置主体100的用户的头部的运动。

地磁传感器145是检测地球的磁力的传感器，检测头戴式信息处理装置主体100朝向的方向。地磁传感器145使用不仅检测前后方向和左右方向而且检测上下方向的地磁3轴型的地磁传感器，通过检测相对头部的运动的地磁变化，能够检测头部的运动。

利用这些传感器，能够详细地检测用户佩戴的头戴式信息处理装置100的运动和变动。

深度传感器142利用面来测量与物体的距离。深度传感器142例如有利用了红外线或激光等的反射的传感器，也可以利用通过安装位置不同的多个摄像机根据所拍摄到的图像的视差获得距离信息等的其它方式来实现。

控制部125通过对由深度传感器142所取得的距离信息进行分析，能够检测手的运动和身体的运动。进行手的运动和身体的运动的分析时，可以一并使用根据由摄像机部111拍摄到的图像而获得的信息。

刺激产生部146通过控制部125的控制而产生能够由皮肤感知的刺激。刺激产生部146将由头戴式信息处理装置100发送的对用户的通知信息转变为能够由皮肤感知的刺激。

能够由皮肤感知的刺激有压力、热感、冷感或者电刺激等。刺激产生部146通过产生能够由紧贴地佩戴着的用户的头部的皮肤感知的刺激，能够可靠地向用户传递通知。

振动产生部117通过控制部125的控制而产生振动，例如包括振动器、虚拟触觉器或者力反馈器等构成。振动产生部117将向用户的通知信息转变为振动。振动产生部117在紧贴佩戴着的用户头部产生振动，由此向用户可靠地传递通知。

周围声音麦克风118和人声麦克风119收集来自外部的声音和用户自身的发声。人声麦克风119可以是骨传导麦克风等的声音输入器件。

耳机120佩戴在用户的耳部，是使用户听到声音的器件，能够通过声音像用户传达通知信息。耳机120可以是扬声器或者骨传导耳机等的声音输出器件。

操作输入接口121例如由键盘或按钮、或者触摸面板等构成，设定并输入用户想要输入的信息。操作输入接口121设置在用户容易进行输入操作的位置即可。

操作输入接口121可以与头戴式信息处理装置100的主体分离而通过有线或者无线等进行连接的形态。作为与头戴式信息处理装置100分离的输入操作装置的例子，有三维鼠标或者控制装置等。

三维鼠标为使用了陀螺仪或加速度传感器等的3维空间位置输入装置。控制装置根据映现出身体的摄像机影像、内置于控制装置中的各种传感器信息等检测并输入佩戴在身体的控制器自身的空间位置。

操作输入接口121使显示器122的显示画面显示输入操作画面，根据由右眼视线检测部112和左眼视线检测部113检测出的视线朝向的输入操作画面上的位置获取输入操作信息。

操作输入接口121也可以使指示器显示在输入操作画面上，通过操作输入接口121操作指示器来获取输入操作信息。另外，操作输入接口121也可以由用户发出表示输入操作的声音，利用人声麦克风119收音而获取输入操作信息。

像这样通过在输入操作中使用发声和显示，能够进一步提高佩戴在头部的头戴式信息处理装置的使用便利性。

通过以上的结构，根据通过操作输入接口121所输入的指示虚拟对象显示的虚拟对象显示请求指示，能够将与不同于第一现实空间的现实空间相关联配置的虚拟对象组、例如与第二现实空间相关联配置的第二虚拟对象组叠加地显示在第一现实空间中，或者进行切换显示。

另外，通过在第一现实空间的视野位置中，显示包括处于另外的现实空间的虚拟对象组在内的全部虚拟对象组，能够容易地进行处于另外的现实空间中的虚拟对象的阅览和操作。并且，在虚拟对象组大量存在的情况下，能够消除不知道目标虚拟对象处于哪一现实空间的状况。

另外，能够不移动正在观看的现实空间而对配置于另外的现实空间中的虚拟对象进行操作。例如，在现实空间A的墙上配置有作为虚拟对象的日历的状态下，在其另一现实空间B中确认预定或者写入预定的情况下，用户不需要移动至现实空间A，就能够对虚拟对象的日历进行阅览、操作。

该例子是对作为虚拟对象的日历的变形操作，通过虚拟对象变形操作处理部156被处理。由虚拟对象变形操作处理部156进行的变形操作的结果是能够反映原本的对象，例如，从现实空间B作为变形操作对现实空间A的墙的日历写入预定Z时，即使在实际的现实空间A中观看墙的日历也能够观看到所写入的预定Z。

<头戴式信息处理装置的动作例>

接着，关于头戴式信息处理装置100的动作进行说明。

图2是表示图1的头戴式信息处理装置100的使用状况的周围全景的一例的说明图。图3是表示基于图1的头戴式信息处理装置100的虚拟对象组的一览显示的一例的说明图。图3表示了在图2所示的使用状况的周围全景中，使一览显示的虚拟对象组收容在显示器122的显示画面内而配置时的显示例。

在图2中，佩戴头戴式信息处理装置100的用户200位于第一房间201的中央，观看与后方的出入口门202相反的方向203的状态。

在用户200的前方正面侧放置有桌204和电脑205，在用户200的背面侧放置有书架206。虚拟对象211～213为第一虚拟对象组，由虚拟对象生成处理部155生成。

虚拟对象211配置在用户200的前方正面。虚拟对象212配置在桌204的右侧。虚拟对象213配置在用户后方的书架206的右侧。

在图2所示的第一房间201的周围全景状态下，用户200直接目视映现在第一房间201的方向203的第一现实空间，或者将由摄像机部111拍摄到的现实图像通过显示器122显示来观看。

关于第一虚拟对象组的观看，如图3所示，将各个虚拟对象211～213一览显示。该一览显示将摄像机部111拍摄的全方位图像投影并反映在显示器122的显示画面上，在所投影反映的全方位图像中显示全部的虚拟对象。这时，虚拟对象211～213分别配置在规定的位置。

显示控制部151基于数据管理部152所读取的数据，将虚拟对象211～213显示在显示器122中。数据管理部152读取在存储器124中作为信息数据127记录的虚拟对象211～213的形状数据和配置坐标数据并输出到显示控制部151。这时，虚拟对象姿态操作处理部154根据需要进行虚拟对象的姿态操作。

由此，能够将存在于周围全景中的全部的虚拟对象与存在位置一起进行观看。

此外，由图3的虚线表示的部分为实拍物体，是为了将实拍物体和虚拟对象的位置关系便于理解地表示的图。因此，关于由该虚线表示的实拍物体，也可以不进行显示。

图4是表示图3的虚拟对象组的一览显示的另一例的说明图。图4表示了不显示用虚线表示的实拍物体而仅显示虚拟对象211～213的例子。

图5是表示图4的虚拟对象组的一览显示的另一例的说明图。在使周围全景中存在的全部的虚拟对象显示时，如图5所示，可以将由图3的虚线表示的桌204、电脑205和书架206之类的实拍物体作为背景图像显示。由此，能够更加容易识别现实空间的桌204、电脑205和书架206与虚拟对象211～213的位置关系。

例如，如图2所示虚拟对象213处于背面的书架206的右侧上方的情况下，在虚拟对象213的左侧下方作为背景图像显示了书架206，就能够容易识别虚拟对象位置。

以上，显示控制部151生成虚拟对象等的显示用数据，并显示在显示器122中。显示控制部151从存储器124读取信息数据127中包含的对象的形状和显示位置等的数据、以及摄像机部111拍摄到的背景影像、影像加工部153生成的数据等，根据所读取的数据生成显示数据。

另外，虚拟对象姿态操作处理部154根据需要进行虚拟对象的姿态操作，以在画面上的对应的位置显示虚拟对象的方式调整显示位置、大小和形状等。该调整由虚拟对象姿态操作处理部154基于存储器124中记录的程序126的命令来执行。

此外，表示整个周围景观的全方位图像，可以使用能够一次拍摄全方位的图像的全立体角全方位摄像机来获取。或者，可以将由通常视角的摄像机拍摄到的多个图像通过影像加工部153合成而生成。

另外，景观图像的显示可以使用能够取得的仅一部分范围的图像。例如，通过全立体角的上半部分的半球图像等、不是全方位而是一部分范围的图像，能够观看几乎全部的虚拟对象的存在的情况。

图6是表示图1的头戴式信息处理装置100中的使用状况的一例的说明图。图7是表示图6的周围全景例中的一览显示的虚拟对象组的显示画面的一例的说明图。

图6表示了佩戴着头戴式信息处理装置100的用户200位于第二房间401的出入口门402附近，观看第二房间401的室内方向403的状态。另外，在用户200的前方正面侧，设置有电视柜404和电视机405。从用户200看右侧的墙设有架406。

虚拟对象生成处理部155生成的第二虚拟对象组由虚拟对象411～413构成。在图7中，虚拟对象411位于电视机405的后方上侧。虚拟对象412位于电视机405的后方右侧。虚拟对象413位于出入口门402的左侧墙附近。

在图6所示的第二房间401的周围全景中，用户200直接目视映现在室内方向403的第二现实空间，或者将由摄像机部111拍摄到的现实空间的图像通过显示器122显示来观看。

关于第二虚拟对象组的观看，如图7所示，将表示整个周围景观的全方位图像投影并反映在显示器122的显示画面上，在所投影反映的全方位图像中将各虚拟对象411～413配置在规定的位置进行一览显示。

由此，与图3的情况同样地，能够将存在于周围全景的全部虚拟对象的存在与存在位置一起观看。另外，在使存在于整个周围全景中的全部的虚拟对象显示时，可以将由图7的虚线所示的电视柜404、电视机405、架406之类的实拍物体作为背景图像显示。

由此，能够容易识别现实空间与虚拟对象的位置关系。此外，关于显示器122中显示处理，因为与图3是同样的，所以省略说明。

图8是表示图6的使用状况的另一例的说明图。图9是表示图8的周围全景例中的一览显示的虚拟对象组的显示画面的一例的说明图。在图8中表示，佩戴着头戴式信息处理装置100的用户200位于第三房间601内的中央，在背后左侧方向603看到出入口门602的状态。板604位于用户200的前方正面，窗605位于用户200的右侧。另外，在窗605的右侧配置有时钟606。

虚拟对象生成处理部155生成的第三虚拟对象组由虚拟对象611～613构成。在图8中，虚拟对象611位于板604的左侧，虚拟对象612位于窗605的上方。虚拟对象613位于用户200的后方。

在图8所示的第三房间601内的周围全景状态中，用户200直接目视映现在方向603的第三现实空间，或者将由摄像机部111拍摄到的现实空间的图像通过显示器122显示来观看。

关于第三虚拟对象组的观看，如图9所示，表示整个周围景观的全方位图像投影并反映在显示器122的显示画面上，在所投影反映的存在于全方位图像的位置配置各虚拟对象611～613，将全部的虚拟对象611～613进行一览显示。

由此，与图3、图7的情况同样地，能够将在周围全景中存在的全部虚拟对象的存在与存在位置一起进行观看。另外，在使整个周围全景中存在的全部虚拟对象显示时，可以将由图9的虚线所示的板604、窗605和时钟606等的实拍物体作为背景图像显示。

由此，能够容易识别现实空间与虚拟对象的位置关系。此外，关于在显示器122中的显示处理，因为与图3是同样的，所以省略说明。

图10是表示基于图1的头戴式信息处理装置的虚拟对象组的显示的一例的说明图。在图3、图7和图9所示的例子，是在各个现实空间观看与各个现实空间相关联地配置的虚拟对象组的例子。但是，这些例子中，在当前映现的现实空间中不能观看与和当前映现的现实空间不同的现实空间相关联地配置的虚拟对象组。

图10中，关于保持各个现实空间的视野位置不变地、将与各个现实空间相关联地配置的各个虚拟对象组叠加地配置在显示器122的显示画面中的显示例进行说明。

在图10中，标注了与图3、图7、图9所示相同的附图标记的部分，具有与图3、图7、图9中已经说明的动作相同的动作，所以省略其详细的说明。

图10表示了在当前映现的第一现实空间中，在与第一现实空间相关联地配置的第一虚拟对象组的基础上，还将与第二现实空间相关联地配置的第二虚拟对象组、与第三现实空间相关联地配置的第三虚拟对象组叠加地显示在显示器122的显示画面内的状态。

第一虚拟对象组由虚拟对象211、212、213构成。第二虚拟对象组由虚拟对象411、412、413构成。第三虚拟对象组由虚拟对象611、612、613构成。

如图10所示，将配置于另外的现实空间中的虚拟对象411～413、611～613配置并叠加地显示在当前现实空间中，由此，能够将与另外的现实空间相关联地配置的虚拟对象也全部、不需要切换现实空间地进行观看。

由此，即使现实空间和虚拟对象组非常多，也能够从显示了全部的虚拟对象的显示画面中简单地观看所希望的虚拟对象。并且，能够容易地进行所选择的虚拟对象的修正等所希望的操作。其结果是，能够提高使用便利性。

以上的动作，是显示控制部151在显示器122中显示的动作。另外，虚拟对象姿态操作处理部154根据需要进行虚拟对象的姿态操作。

虚拟对象姿态操作处理部154按照在存储器124中保存的程序126的命令，以在画面上的对应的位置显示虚拟对象的方式调整显示位置和大小、形状等。显示控制部151根据虚拟对象姿态操作处理部154调整后的数据生成显示数据，并使其显示在显示器122。

图11是表示图10的虚拟对象组的显示的另一例的说明图。图11中表示了在显示器122的显示画面内显示的虚拟对象配置于几乎相同的坐标位置，重叠地显示虚拟对象的例子。

图11中标注了与图2、图3、图6、图7、图8、图9、图10所示相同的附图标记的部分，因为具有与图2、图3、图6、图7、图8、图9、图10中已经说明的动作相同的动作，所以省略其详细的说明。

图10所示的虚拟对象212、412为重叠地配置在几乎相同的坐标位置的虚拟对象，由于重叠而观看性降低。因此，要将重叠地显示的虚拟对象212、412如图11所示那样将虚拟对象901、902错开地显示在不重叠的坐标位置。

另外，在原本的配置有虚拟对象212、412的坐标位置显示标记903，并且将错开坐标位置地配置显示的虚拟对象901、902与标记903之间用虚拟线904、905相连地显示。

像这样，将几乎在相同位置重叠地配置显示的虚拟对象错开地显示，由此虚拟对象能够不重叠地显示。另外，通过使标记903显示，能够容易地识别虚拟对象原本被配置的位置。并且，通过显示虚拟线904、905，能够进一步提高虚拟对象的观看性。

另外，虚拟对象也可以不错开显示位置，而将重叠地配置显示在相同位置的虚拟对象形成半透明、即作为透视图像显示。

以上的动作是显示控制部151在显示器122中显示的动作。另外，虚拟对象姿态操作处理部154根据需要进行虚拟对象的姿态操作。

虚拟对象姿态操作处理部154的姿态操作，以在对应的位置显示虚拟对象的方式基于在存储器124中保存的程序126调整显示位置、大小和形状等。

以后，在没有特别地记载的情况下，向显示器122的虚拟对象的显示进行同样的处理。

另外，虚拟对象组的显示也可以为，用户从叠加显示的虚拟对象212、412(图10)选择所希望的虚拟对象、并且在与所选择的虚拟对象相关联地配置的现实空间中同样地仅显示相关联的虚拟对象组。在该情况下，使与另外的虚拟空间相关联地配置的虚拟对象组不显示。

由此，从与和所希望的虚拟对象相同的现实空间相关联地配置的虚拟对象组之中，进行一步选择下一个所希望的虚拟对象的情况下，能够容易地选择。

<虚拟对象组的切换显示例>

图12是表示图1的头戴式信息处理装置100的虚拟对象组的切换显示的一例的说明图。在图12中，标注了与图2、图3、图6、图7、图8、图9和图10所示的相同的附图标记的部分，因为具有与图2、图3、图6、图7、图8、图9和图10中已经说明的动作相同的动作，所以省略其详细说明。

在图12中，不是如图11所示那样将全部的虚拟对象叠加地显示，而是表示将与各个现实空间相关联地配置的虚拟对象组依次切换显示的例子。

显示画面1001是表示起初与第一现实空间相关联地配置的第一虚拟对象组的显示画面。显示画面1002是表示与第二现实空间相关联地配置的第二虚拟对象组的显示画面。

显示画面1003是表示与第三现实空间相关联地配置的第三虚拟对象组的显示画面。显示画面1004表示与和第一～第三现实空间不同的另外的现实空间相关联地配置的虚拟对象组存在的情况下显示的显示画面。这些显示画面1001～1004被依次切换地显示在显示器122中。

由此，不是一次观看全部的虚拟对象组，而是能够仅将与各个现实空间相关联地配置的虚拟对象组依次地按顺序观看。其结果是，能够高效率地从各个虚拟对象组之中观看所希望的虚拟对象，能够进一步提高观看性。

另外，虚拟对象组的切换显示，例如从操作输入接口121通过滑动等的输入操作，按易于观看的每一定时间进行切换显示。由此，能够进一步提高虚拟对象的观看性。

在每一定时间的虚拟对象的切换显示中，在想要花更多时间详细地观看的情况下、或者相反想要以较短时间切换到下一画面的情况下，通过操作输入接口121的操作输入，可以改变观看的虚拟对象组的观看时间的增减。

在进行显示画面1001、1002、1003的显示时，也可以不仅使虚拟对象组、而且使与虚拟对象组对应的现实空间的实拍图像作为背景显示。

在该情况下，通过显示实拍图像的背景，能够容易地识别虚拟对象。此外，实拍背景可以利用图1的摄像机部111进行拍摄，预先保存在存储器124中。摄像机部111的视角较窄的情况下，也可以将分别拍摄的图像合成而使用。

<虚拟对象的放大缩小和姿态操作>

接着，关于头戴式信息处理装置100进行的虚拟对象的放大缩小和姿态操作的动作进行说明。图13是表示图1的头戴式信息处理装置进行的虚拟对象的放大缩小和姿态操作的一例的说明图。图14是表示图13的另一例的说明图。

在图13和图14中，对于标注了与图2、图3、图6、图7、图8、图9、图10中所示相同的附图标记的部分，因为具有与图2、图3、图6、图7、图8、图9、图10中已经说明的动作相同的动作，所以省略其详细说明。

图13是表示从一览显示的虚拟对象211～213、411～413、611～613之中，选择较小的难以观看的虚拟对象612，提高所选择的虚拟对象612的观看性的例子。

在该情况下，虚拟对象姿态操作处理部154进行使虚拟对象612的形状放大的操作，使放大了的虚拟对象移动到跟前的预先决定的位置而配置，作为虚拟对象1101而显示。这时，在显示画面内的背景部分保留全部的虚拟对象211～213、411～413、611～613的一览显示不变。

或者，虚拟对象姿态操作处理部154也可以不保留虚拟对象612而将其移动到跟前进行放大操作。预先决定的位置将容易观看的位置作为初始值设定。该初始值例如预先保存在存储器124中。

另外，初始值可以通过控制部125将用户经由操作输入接口121而输入的设定信息写入存储器124中来设定。例如，将身体的正面的手的活动范围部分作为预先决定的位置即初始值而设定，由此容易观看虚拟对象，并且姿态操作和变形操作也变得容易。

使虚拟对象移动到预先决定的位置的操作，也可以通过用户使用操作输入接口121选择任意的虚拟对象，从而自动地进行移动配置。或者，也可以通过将所选择的对象拉近的自然的操作而手动地配置。另外，在配置时，用户使用操作输入接口121进行决定放大率的操作，也可以对放大率进行变更。

以上的动作，控制部125按照从操作输入接口121输入来的用户操作，控制虚拟对象姿态操作处理部154等。虚拟对象姿态操作处理部154对所选择的对象的形状、显示位置的信息进行变更。

显示控制部151读取在存储器124中存储的对象的形状、显示位置等的信息数据127并显示在显示器122中。

由此，能够使在一览显示中较小的难以观看的虚拟对象更加清楚地观看。所选择的虚拟对象通过控制部125的控制，在观看确认之后恢复到显示画面内的背景部分的配置操作前的原本的位置。该动作在观看确认完成操作后能够自动地进行。

接着，选择另外的虚拟对象进行使其移动到跟前而配置的操作的情况下，之前所选择的虚拟对象恢复到原本的位置，原本的虚拟对象的一览显示图像作为背景保留。由此，能够使下一虚拟对象的配置操作、观看确认容易。

关于在全方位图像中配置虚拟对象的显示，虽然能够观看全部的虚拟对象组的存在，但是存在难以观看虚拟对象的整体的形状的情况。

因此，对于在显示器122的显示画面内配置的难以观看的虚拟对象，利用虚拟对象姿态操作处理部154以使虚拟对象的整体形状易于观看的方式操作虚拟对象的姿态而进行显示。

例如，图14所示的虚拟对象411本来是立方体的形状，在全方位图像的显示形状中成为不能观看并确定为立方体的显示形状。虚拟对象姿态操作处理部154使虚拟对象411首先一边放大一边移动到容易进行姿态操作的跟前的显示位置。

然后，虚拟对象姿态操作处理部154使移动后的虚拟对象411进行包括三维的旋转动作在内的旋转，进行姿态操作成整体形状易于观看的显示形状，由此变化成由虚拟对象1201表示的显示形状来显示。

在观看并确认了虚拟对象1201后，可以将虚拟对象1201作为虚拟对象411恢复到配置操作前的原本的位置。

像这样，虚拟对象姿态操作处理部154对整体形状难以观看的虚拟对象进行姿态操作，转变为整体形状能够观看且特定的显示形状的虚拟对象，从而能够准确地观看并掌握虚拟对象的整体形状和全貌。

以容易观看整体形状的显示形状进行显示的动作，也可以不进行由用户进行的姿态操作，例如可以由预先存储在存储器124等中的显示形状来显示。整体形状容易观看的显示形状，将预先成为虚拟对象生成时的雏形的形状数据中，该对象容易观看的方向、大小和颜色等的信息作为姿态信息记录在存储器124中，对生成了该姿态信息的虚拟对象继承使用。另外，用户也可以对每一个虚拟对象指定姿态信息并存储在存储器124中，在显示时使用。

<虚拟对象的变形操作>

进一步，虚拟对象变形操作处理部156能够进行虚拟对象的变形操作。虚拟对象变形操作处理部156读取在存储器124中存储的虚拟对象的形状和显示位置，变更所选择的虚拟对象的形状和显示位置的信息，并将变更后的信息写入存储器124。虚拟对象的形状包括方向、大小、角度等。

显示控制部151读取已写入在存储器124中的信息，基于该信息将进行了变形操作的虚拟对象显示在显示器122中。

基于虚拟对象变形操作处理部156进行的变形操作的结果，也被反映在原本的虚拟对象的显示状态中。通过变形操作改变了对象的方向的情况下，由于虚拟对象自身的方向改变，因此在现实空间的景观叠加地显示虚拟对象。例如即使在图2、图6和图8中所示的通常显示状态中，虚拟对象以变形操作后的方向被显示。

在变形操作时，通过将包括变形前的原本的虚拟对象的方向和大小等在内的形状以半透视进行显示、或者在视野内的不用于变形操作的场所进行显示等，能够容易理解地显示变形前的原本的虚拟对象与变形后的虚拟对象的包括方向、大小等在内的形状的差。

对于虚拟对象，关于进行姿态操作和变形操作的哪一者，例如通过设置于头戴式信息处理装置100的未图示的操作模式切换按钮等，在操作前指定。

也可以将姿态操作和变形操作相组合，在将虚拟对象通过姿态操作放大而容易观看后，进行变形操作。另外，也可以使通过姿态操作适用于虚拟对象的旋转、放大和缩小等的操作适用于变形操作。

<另外的现实空间的虚拟对象组的显示例>

接着，使用图15～图18说明显示从当前的现实空间与其它现实空间相关联地配置的全部的虚拟对象组的情况下的动作。

在图15～图18中，标注了与图2、图3、图6、图7、图8、图9、图10所示相同的附图标记的部分，因为具有与图2、图3、图6、图7、图8、图9、图10中已经说明的动作相同的动作，所以省略其详细说明。

图15是表示观看多个现实空间中的全部的虚拟对象的情况下的周围全景的一例的说明图。

在图15中，佩戴着头戴式信息处理装置100的用户200，与图2的情况同样地，位于第一房间201的中央，成为观看与出入口门202相反的方向203的状态。

另外，在第一房间201中放置有桌204、电脑205和书架206。在第一房间201中，作为由虚拟对象生成处理部155生成的第一虚拟对象组，与图2同样地分别配置有虚拟对象211、212、213。

与第一房间201左侧相邻地配置有第二房间401，与第一房间201的右侧相邻地配置有第三房间601。在第二房间401中放置有电视柜404、电视机405和架406。

在第二房间401中，作为由虚拟对象生成处理部155生成的第二虚拟对象组，与图6同样地分别配置有虚拟对象411、412、413。

在第三房间601中分别配置有板604、窗605和时钟606，与图8同样地作为由虚拟对象生成处理部155生成的第三虚拟对象组，分别配置有虚拟对象611、612、613。

图16是表示从与图15的后方的出入口门202相反的方向203看的状态下的虚拟对象的显示的一例的说明图。如图16所示，透视了房屋墙壁等将现实空间分隔的物体，在显示画面中显示与另外的现实空间相关联地地配置的虚拟对象411～413、611～613。

由此，不局限于现实空间而能够容易地观看全部的虚拟对象211～213、411～413、611～613，在所希望的虚拟对象的选择时能够实现使用便利性的提高。

虚拟对象以根据其显示位置，能够容易地识别与虚拟对象相关联地配置的现实空间的方式显示。

例如在图16中，虚拟对象611～613位于显示画面的右侧而显示，由此，能够容易地识别是与图15的第三房间601相关联地配置的虚拟对象组。

同样地，虚拟对象411～413位于显示画面的左侧而显示，由此，能够容易地识别是与图15的第二房间401相关联地配置的虚拟对象组。

图17是表示图16的虚拟对象的显示的另一例的说明图。在此，图16中所示的显示例中，另外的房间即另外的现实空间处于较远处，与该现实空间相关联地配置的虚拟对象组被较小地显示，观看可能变得困难。

在这样的情况下，将虚拟对象411～413放大作为虚拟对象1514～1516来显示。同样地，将虚拟对象611～613放大作为虚拟对象1511～1513来显示。

虚拟对象姿态操作处理部154对于虚拟对象411～413、611～613分别进行形状放大的操作，生成放大了的虚拟对象1511～1516。

由此，能够将较小的难以观看的虚拟对象更清楚地观看。此外，在基于虚拟对象姿态操作处理部154进行的虚拟对象的形状放大操作时，放大到容易处理、易于观看的大小即可。

另外，关于虚拟对象1511，基于上述的预先指定的姿态信息，进行将图16的虚拟对象411显示为整体形状容易观看的显示形状。也可以通过用户的指定，将一部分的虚拟对象或者虚拟对象的全部以整体形状易于观看的显示形状显示。

如图16所示，将阻隔当前的现实空间与另外的现实空间的房间墙等透明而显示全部的虚拟对象，由此能够容易地确定与所选择的虚拟对象相关联地配置的现实空间。

图18是表示图16的虚拟对象组的一览显示的另一例的说明图。图18表示了从图10的显示转变到图16的显示时的显示例。虚拟对象611a、612a、613a为图10所示的虚拟对象。虚拟对象611b、612b、613b为从图10的显示例转变为图16的显示例时的虚拟对象。

即，当从图10的显示转变为图16的显示时，如图18所示，虚拟对象611a、612a、613a以作为虚拟对象611b、612b、613b集中于显示画面右侧部分的方式移动。

由此，能够容易地识别这些虚拟对象611b、612b、613b为与位于第一房间201的画面右侧的第三房间601的第三现实空间相关联地配置的虚拟对象。

在该显示转变时，使用户用眼睛追随的速度等慢慢地逐渐地转变，由此能够可靠地观看移动的虚拟对象组是与哪个现实空间相关联地配置的虚拟对象。

在图18中，说明了使任意的虚拟对象组移动的例子，也可以使全部的虚拟对象一齐移动。另外，也可以仅使所选择的1个或者多个虚拟对象移动而显示，而不显示没有选择的其它虚拟对象。

接着，关于将与各个现实空间相关联地配置的虚拟对象组进行多重显示的情况进行说明。

图19是表示基于图1的头戴式信息处理装置的多重显示画面的一例的说明图。图19是表示将图3、图7和图9所示的显示画面缩小，在显示器122的显示画面中进行多重显示的例子。

在图17中，标注了与图2、图3、图6、图7、图8、图9、图10中所示相同的附图标记的部分，因为具有与图2、图3、图6、图7、图8、图9、图10中已经说明的动作相同的动作，所以省略其详细说明。

在图19中，在显示器122的显示画面中，从左上方起依次分别显示了显示画面1701、显示画面1702、显示画面1703和显示画面1704。

在显示画面1701中，显示了与第一现实空间相关联地配置的第一虚拟对象组。在显示画面1702中显示了与第二现实空间相关联地配置的第二虚拟对象组。在显示画面1703中显示了与第三现实空间相关联地配置的第三虚拟对象组。在显示画面1704中显示了与第四现实空间相关联地配置的第四虚拟对象组。

在显示第四虚拟对象组的显示画面1704中，相对于由建筑群、车、人等的景观构成的第四现实空间，关联地配置有虚拟对象1705、1706。

在要选择所希望的虚拟对象的情况下，用户将与图19所示的各现实空间相关联地配置的虚拟对象组缩小地排列，从多重显示的显示画面1701～1704进行检索。之后，将所选择的虚拟对象存在的显示画面改变为通常的全显示画面，成为易于观看所希望的虚拟对象的状态。

由此，能够从显示与各个现实空间相关联地配置的虚拟对象组的多重显示画面，容易地选择配置有所希望的虚拟对象的现实空间。并且，能够仅显示所选择的虚拟对象相关联地配置的虚拟对象组，以易于观看的状态观看所希望的虚拟对象。

此外，在图19中，形成为显示4个显示画面的4重显示，但作为多重显示方法，例如也可以是9重显示、16重显示等的各种变形体。

另外，如图20所示，也可以以俯视多个空间的形状排列来显示。在该情况下，影像加工部153进行俯视的形状的图像的生成，显示控制部151将影像加工部153所生成的图像显示在显示器122中。由此，使空间容易想像而能够容易地进行包含所希望的虚拟对象的空间的选择。

在生成空间的俯视的影像时，将用户自身的头像显示在影像内的用户当前的位置，由此，能够使用户自身所在的空间容易掌握。

另外，在显示的多个空间中存在其他的用户的情况下，通过无线通信等取得其他的用户存在的空间上的坐标信息，并显示于所俯视的空间上的相应坐标位置上。

同样地，也可以在多重显示的图像上用头像或标记等显示用户自身或者其他用户的存在。由此，能够容易地掌握空间和各用户的位置关系。

用户自身的空间上的位置能够使用各种传感器信息、例如由深度传感器获得的与墙的距离、或用摄像机部111的拍摄图像等来确定。显示的头像的图像作为预先信息数据127记录在存储器124中。并且，影像加工部153使用保存在存储器124中的信息数据127合成在空间的影像中。

其他用户的坐标信息，从其他用户随身携带的信息终端的各种传感器或摄像机等获得，并从信息终端所具有的通信接口发送。头戴式信息处理装置100通过通信接口1804直接接收坐标信息。或者，头戴式信息处理装置100可以经由未图示的伺服接收坐标信息。

在图2～图19中，以相对于用户所在的现实空间配置有虚拟对象的状态为例进行了说明，VR等的用户操作的空间自身为虚拟空间，在相对于虚拟空间配置虚拟对象的情况下，也能够进行同样的操作。

另外，虚拟对象作为提醒等能够充分利用。虚拟对象生成处理部155能够在当前的空间以外的空间中生成虚拟对象。

通过利用该功能，能够作为提醒使用。例如，虽然处于客厅但虚拟对象生成处理部155将伞的虚拟对象生成并配置在玄关，由此成为用于在外出时不忘记伞的提醒。

此外，也可以利用显示器122显示由用户利用操作输入接口121进行的要求指示、由头戴式信息处理装置100进行的操作动作和表示显示动作等的信息等。

或者，也可以构成为上述的信息从耳机120以声音向用户发声、由与用户紧贴的振动产生部117产生振动、由刺激产生部146产生刺激，从而向用户通知。

由此，能够向用户可靠地通知并使其识别头戴式信息处理装置的活动状态。

另外，由头戴式信息处理装置100进行的操作和显示的动作的输入操作，不仅是基于操作输入接口121的输入操作，例如也可以由摄像机部111等检测用户的手等的运动，根据该运动取入输入操作。

根据以上内容，即使虚拟对象在另外的现实空间，也能够容易地进行虚拟对象的阅览或操作。

(实施方式2)

<头戴式显示系统的构成例>

图21是表示基于本实施方式2的头戴式显示系统1801的结构的一例的模块图。

头戴式显示系统1801如图21所示，由头戴式信息处理装置100和虚拟对象生成服务器装置1802构成。头戴式信息处理装置100和虚拟对象生成服务器装置1802分别连接于网络1803。

图21所示的头戴式信息处理装置100，在标注了与图1所示相同的附图标记的各功能模块的结构的基础上，新设置有通信接口1804和收发天线1805。另一方面，在图21的头戴式信息处理装置100没有设置虚拟对象生成处理部155。

虚拟对象生成服务器装置1802由虚拟对象生成处理部1811、存储器1812、控制部1813、通信接口1814和收发天线1815等构成。虚拟对象生成服务器装置1802中的各功能模块经由母线1820彼此连接。此外，在图21中，在与图1的实施例相同的处理部分标注有相同的附图标记，省略其说明。

在头戴式显示系统1801中，虚拟对象生成服务器装置1802所具有的虚拟对象生成处理部1811生成虚拟对象。

存储器1812保存虚拟对象生成处理部1811所生成的虚拟对象。通信接口1814将存储器1812所保存的虚拟对象从收发天线1815经由通信网络即网络1803发送到头戴式信息处理装置100。头戴式信息处理装置100接收经由网络1803发送来的虚拟对象。

另外，在图21中，在头戴式信息处理装置100中的虚拟对象的显示处理自身与实施方式1相同，但虚拟对象的生成由不同于头戴式信息处理装置100的另外的装置即虚拟对象生成服务器装置1802进行，这一点与上述实施方式1不同。

在虚拟对象生成服务器装置1802中，存储器1812与头戴式信息处理装置100的存储器124同样为闪存存储器等的非易失性半导体存储器。

存储器1812存储虚拟对象生成服务器装置1802的控制部1813要使用的各种程序和所生成的虚拟对象等。通信接口1814为经由网络1803与头戴式信息处理装置100进行通信的通信接口，与头戴式信息处理装置100进行信息的收发。

控制部1813例如由CPU等构成，通过执行在存储器1812中存储保存的OS和动作控制用应用程序等的程序，控制各功能模块，并控制虚拟对象生成服务器装置1802整体。

控制部1813控制基于虚拟对象生成处理部1811进行的虚拟对象的生成、所生成的虚拟对象的向存储器1812的保存等。另外，控制部1813以按照来自头戴式信息处理装置100的虚拟对象的发送输出请求，将所生成的虚拟对象发送到头戴式信息处理装置100的方式进行控制。

由此，虚拟对象不是由头戴式信息处理装置100生成，而是能够由与头戴式信息处理装置100分离的虚拟对象生成服务器装置1802生成。

其结果是，能够实现处理的虚拟对象信息量的大规模化。同时，能够在多个场所对多个头戴式信息处理装置100生成并分配分别请求的虚拟对象。

根据以上内容，能够同时通过多个头戴式信息处理装置100容易地观看和操作配置于另外的现实空间中的虚拟对象。

以上，基于实施方式具体地说明了由本发明者完成的发明，但本发明不限于上述实施方式，在没有脱离其主旨的范围内当然能够进行各种变更。

此外，本发明不限定于上述的实施方式，包含各种变形例。例如，上述的实施方式是为了使本发明容易理解而说明的详细的说明内容，不一定限定于具有所说明的全部的结构。

另外，也能够将某实施方式的结构的一部分之后为其它的实施方式的结构。另外，也能够在某实施方式的结构中追加其它的实施方式的结构。另外，关于各实施方式的结构的一部分，能够进行其它的结构的追加、删除、置换。

另外，上述的各结构、功能、处理部、处理功能等，其一部分或者全部例如可以通过在集成电路进行设计等而利用硬件实现。另外，上述的各结构、功能等，也可以通过处理器解释实现各个功能的程序并执行，从而由软件来实现。实现各功能的程序、表、文件等的信息，能够存储在存储器、硬盘、SSD(Solid State Drive：固态硬盘)等的记录装置、或者IC卡、SD卡、DVD等的记录介质中。

另外，控制线和信息线表示了认为在说明上所需要的，而不一定限于表示了在产品上全部的控制线和信息线。实际上可以认为几乎全部的结构彼此连接。

附图标记的说明

100 头戴式信息处理装置

111 摄像机部

112 右眼视线检测部

113 左眼视线检测部

117 振动产生部

118 周围声音麦克风

119 人声麦克风

120 耳机

121 操作输入接口

122 显示器

124 存储器

125 控制部

140 母线

142 深度传感器

143 加速度传感器

144 陀螺仪

145 地磁传感器

146 刺激产生部

151 显示控制部

152 数据管理部

153 影像加工部

154 虚拟对象姿态操作处理部

155 虚拟对象生成处理部

156 虚拟对象变形操作处理部

1801 头戴式显示系统

1802 虚拟对象生成服务器装置

1803 网络

1804 通信接口

1805 收发天线

1811 虚拟对象生成处理部

1812 存储器

1813 控制部

1814 通信接口

1815 收发天线。