提供虚拟环境的方法与系统及非暂态电脑可读取储存介质与流程

1.本公开文件有关一种提供虚拟环境的方法与系统以及非暂态电脑可读取储存介质，尤指一种移动中提供虚拟环境的方法与系统以及非暂态电脑可读取储存介质。


背景技术：

2.在汽车业界，增强现实(ar)技术原本被设计为显示关于车辆本身的资讯，例如速度和方向。经过汽车业界积极研发后，增强现实技术已能够实现辅助驾驶功能，例如导航和道路偏移警示。为了让虚拟物件在无论使用者何时观看的情况下都维持于现实世界环境中的正确位置，头戴式装置(hmd)或其他能够提供虚拟物件的装置需要实时定位使用者的位置和视野。实时定位技术例如包含内向外(inside out)追踪技术和外向内(outside in)追踪技术。外向内追踪技术需要多个固定位置的灯塔，且利用光学追踪技术以定位使用者的位置。高准确度与适用简单的演算法是外向内追踪技术的优点。不过，固定位置的灯塔不适用于经常处于移动状态的车辆。内向外追踪技术需要复杂的影像处理演算法，但内向外追踪技术允许头戴式装置透过撷取周遭环境的影像来进行自我定位。然而，当内向外追踪技术被实作于车用应用中时，车辆内部和外部以不同速度移动的现实世界物件会干扰内向外追踪技术的定位过程，导致头戴式装置难以同时在车内外的正确位置显示虚拟物件。


技术实现要素：

3.本公开文件提供一种于移动中提供虚拟环境的方法，其包含以下流程：撷取第一影像，第一影像关联于至少部分封闭的壳体的内部空间，且关联于由内部空间向外撷取到的壳体的外部环境的一部分；将第一影像分类为第一部分和第二部分，第一部分关联于内部空间，第二部分关联于由内部空间向外撷取到的外部环境的部分；估测行动装置分别关联于壳体与外部环境的第一姿态与第二姿态，第一定位模型基于第一部分估测第一姿态，第二定位模型基于关联于外部环境的第二影像估测第二姿态；以及依据第一姿态与第二姿态，在行动装置的视野中显示多个虚拟物件。
4.在上述方法的一些实施例中，将第一影像分类为第一部分与第二部分包含：选择深度阈值子集，其中深度阈值子集中的多个深度阈值分别对应于内部空间的地图的多个不同部分。在第一影像对应于地图的每个部分的多个像素中，对应于小于或等于深度阈值子集中的对应深度阈值的深度值的像素被分类至第一部分，对应于大于对应深度阈值的深度值的像素被分类至第二部分，且第二影像包含第二部分。
5.在上述方法的一些实施例中，第一影像由行动装置的相机系统所撷取，且关联于第一影像的多个深度值由行动装置的深度计所撷取。
6.在上述方法的一些实施例中，将第一影像分类为第一部分与第二部分包含：将第一影像中对应于小于或等于深度阈值的深度值的像素分类至第一部分；以及将第一影像中对应于大于深度阈值的深度值的像素分类至第二部分，且第二影像包含第二部分。
7.在上述方法的一些实施例中，将第一影像分类为第一部分与第二部分包含：将第
一影像中对应于小于或等于速度阈值且由光流演算法计算出的速度大小的像素分类至第一部分；以及将第一影像中对应于大于速度阈值且由光流演算法计算出的速度大小的像素分类至第二部分。
8.在上述方法的一些实施例中，将第一影像分类为第一部分与第二部分包含辨识第一影像中的多个地标。多个地标用于指示对应于内部空间的像素与对应于由内部空间向外撷取到的外部环境的部分的像素之间的边界，且第二影像包含第二部分。
9.在上述方法的一些实施例中，第一影像由行动装置的相机系统所撷取，且第二影像由安装于壳体上的额外相机系统所撷取。额外相机系统用于撷取外部环境的影像。
10.在上述方法的一些实施例中，壳体包含车辆的外壳。将第一影像分类为第一部分与第二部分包含：获取车辆的速度或方向盘角度；以及依据车辆的速度或方向盘角度将第一影像分类为第一部分与第二部分。
11.在上述方法的一些实施例中，将第一影像分类为第一部分与第二部分包含：获取行动装置撷取第三影像时的速度、加速度、角速度或角加速度，且第三影像是第一影像的前一帧；以及依据行动装置的速度、加速度、角速度或角加速度将第一影像分类为第一部分与第二部分。
12.本公开文件提供一种于移动中提供虚拟环境的系统，其包含行动装置与主控装置。行动装置用于撷取第一影像。第一影像关联于至少部分封闭的壳体的内部空间，且关联于由内部空间向外撷取到的壳体的外部环境的一部分。主控装置通讯连接于行动装置，且用于执行以下运作：将第一影像分类为第一部分和第二部分，第一部分关联于内部空间，第二部分关联于由内部空间向外撷取到的外部环境的部分；以及估测行动装置分别关联于壳体与外部环境的第一姿态与第二姿态，第一定位模型基于第一部分估测第一姿态，第二定位模型基于关联于外部环境的第二影像估测第二姿态。行动装置还用于依据第一姿态与第二姿态，在行动装置的视野中显示多个虚拟物件。
13.在上述系统的一些实施例中，当主控装置将第一影像分类为第一部分与第二部分时，主控装置还用于：选择深度阈值子集，其中深度阈值子集中的多个深度阈值分别对应于内部空间的地图的多个不同部分。在第一影像对应于地图的每个部分的多个像素中，对应于小于或等于深度阈值子集中的对应深度阈值的深度值的像素被分类至第一部分，对应于大于对应深度阈值的深度值的像素被分类至第二部分，且第二影像包含第二部分。
14.在上述系统的一些实施例中，第一影像由行动装置的相机系统所撷取，且关联于第一影像的多个深度值由行动装置的深度计所撷取。
15.在上述系统的一些实施例中，当主控装置将第一影像分类为第一部分与第二部分时，主控装置还用于：将第一影像中对应于小于或等于深度阈值的深度值的像素分类至第一部分；以及将第一影像中对应于大于深度阈值的深度值的像素分类至第二部分，且第二影像包含第二部分。
16.在上述系统的一些实施例中，当主控装置将第一影像分类为第一部分与第二部分时，主控装置还用于：将第一影像中对应于小于或等于速度阈值且由光流演算法计算出的速度大小的像素分类至第一部分；以及将第一影像中对应于大于速度阈值且由光流演算法计算出的速度大小的像素分类至第二部分。
17.在上述系统的一些实施例中，当主控装置将第一影像分类为第一部分与第二部分
时，主控装置还用于辨识第一影像中的多个地标。多个地标用于指示对应于内部空间的像素与对应于由内部空间向外撷取到的外部环境的部分的像素之间的边界，且第二影像包含第二部分。
18.在上述系统的一些实施例中，第一影像由行动装置的相机系统所撷取，且第二影像由安装于壳体上的额外相机系统所撷取。额外相机系统用于撷取外部环境的影像。
19.在上述系统的一些实施例中，壳体包含车辆的外壳。当主控装置将第一影像分类为第一部分与第二部分时，主控装置还用于：获取车辆的速度或方向盘角度；以及依据车辆的速度或方向盘角度将第一影像分类为第一部分与第二部分。
20.在上述系统的一些实施例中，当主控装置将第一影像分类为第一部分与第二部分时，主控装置还用于：获取行动装置撷取第三影像时的速度、加速度、角速度或角加速度，其中第三影像是第一影像的前一帧；以及依据行动装置的速度、加速度、角速度或角加速度将第一影像分类为第一部分与第二部分。
21.本公开文件提供一种非暂态电脑可读取储存介质，其储存有多个电脑可读取指令。多个电脑可读取指令用于控制用于在移动中提供虚拟环境的系统。当多个电脑可读取指令被系统执行时，多个电脑可读取指令使系统执行以下运作：撷取第一影像，第一影像关联于至少部分封闭的壳体的内部空间，且关联于由内部空间向外撷取到的壳体的外部环境的一部分；将第一影像分类为第一部分和第二部分，第一部分关联于内部空间，第二部分关联于由内部空间向外撷取到的外部环境的部分；估测行动装置分别关联于壳体与外部环境的第一姿态与第二姿态，第一定位模型基于第一部分估测第一姿态，第二定位模型基于关联于外部环境的第二影像估测第二姿态；以及依据第一姿态与第二姿态，在行动装置的视野中显示多个虚拟物件。
22.在上述非暂态电脑可读取储存介质的一些实施例中，将第一影像分类为第一部分与第二部分包含：选择深度阈值子集，其中深度阈值子集中的多个深度阈值分别对应于内部空间的地图的多个不同部分。在第一影像对应于地图的每个部分的多个像素中，对应于小于或等于深度阈值子集中的对应深度阈值的深度值的像素被分类至第一部分，对应于大于对应深度阈值的深度值的像素被分类至第二部分，且第二影像包含第二部分。
附图说明
23.图1为依据本公开文件一实施例的用于在移动中提供虚拟环境的系统的示意图。
24.图2为依据本公开文件一实施例的用于说明图1的系统用于在图1的壳体处于移动状态时提供虚拟环境的操作的流程图。
25.图3绘示了根据本公开文件一实施例的由行动装置捕捉且被使用于图2的操作中的影像。
26.图4a为依据本公开文件一实施例的在图2的步骤210中产生的第一部分的示意图。
27.图4b为依据本公开文件一实施例的在图2的步骤210中产生的第二部分的示意图。
28.图5绘示了根据本公开文件一实施例的由行动装置捕捉且被使用于图2的操作中的影像。
29.图6绘示了根据本公开文件一实施例的由行动装置捕捉且被使用于图2的操作中的影像。
30.图7是图1的系统提供的依据本公开文件一实施例的虚拟环境的示意图。
31.图8是图1的系统提供的依据本公开文件一实施例的另一虚拟环境的示意图。
32.图中：
33.100:系统
34.103:壳体
35.105:内部空间
36.107:外部环境
37.110:行动装置
38.111:网络接口
39.112:处理器
40.113:存储器
41.114:相机系统
42.115:显示系统
43.120:主控装置
44.121:网络接口
45.122:处理器
46.123:存储器
47.123a:第一定位模型
48.123b:第二定位模型
49.123c:物件分割模型
50.210～250:步骤
51.300,500,600:影像
52.310:位置
53.d_th1～d_th4:深度阈值
54.410,420,430:区域
55.510:光流向量
56.610:标示物
57.620:边界
58.710:第一虚拟物件
59.720:第二虚拟物件
具体实施方式
60.以下将配合相关图式来说明本公开文件的实施例。在图式中，相同的标号表示相同或类似的元件或方法流程。
61.图1为依据本公开文件一实施例的系统100的示意图。系统100用于在移动中提供虚拟环境。系统100包含行动装置110和主控装置120，其中两者皆具有资料处理能力。行动装置110包含用于与主控装置120通讯的网络接口111、处理器112、存储器113、相机系统114和显示系统115。在一些实施例中，行动装置110为头戴式装置，且包含用于提供增强现实(ar)环境的光学透视系统及/或视讯透视系统。当使用者穿戴光学透视头戴式装置时，光学
透视头戴式装置能令使用者实际且直接地观看到真实世界环境(例如透过透明镜片)，且可以同时将虚拟物件的影像投影至使用者的视野(例如透过显示系统115)，藉此透过虚拟物件增强了使用者感知到的现实世界环境。视讯透视头戴式装置会撷取现实世界环境的影像(例如透过相机系统114)，并将这些影像提供给使用者(例如透过显示系统115)以令使用者间接观看到现实世界环境，视讯透视头戴式装置还可同时将虚拟物件的影像重叠于现实世界环境的影像。
62.主控装置120包含用于与行动装置110通讯的网络接口121、处理器122和存储器123。在一些实施例中，主控装置120可以由车用电脑来实现。行动装置110和主控装置120可以于非暂态电脑可读取储存介质(例如存储器113和123)储存多个电脑可读取指令。这些电脑可读取指令可以被执行(例如由处理器112和122执行)以执行以下配合图2说明的操作步骤，但本公开文件不以此为限。在一些实施例中，主控装置120可以整合进行动装置110，亦即行动装置110可以是能够执行配合图2说明的所有操作步骤的一体式(all-in-one)头戴式装置。
63.主控装置120的存储器123包含第一定位模型123a、第二定位模型123b和物件分割模型123c。当行动装置110位于壳体103(例如，车辆的外壳)的内部空间105时，物件分割模型123c用于分割行动装置110撷取到的影像，且第一定位模型123a和第二定位模型123b用于依据物件分割模型123c的输出产生行动装置110关联于壳体103与壳体103的外部环境107的多个姿态。多种物件分割模型皆适用于本公开文件，这些模型例如包含r-cnn模型、fast r-cnn模型、faster r-cnn模型、mask r-cnn模型以及yolo模型等等。关联于壳体103的姿态可以包含六自由度(6dof)姿态，且此六自由度姿态可以由内部空间105的坐标系来描述。相似地，关联于外部环境107的姿态可以包含可以由外部环境107的坐标系来描述的六自由度姿态。在一些实施例中，第一定位模型123a和第二定位模型123b使用了即时定位与地图建构(slam)技术。
64.在一些实施例中，处理器112和122的每一者可以由单或多晶片通用处理器、特殊应用积体电路(asic)、现场可程式化逻辑闸阵列(fpga)或上述多者的组合来实现。网络接口111和121的每一者可以包含例如蓝牙、wifi、wimax、gprs或wcdma等无线网络接口；或包含例如以太网络、usb或ieee-1364等有线网络接口。
65.图2为依据本公开文件一实施例的用于说明图1的系统100的操作的流程图。前述操作用于在图1的壳体103处于移动状态时(例如，穿戴行动装置110的使用者正在驾驶车辆时)提供虚拟环境。为便于理解，壳体103在本公开文件的示例性实施例中被描述为车辆的外壳。在步骤210，行动装置110透过相机系统114撷取多张影像(例如，图3、图5和图6中的影像300、500和600)。每张图像可包含(1)关联于内部空间105的部分，此部分例如包含方向盘和空调出风口等等的资讯；以及(2)关联于外部环境107的部分，此部分例如包含其他车辆和路树等等的资讯。换言之，关联于外部环境107的部分包含由内部空间105向外撷取到的现实世界物件。
66.在步骤220，主控装置120接收到行动装置110所撷取的多张图片。主控装置120的物件分割模型123c会对这些图片进行影像分割。对于每张图片而言，其像素会被分类至对应于内部空间105的子集与对应于外部环境107的另一子集。对应于内部空间105的子集中的像素接着被分割为一第一部分，其中第一部分作为图1的第一定位模型123a的输入资料。
另一方面，对应于外部环境107的子集中的像素被分割为一第二部分，其中第二部分作为图1的第二定位模型123b的输入资料。分类像素的方法将配合图3至图6进一步讨论。
67.图3绘示了依据本公开文件一实施例的影像300。影像300由行动装置110于步骤210中所撷取，且被用于执行图2的步骤220。在多种适用于步骤220的分类技术中，第一种是透过将关联于影像300的多个深度值与一深度阈值子集(例如，深度阈值dth_1-dth_4)进行比较以分类像素，其中深度阈值子集是自多个深度阈值中选出。主控装置120可以产生对应于内部空间105的地图，并基于由影像300中辨识出的地图的多个部分分别选择对应的多个深度阈值以作为深度阈值子集。例如，地图中对应于驾驶座车门的部分可以对应于较小的深度阈值dth_1；地图中对应于挡风玻璃的部分可以对应于较大的深度阈值dth_2和dth_3；地图中对应于副驾驶座车门的部分可以对应于更大的深度阈值dth_4，其中图3中的位置310代表相机系统114撷取影像300时的位置。总之，透过在地图和影像300之间执行特征比对以搜寻出现在影像300中的地图的多个部分，主控装置120可以于多个深度阈值中选择出对应于影像300的深度阈值子集。
68.在一些实施例中，透过深度差技术，主控装置120可以计算关联于影像300的多个深度值。行动装置110的相机系统114包含多个相机，这些相机的其中之一撷取了影像300，而在撷取影像300的时间点其他相机可以撷取一或多张辅助影像。接着，关联于影像300的多个深度值可以依据影像300和该一或多张辅助影像之间的视差(disparity)来计算。在其他实施例中，在撷取影像300的时间点，关联于影像300的多个深度值可以由深度计(未绘示)量测。深度计可以设置于行动装置110之中且与相机系统114具有相同的拍摄角度。深度计可以由飞时测距(tof)相机、结构光相机、超音波距离感测器等等来实现。
69.在影像300对应于地图的每个部份的像素中(例如，对应于驾驶座车门的部分)，物件分割模型123c会将对应于小于或等于一对应深度阈值(例如，深度阈值dth_1)的深度值的像素分类至关联于内部空间105的第一部分，藉此包含内部空间105的物件(例如，方向盘和空调出风口)的第一部分被生成，如图4a所示。另一方面，在对应于地图的该部份的像素中，物件分割模型123c会将对应于大于该对应深度阈值的深度值的像素分类至关联于由内部空间105向外撷取到的部分外部环境107(以下简称为「撷取到的外部环境107」)的第二部分，藉此包含撷取到的外部环境107的物件(例如，其他车辆和路树)的第二部分被生成，如图4b所示。如图4a和图4b所示，在一些实施例中，在物件被滤除的区域410、420和430中像素可以被设为0灰阶(以网底绘示)或被以其他合适的方式标注，以通知第一定位模型123a和第二定位模型123b区域410、420和430不可追踪。
70.内部空间105的地图可以包含密集型地图(dense map)，且密集型地图包含密集三维表面网格(dense 3d surface mesh)。在一些实施例中，当行动装置110第一次被携带进内部空间105时，行动装置110及/或主控装置120可以利用相机系统114及/或深度计扫描内部空间105以产生地图。行动装置110及/或主控装置120可以进一步依据新产生的地图产生多个深度阈值，其中产生多个深度阈值包含多个流程，例如：估测相机系统114的位置310与地图不同部分(例如，门和挡风玻璃)之间的多个距离；以及将这些距离设为深度阈值。在另一些实施例中，地图和深度阈值可以由壳体103的制造商(例如，车辆制造商)事先载入存储器113及/或存储器123。
71.在一些实施例中，物件分割模型123c可以将关联于影像300的多个深度值与仅一
个深度阈值进行比较。影像300中对应于小于或等于该深度阈值的深度值的像素会被分类至第一部分。另一方面，影像300中对应于大于该深度阈值的深度值的像素会被分类至第二部分。在此情况下，内部空间105的地图可以被省略，因而能降低计算复杂度。
72.图5为依据本公开文件一实施例的影像500。影像500由行动装置110于步骤210撷取，且被用于执行图2的步骤220。在本实施例中，藉由将关联于影像500的多个速度大小与一速度阈值进行比较，影像500中的像素被物件分割模型123c分类至分别关联于内部空间105和撷取到的外部环境107的第一部分和第二部分，其中前述速度大小是由光流法所计算。光流法用于透过计算个别像素的速度或移动量来侦测移动物件。许多用于分析光流的方法皆适用于本公开文件，这些方法例如包含相位相关方法(phase correlation method)、块相关方法(block-based methods)、梯度方法(例如lucas-kanade光流法、horn-schunk方法、buxton-buxton方法与black jepson方法)以及离散优化方法等等。
73.基于连续撷取且包含影像500的多张影像，主控装置120可以产生关连于影像500且具有多个光流向量510的光流场。为便于理解，光流向量510与影像500一起绘示于图5中。多个光流向量510对应于影像500中的多个取样点(或多个真实世界物件)，且用于指出主控装置120自每个取样点计算出的速度的大小和方向。
74.如图5中的，对应于内部空间105的取样点的光流向量510较小或接近于零(绘示为圆点)，代表着车辆中(亦即内部空间105中)的物件几乎为静止状态。反之，对应于撷取到的外部环境107的光流向量510辐射状地向外延伸且具有递增的大小，代表着外部环境107中的物件以一定的速度相对于车辆(亦即，壳体103)移动。因此，影像500中对应于小于或等于速度阈值的速度大小的像素被分类至图4a所示的第一部分，而影像500中对应于大于速度阈值的速度大小的像素被分类至图4b所示的第二部分。在一些实施例中，速度阈值的单位可以是像素/微秒(pixel/ms)，且可以对应于物件介于0.1～0.5公里/小时(km/h)之间的实际移动速度。
75.图6为依据本公开文件一实施例的影像600。影像600由行动装置110于步骤210中撷取且被用于执行图2的步骤220。多个标示物(landmarks)610被设置于壳体103之内以指示对应于内部空间105的像素与对应于撷取到的外部环境107的像素之间的多个边界620。多个标示物610例如包含具有qr码的贴纸或绘示于边界620附近的特定图案等等。主控装置120可以包含物件侦测模型，且物件侦测模型用于辨识标示物610以获取边界620的形状和分布。物件分割模型123c会将影像600中被边界620围绕的像素分类至图4b的第二部分，而其余像素则被分类至图4a的第一部分。
76.在一些实施例中，物件分割模型123c被输入一或多个辅助参数以辅助影像分割。辅助参数可以由行动装置110所产生，且例如包含在行动装置110撷取前一帧影像(例如，比影像300、500或600早一帧的影像)的时间点时行动装置110的速度、加速度、角速度或角加速度。由于穿戴行动装置110的使用者的头部通常具有连续的运动轨迹，藉由考虑这些有关前一帧的辅助参数，物件分割模型123c可以较佳地估测当前一帧中对应于撷取到的外部环境107的部分的位置(例如，车窗的位置)。在此情况下，行动装置110可以包含三轴加速度计、陀螺仪及/或全球定位系统测速计。藉由量测车辆(例如，壳体103)的参数，主控装置120也可获取辅助参数，例如车辆的速度及/或方向盘角度。
77.请再次参考图2，在经由配合图3至图6讨论的技术产生第一部分和第二部分后，主
控装置120可以执行步骤230和240以分别产生第一姿态和第二姿态。详细而言，关联于内部空间105的第一部分会被输入至第一定位模型123a以产生第一姿态，其中第一姿态的位置和旋转可以由内部空间105的坐标系来描述。关联于撷取到的外部环境107的第二部分会被输入至第二定位模型123b以产生第二姿态，其中第二姿态的位置和旋转可以由外部环境107的坐标系来描述。内部空间105的坐标系独立于外部环境107的坐标系，因而行动装置110依据第一姿态提供的虚拟物件以及依据第二姿态提供的虚拟物件可以不同的方式移动，于后续段落中将配合图7和图8进行说明。
78.在一些实施例中，壳体103上装设有额外的相机系统(未绘示)，该额外的相机系统用于撷取外部环境107的影像。相较于行动装置110的相机系统114，该额外的相机系统可以具有较高的性能(例如，较广的视角、较高的解析度或较短的快门时间)。主控装置120会在第二部分与该额外相机系统撷取到的影像(以下称为「额外影像」)之间进行特征比对，以辨识出额外影像中对应于第二部分但具有较高影像品质的部分。接着，额外影像的该部分会被输入至第二定位模型123b以产生第二姿态，而非将第二部分输入至第二定位模型123b。总而言之，使用额外相机系统产生的第二姿态会因为额外影像的较高影像品质而具有较高的准确度。
79.在图2的步骤250，主控装置120将第一姿态和第二姿态传送至行动装置110。图7是图1的系统100提供的依据本公开文件一实施例的虚拟环境的示意图。行动装置110透过显示系统115依据第一姿态和第二姿态分别提供一或多个第一虚拟物件710和一或多个第二虚拟物件720给使用者。同时，如前述配合图1所讨论的，穿戴行动装置110的使用者可以是透过直接观看或透过显示装置115观察到现实物件。因此，第一虚拟物件710和第二虚拟物件720看起来像是位于真实世界环境中。详细而言，依据第一姿态提供的第一虚拟物件710(例如，虚拟仪表板和虚拟显示器)看起来像是放置于或接合于壳体103中的真实物件(例如，驾驶座中的物件)。使用者所感知到的第一虚拟物件710可以是对于内部空间105相对静止，或是与第一虚拟物件710所接合的内部空间105中的真实物件一起移动。另一方面，依据第二姿态提供的第二虚拟物件720(例如，虚拟路标和虚拟方形指标)看起来像是放置于或接合于外部环境107中的真实物件(例如，其他车辆或路树)。使用者所感知到的第二虚拟物件720可以是对于外部环境107相对静止，或是与第二虚拟物件720所接合的外部环境107中的真实物件一起移动。
80.如上述配合图1所讨论的，内部空间105和外部环境107分别具有独立的坐标系以描述第一虚拟物件710和第二虚拟物件720的姿态。因此，每个第一虚拟物件710的位置和旋转不会受到外部环境107的变化影响，且每个第二虚拟物件720的位置和旋转不会受到内部空间105的变化影响，以下将配合图8进一步说明。
81.在一些实施例中，当穿戴行动装置110的使用者在图7的虚拟环境产生后控制车辆向右转时，图7的虚拟环境会更新为图8中的新虚拟环境。由于多个第一虚拟物件710和多个第二虚拟物件720在各自的坐标系中维持原本的姿态，多个第一虚拟物件710会在使用者的(或行动装置110的)视野中保持原位，而多个第二虚拟物件720会在使用者的(或行动装置110的)视野中向左移动。总而言之，当使用者改变行动装置110的视野时(例如，透过转动他/她的头部)，第一虚拟物件710和第二虚拟物件720不受视野变化的影响，使得第一虚拟物件710和第二虚拟物件720看起来像是真实存在于真实世界环境中。
82.综上所述，在系统100中，追踪车辆内部物件的运作与追踪车辆外部物件的运作互相独立。因此，图1的系统100适用于在移动车辆中执行内向外(inside out)追踪以实现自我定位任务，而不会受到车辆内部物件和外部物件之间不同移动速度的影响。如此一来，无论穿戴行动装置110的使用者的视野为何，系统100都可以将虚拟物件维持于真实世界环境中的正确位置。
83.在说明书及申请专利范围中使用了某些词汇来指称特定的元件。然而，所属技术领域中具有通常知识者应可理解，同样的元件可能会用不同的名词来称呼。说明书及申请专利范围并不以名称的差异做为区分元件的方式，而是以元件在功能上的差异来做为区分的基准。在说明书及申请专利范围所提及的「包含」为开放式的用语，故应解释成「包含但不限定于」。另外，「耦接」在此包含任何直接及间接的连接手段。因此，若文中描述第一元件耦接于第二元件，则代表第一元件可通过电性连接或无线传输、光学传输等信号连接方式而直接地连接于第二元件，或者通过其他元件或连接手段间接地电性或信号连接至该第二元件。
84.在此所使用的「及/或」的描述方式，包含所列举的其中之一或多个项目的任意组合。另外，除非说明书中特别指明，否则任何单数格的用语都同时包含复数格的涵义。
85.以上仅为本公开文件的较佳实施例，凡依本公开文件权利要求所做的均等变化与修饰，皆应属本公开文件的涵盖范围。