一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

用于确定至少一个对象的位置的检测器的制作方法

2021-10-27 20:21:00 来源:中国专利 TAG:用于 检测器 技术 扫描 对象


1.本发明涉及用于确定至少一个对象的位置的检测器和方法。本发明还涉及用于在用户与机器之间交换至少一项信息的人机界面(interface)、娱乐设备、跟踪系统、相机、扫描系统和检测器设备的各种用途。根据本发明的设备、方法和用途具体地可用于例如日常生活、游戏、交通技术、生产技术、安全技术、摄影(诸如用于艺术、文档或技术目的的数字摄影或视频摄影)、医疗技术、或科学的各个领域。此外,本发明具体地可以用于扫描一个或多个对象和/或用于扫描场景,诸如用于例如在建筑、测量、考古、艺术、医学、工程或制造的领域中生成对象或场景的深度轮廓(profile)。然而,其它应用也是可能的。


背景技术:

2.在环境引起多次反射的情况下,光学3d感测方法通常可以利用偏置(biasing)光源或反射测量对象来确定不可靠的结果。此外,利用成像能力的3d感测方法通常需要高计算能力来解决对应问题。必要的计算能力可导致处理器或现场可编程门阵列(fpga)、考虑到通风要求或防水壳体困难的散热、电力消耗(特别是移动设备)、以及此外测量的不确定性中的高成本。
3.从使用三角测量成像方法的现有技术中已知大量光学设备。例如,结构光方法或立体方法是已知的。例如,使用以固定相对取向的两个相机的无源(passive)立体方法或使用附加光投影仪的有源(active)立体技术。另一个示例是结构光方法,其中使用一个光投影仪和以固定相对取向的一个相机。为了经由三角测量确定深度图像,必须首先解决所谓的对应问题。因此,在无源立体相机技术中,必须在两个相机视图中识别足够对应的特征点。在结构光方法中,必须确定预先存储的与投影的伪随机光图案之间的对应关系。对于这些对应问题的稳健解决方案,必须采用计算成像算法,诸如与投影点图案中的点的数量近似二次缩放的算法。在结构光方法中,例如,使用包括具有固定相对距离的两个检测器的立体系统,光源投影图案,诸如点、伪随机、随机、非周期性或不规则点图案等。每个检测器生成反射图案的图像,并且图像分析任务是识别两个图像中对应的特征。由于固定的相对位置,在两个图像之一中选择的对应特征点位于另一个图像中的对极线(epipolar line)上。然而,解决所谓的对应问题可能很困难。在立体和三角测量系统中,所有特征点沿对极线的距离必须彼此之间具有合理的对应关系。不能一个接一个地作出对应决定。如果一个对应关系是错误的,这会对其它特征点产生影响,诸如不可见性。这通常会产生二次缩放评估算法。
4.例如,us 2008/0240502 a1和us 2010/0118123 a1描述了一种用于映射对象的设备,包括照射组件,该照射组件包括包含固定斑点图案的单个透明体(transparency)。光源通过光辐射透照单个透明体,以便将图案投影到对象上。图像捕获组件捕获使用单个透明体投影到对象上的图案的图像。处理器处理由图像捕获组件捕获的图像以重建对象的三维图。
5.us 2008/118143 a1描述了一种用于使用具有多个不同可识别特征类型的二维编
码光图案来获得图像以确定静止或移动对象的三维形状的方法和装置。编码光图案被投影在对象上,使得每个可识别特征类型在可区分对极线的预定义部分上最多出现一次。捕获对象的图像,并提取反射特征类型及其在捕获图像中已知对极线上的位置。反射特征类型沿着它们的对极线从参考坐标的位移(displace)确定空间中对应的三维坐标,并且从而确定对象在任何时间点的形状的3d映射或模型。
6.us 2009/066929 a1描述了使用立体相机建立用于创建距离(range)图像的点的对应关系。场景被照射两次;至少一次以随机或伪随机图案被照射。对于两个相机,每次照射都拍摄图像,并逐像素计算亮度的商(quotient)。该对应关系是基于比较像素在不同相机的对极线上的商来建立的。照射图案优选地沿着对极线高度地被调制;与它成横向或对角,它没有或只是轻微地被调制。对于照射,使用投影单元,其在优选布置中包括彼此具有距离的两个重叠的光栅图案,其中至少一个以伪随机方式变化,并且两个紧密相邻的光源照透(shine through)光栅,并且从而产生不同的伪随机图案,特别是莫尔图案。
7.mannhan fahim等人“离焦深度的模糊校准”,2016年第13届计算机和机器人视觉(crv)会议,ieee,2016年6月1日,第281

288页,xp033033015,doi:10:1109/crv.2016.62(“blur calibration for depth from defocus”,2016 13th conference on computer and robot vision(crv),ieee,1june 2016,pages 281

288,xp033033015,doi:10:1109/crv.2016.62)描述了基于离焦深度的方法对模糊核(kernel)建模。描述了一种用于对离焦深度执行模糊核校准的方法。
8.尽管上述设备和检测器暗示了一些优势,但仍然存在一些技术挑战。因此,所使用的评估算法需要高计算能力,这是严重的成本驱动因素。此外,由于计算资源所需的能耗和热量产生,计算需求限制了此类3d传感器方法在户外和移动应用中的使用。


技术实现要素:

9.本发明解决的问题
10.因此,本发明的一个目的是面临已知设备和方法的上述技术挑战提供设备和方法。具体地,本发明的目的是提供可以可靠地确定对象在空间中的位置的设备和方法,优选地以低技术努力并且在技术资源和成本方面具有低要求。
11.发明内容
12.具有独立权利要求的特征的本发明解决了该问题。在从属权利要求和/或以下说明书和详细实施例中呈现了可以单独或组合实现的本发明的有利发展。
13.如下面所使用的,术语“具有”、“包含”或“包括”或其任意语法变化以非排他性方式使用。因此,这些术语既可以指以下的情况:其中除了由这些术语引入的特征之外在该上下文中描述的实体中不存在其它特征的情况,并且还可以指除了由这些术语引入的特征之外存在一个或多个其它特征的情况。作为示例,表达“a具有b”、“a包含b”和“a包括b”可以指以下的情况:除b之外,a中不存在其它元素(即,其中a仅并且唯一地由b组成的情况),并且指这样的情况:除b之外,实体a中还存在一个或多个其它元素,诸如元素c、元素c和d、或甚至其它元素。
14.此外,应注意,指示特征或元素可存在一次或多于一次的术语“至少一个”、“一个或多个”或类似表达通常在引入相应特征或元素时仅使用一次。在下面,在大多数情况下,
当提及相应的特征或元素时,尽管相应的特征或元素可能只存在一次或多于一次,但不会重复“至少一个”或“一个或多个”的表达。
15.此外,如下面所使用的,术语“优选地”、“更优选地”、“特别地”、“更特别地”、“具体地”、“更具体地”或类似的术语与可选特征结合使用,而没有限制替代可能性。因此,由这些术语引入的特征是可选特征,并且不旨在以任何方式限制权利要求的范围。如本领域技术人员将认识到的,本发明可以通过使用替代特征来执行。类似地,由“在本发明的实施例中”引入的特征或类似表达旨在是可选特征,而对本发明的替代实施例没有任何限制,对本发明的范围没有任何限制,并且对关于以这种方式引入的特征与本发明的其它可选或非可选特征相结合的可能性没有任何限制。
16.在本发明的第一方面,公开了一种用于确定至少一个对象的位置的检测器。如在此所使用的,术语“对象”是指发射至少一个光束的点或区域。光束可以源自对象,诸如通过对象和/或集成或附接到发射光束的对象的至少一个照射源,或者可以源自不同的照射源,诸如源自直接或间接照射对象的照射源,其中光束被对象反射或散射。如在此所使用的,术语“位置”是指关于对象和/或对象的至少一部分在空间中的位置和/或取向的至少一项信息。因此,该至少一项信息可以暗示该对象的至少一个点与该至少一个检测器之间的至少一个距离。如将在下面进一步详细概述的,该距离可以是纵坐标,或者可以有助于确定对象的点的纵坐标。另外地或可替代地,可以确定关于对象和/或对象的至少一部分的位置和/或取向的一项或多项其它信息。作为示例,另外,可以确定对象和/或对象的至少一部分的至少一个横坐标。因此,对象的位置可以暗示对象和/或对象的至少一部分的至少一个纵坐标。另外地或可替代地,对象的位置可以暗示对象和/或对象的至少一部分的至少一个横坐标。另外地或可替代地,对象的位置可以暗示对象的至少一个取向信息,其指示对象在空间中的取向。
17.检测器包括:
18.‑
至少一个传感器元件,其具有光学传感器的矩阵,每个光学传感器具有光敏区域,其中,传感器元件被配置为确定对象的至少一个反射图像;
19.‑
至少一个评估设备,其中,评估设备被配置为选择反射图像的至少一个反射特征,其中,评估设备被配置为通过优化至少一个模糊函数f
a
来确定反射图像的所选反射特征的至少一个距离估计,其中,距离估计由纵坐标z和误差区间
±
ε给出;
20.‑
其中,评估设备适于确定在至少一个参考图像中与距离估计对应的至少一个位移区域,其中,评估设备适于将所选的反射特征与位移区域内的至少一个参考特征匹配。
21.如在此所使用的,术语“传感器元件”通常是指被配置用于感测至少一个参数的设备或多个设备的组合。在当前情况下,参数具体可以是光学参数,并且传感器元件具体可以是光学传感器元件。传感器元件可以形成为单一的单个设备或作为多个设备的组合。如在此进一步使用的,术语“矩阵”通常是指多个元件以预定的几何顺序的布置。该矩阵可以是或可以包括具有一个或多个行和一个或多个列的矩形矩阵。行和列具体地可以以矩形方式布置。然而,应当概述的是,其它布置也是可行的,诸如非矩形布置。作为示例,圆形布置也是可行的,其中元件围绕中心点布置成同心圆或椭圆形。例如,矩阵可以是单行的像素。其它布置是可行的。
22.矩阵的光学传感器具体地可以在大小、灵敏度、以及其它光、电和机械特性中的一
个或多个上相等。具体地,矩阵的所有光学传感器的光敏区域可以位于公共平面中,该公共平面优选地面对对象,使得从对象传播到检测器的光束可以在公共平面上生成光斑。
23.如在此所使用的,“光学传感器”通常是指用于检测光束的光敏设备,诸如用于检测由至少一个光束生成的照射和/或光斑。如在此进一步使用的,“光敏区域”通常是指光学传感器的可以由至少一个光束从外部照射的区域,该区域响应于照射而生成至少一个传感器信号。每个光学传感器可以被设计为响应于从对象传播到检测器的光束(具体是反射光束)对其相应光敏区域的照射,生成至少一个传感器信号。光敏区域可以具体地位于相应的光学传感器的表面上。然而,其它实施例是可行的。如在此所使用的,术语“每个光学传感器具有至少一个光敏区域”是指具有多个单个光学传感器的配置,每个单个光学传感器具有一个光敏区域,并且是指带有具有多个光敏区域的一个组合光学传感器的配置。因此,术语“光学传感器”另外指被配置为生成一个输出信号的光敏设备,而在此,被配置为生成两个或多个输出信号的光敏设备(例如,至少一个ccd和/或cmos设备)称为两个或多个光学传感器。如将在下面进一步详细概述的,每个光学传感器可被体现为使得在相应的光学传感器中恰好存在一个光敏区域,诸如通过提供被照射的恰好一个光敏区域,响应于照射该光敏区域而针对整个光学传感器恰好创建一个均匀的传感器信号。因此,每个光学传感器可以是单区域光学传感器。然而,单区域光学传感器的使用使得检测器的设置特别简单和有效。因此,作为示例,可以在设置中使用可商购的光学传感器,诸如可商购的硅光电二极管,每个硅光电传感器恰好具有一个光敏区域。然而,其它实施例是可行的。因此,作为示例,可以使用包括两个、三个、四个或多于四个的光敏区域的光学设备,其在本发明的上下文中被视为两个、三个、四个或多于四个的光学传感器。如上概述,传感器元件包括光学传感器的矩阵。因此,作为示例,光学传感器可以是像素化光学设备的一部分或构成像素化光学设备。作为示例,光学传感器可以是具有像素矩阵的至少一个ccd和/或cmos设备的一部分或构成具有像素矩阵的至少一个ccd和/或cmos设备,每个像素形成光敏区域。
24.光学传感器具体地可以是或可以包括光电检测器,优选地,无机光电检测器,更优选地,无机半导体光电检测器,最优选地,硅光电检测器。具体地,光学传感器在红外光谱范围内可能是敏感的。矩阵中的所有光学传感器或矩阵中的至少一组光学传感器具体地可以是相同的。可以为不同的光谱范围专门设置矩阵中的相同光学传感器的组,或者就光谱灵敏度而言,所有光学传感器可以相同。此外,光学传感器可以在大小上和/或关于它们的电子或光电特性相同。
25.具体地,光学传感器可以是或可以包括在红外光谱范围内(优选地在780nm到3.0微米的范围内)敏感的无机光电二极管。具体地,光学传感器在近红外区域的一部分中是敏感的,其中硅光电二极管具体地适用于700nm至1000nm的范围内。可用于光学传感器的红外光学传感器可以是可商购的红外光学传感器,诸如可从德国莱茵河畔路德维希港(ludwigshafen am rhein,germany)d

67056的trinamix gmbh以商标名称hertz

stueck
tm
可商购的红外光学传感器。因此,作为示例,光学传感器可以包括本征(intrinsic)光伏类型的至少一个光学传感器,更优选地,选自包括以下项的组的至少一个半导体光电二极管:ge光电二极管、ingaas光电二极管、扩展型ingaas光电二极管、inas光电二极管、insb光电二极管、hgcdte光电二极管。另外地或可替代地,光学传感器可以包括非本征(extrinsic)光伏类型的至少一个光学传感器,更优选地,选自由如下组成的组的至少一种半导体光电
二极管:ge:au光电二极管、ge:hg光电二极管、ge:cu光电二极管、ge:zn光电二极管、si:ga光电二极管、si:as光电二极管。另外地或可替代地,光学传感器可以包括至少一个辐射热计,优选地从包括vo辐射热计和非晶si辐射热计的组中选择的辐射热计。
26.矩阵可以包括独立的光学传感器。因此,可以包括无机光电二极管的矩阵。然而,可替代地,可以使用可商购矩阵,诸如ccd检测器(诸如ccd检测器芯片)和/或cmos检测器(诸如cmos检测器芯片)中的一个或多个。
27.因此,通常,检测器的光学传感器可以形成传感器阵列或可以是传感器阵列的一部分,诸如上述矩阵。因此,作为示例,检测器可以包括诸如具有m行和n列的矩形阵列的光学传感器阵列,其中m、n独立地为正整数。优选地,给出多于一列且多于一行,即,n>1,m>1。因此,作为示例,n可以为2至16或更高,并且m可以为2至16或更高。优选地,行数与列数的比率接近于1。作为示例,n和m可以被选择为使得0.3≤m/n≤3,诸如通过选择m/n=1:1、4:3、16:9或类似的值。作为示例,该阵列可以是具有相等数量的行和列的正方形阵列,诸如通过选择m=2,n=2、或m=3,n=3等。
28.该矩阵具体地可以是具有至少一行(优选为多行)和多列的矩形矩阵。作为示例,行和列可以基本上垂直取向。如在此所使用的,术语“基本上垂直”是指垂直取向的条件,例如
±
20
°
或更小的公差,优选
±
10
°
或更小的公差,更优选
±5°
或更小的公差。因此,作为示例,小于20
°
,特别是小于10
°
、或甚至小于5
°
的公差是可以接受的。为了提供宽广的视野,矩阵特别地可以具有至少10行,优选地至少50行,更优选地至少100行。类似地,矩阵可具有至少10列,优选地至少50列,更优选地至少100列。矩阵可以包括至少50个光学传感器,优选地至少100个光学传感器,更优选地至少500个光学传感器。矩阵可以包括数百万像素范围内的多个像素。然而,其它实施例是可行的。因此,在期望轴向旋转对称的设置中,矩阵的光学传感器(也可以称为像素)的圆形布置或同心布置可能是优选的。
29.优选地,传感器元件可以基本上垂直于检测器的光轴取向。同样,关于术语“基本上垂直”,可以参考上面给出的定义和公差。光轴可以是直的光轴,或者可以弯曲或甚至分裂(split),诸如通过使用一个或多个偏转元件和/或通过使用一个或多个分束器,其中在后者的情况中,基本上垂直取向可以参考光学设置的相应分支(branch)或束路径中的局部光轴。
30.至少一个光束可从对象朝向检测器传播。光束可源自对象或可源自照射源,诸如源自直接或间接照射对象的照射源,其中光束被对象反射或散射,并且从而至少部分地朝向检测器引导。检测器可用于有源和/或无源照射场景。例如,至少一个照射源可以适于照射对象,例如通过将光束朝向对象引导,该对象反射光束。照射源可以是或可以包括至少一个多束光源。例如,照射源可以包括至少一个激光源和一个或多个衍射光学元件(doe)。另外地或可替代地,检测器可以使用场景中已经存在的辐射,诸如来自至少一个环境光源的辐射。
31.光束具体地可以完全照射至少一个光学传感器,从该光学传感器生成中心信号,使得产生中心信号的至少一个光学传感器完全位于光束内,光束的宽度大于产生传感器信号的至少一个光学传感器的光敏区域。相反地,优选地,光束具体地可以在整个矩阵上产生小于矩阵的光斑,使得光斑完全位于矩阵内。光学领域的技术人员可以通过选择对光束具有聚焦或离焦效果的一个或多个合适的透镜或元件来容易地调节该情况,诸如通过使用将
在下面进一步详细概述的合适的传递(transfer)设备。如在此进一步使用的,“光斑”通常是指光束对物品、区域或对象的可见或可检测圆形或非圆形照射。
32.如在此进一步使用的,“传感器信号”通常是指由光学传感器响应于光束的照射而生成的信号。具体地,传感器信号可以是或可以包括至少一种电信号,诸如至少一种模拟电信号和/或至少一种数字电信号。更具体地,传感器信号可以是或可以包括至少一个电压信号和/或至少一个电流信号。更具体地,传感器信号可以包括至少一个光电流。此外,可以使用原始传感器信号,或者检测器、光学传感器或任何其它元件可适于处理或预处理传感器信号,从而生成辅助传感器信号,该辅助传感器信号也可以用作传感器信号,诸如通过滤波等进行预处理。
33.光敏区域具体地可以朝向对象取向。如在此所使用的,术语“朝向对象取向”一般是指光敏区域的相应表面从对象来看完全或部分可见的情况。具体地,对象的至少一点与相应光敏区域的至少一点之间的至少一条互连线可以与光敏区域的表面元素形成不为0
°
的角度,诸如在20
°
至90
°
范围内的角度,优选80至90
°
范围内的角度,诸如90
°
的角度。因此,当对象位于光轴上或靠近光轴时,从对象朝向检测器传播的光束可以基本上平行于光轴。如在此所使用的,术语“基本上垂直”是指垂直取向的条件,例如
±
20
°
或更小的公差,优选
±
10
°
或更小的公差,更优选
±5°
或更小的公差。类似地,术语“基本上平行”是指平行取向的条件,例如
±
20
°
或更小的公差,优选
±
10
°
或更小的公差,更优选
±5°
或更小的公差。
34.如在此所使用的,术语“光线(ray)”通常是指垂直于光的波阵面的线,其指向能量流的方向。如在此所使用的,术语“束(beam)”通常是指光线的集合。在下面,术语“光线”和“束”将用作同义词。如在此进一步使用的,术语“光束”通常是指一定量的光,特别是基本上在相同方向上行进的一定量的光,包括光束具有发散角(spreading angle)或扩展角(widening angle)的可能性。光束可以具有空间延伸。具体地,光束可以具有非高斯束轮廓。束轮廓可以选自包括以下项的组:梯形束轮廓;三角形束轮廓;锥形束轮廓。梯形束轮廓可以具有平台区域和至少一个边缘区域。如将在下面更详细概述的,光束具体地可以是高斯光束或高斯光束的线性组合。然而,其它实施例是可行的。传递设备可被配置用于调节、定义和确定束轮廓(特别是束轮廓的形状)中的一种或多种。
35.光学传感器在紫外、可见或红外光谱范围中的一个或多个范围中可以是敏感的。具体地,光学传感器在从500nm至780nm,最优选地在650nm至750nm,或在690nm至700nm的可见光谱范围内可以是敏感的。具体地,光学传感器在近红外区域中可以是敏感的。具体地,光学传感器在近红外区域的一部分中可以是敏感的,其中硅光电二极管特别适用于700nm至1000nm范围内。具体地,光学传感器在红外光谱范围内,具体地在780nm至3.0微米的范围内可以是敏感的。例如,光学传感器各自独立地可以是或可以包括从包括光电二极管、光电管、光电导体、光电晶体管或其任何组合的组中选择的至少一种元件。例如,光学传感器可以是或可以包括选自包括以下项的组选择的至少一种元件:ccd传感器元件、cmos传感器元件、光电二极管、光电管、光电导体、光电晶体管或其任何组合。可以使用任何其它类型的光敏元件。如将在下面进一步详细概述的,光敏元件通常可以完全或部分地由无机材料制成和/或可以完全或部分地由有机材料制成。最常见的是,如将在下面更详细概述的,可以使用一个或多个光电二极管,诸如可商购的光电二极管,例如无机半导体光电二极管。
36.传感器元件被配置为确定对象的至少一个反射图像。如在此所使用的,术语“反射
图像”是指包括至少一个反射特征的由传感器元件确定的图像。如在此所使用的,术语“反射特征”是指对象响应于例如至少一个照射图案的例如至少一个照射特征的照射而生成的图像平面中的特征。反射图像可以包括至少一个反射图案,该至少一个反射图案包括至少一个反射特征。如在此所使用的,术语“照射特征”是指由至少一个环境光源或适于照射对象的至少一个照射源生成的至少一种任意形状的特征。如在此所使用的,术语“确定至少一个反射图像”是指反射图像的成像、记录和生成中的一种或多种。
37.反射图像可包括至少一种反射图案。如在此所使用的,术语“反射图案”是指由光在对象表面反射或散射生成(特别是由对象响应于照射图案的照射而生成)的响应图案。照射图案可以包括适于照射对象的至少一个特征。照射特征可由环境光或由至少一个照射源生成。反射图案可以包括与照射图案的至少一个特征对应的至少一个特征。与照射图案相比,反射图案可以包括至少一种失真图案,其中失真取决于对象的距离,诸如对象的表面特性。
38.检测器可进一步包括照射源。作为示例,照射源可以被配置为生成用于对象的照射的照射光束。检测器可以被配置为使得照射光束从检测器沿着检测器的光轴朝向对象传播。为此,检测器可以包括至少一个反射元件,优选至少一个棱镜,用于将照射光束偏转到光轴上。
39.照射源可以适于生成用于照射对象的至少一种照射图案。另外地或可替代地,照射图案可以由至少一个环境光源生成。检测器可以被配置为使得照射图案从检测器,特别是从壳体的至少一个开口,沿着和/或平行于检测器的光轴朝向对象传播。为此,检测器可以包括至少一个反射元件,优选地至少一个棱镜,用于偏转照射图案,使得它沿着或平行于光轴传播。具体地,照射源可以包括至少一个激光器和/或激光源。可以采用各种类型的激光器,诸如半导体激光器。另外地或可替代地,可以使用非激光光源,诸如led和/或灯泡。如在此所使用的,术语“图案”是指包括至少一个任意形状的特征的任意已知或预定布置。图案可以包括至少一个特征,诸如点或符号。图案可以包括多个特征。图案可以包括周期性或非周期性特征的排列。如在此所使用的,术语“照射图案”是指照射对象的图案。照射图案可由环境光(诸如由至少一个环境光源或由至少一个照射源)生成。照射图案可以包括选自包括以下项的组的至少一种图案:至少一种点图案,特别是伪随机点图案;随机点图案或准随机图案;至少一种sobol图案;至少一种准周期图案;包括至少一种已知特征的至少一种图案;至少一种规则图案;至少一个三角形图案;至少一个六边形图案;至少一个矩形图案;包括凸出的均匀镶嵌图案(tiling)的至少一种图案;包括至少一条线的至少一个线图案;包括诸如平行线或交叉线的至少两条线的至少一个线图案。例如,照射源可以适于生成和/或投影点云。照射图案可以包括规则的和/或恒定的和/或周期性的图案,诸如三角形图案、矩形图案、六边形图案或包括其它凸出的镶嵌图案的图案。照射图案可以在每个区域包括尽可能多的特征,使得六边形图案可以是优选的。照射图案的两个特征之间的距离和/或至少一个照射特征的面积可以取决于图像中的混淆圆(circle of confusion)。
40.照射源可以包括如下中的一个或多个:至少一个光投影仪;至少一个数字光处理投影仪、至少一个lcos投影仪、至少一个空间光调制器;至少一个衍射光学元件;至少一个发光二极管阵列;至少一个激光光源阵列。照射源可以包括适于直接生成照射图案的至少一个光源。例如,照射源可以包括至少一个激光源。例如,照射源可以包括至少一个线激光
器。线激光器可以适于向对象发送激光线,例如水平或垂直激光线。照射源可以包括多个线激光器。例如,照射源可以包括至少两个线激光器,该线激光器可以被布置为使得照射图案包括至少两个平行或交叉的线。照射源可以包括至少一个光投影仪,该至少一个光投影仪适于生成点云,使得照射图案可以包括多个点图案。照射源可以包括至少一个掩模(mask),该掩模适于根据由照射源生成的至少一个光束生成照射图案。照射源可以是附接到或集成到诸如智能电话的移动设备中的一种。照射源可用于其它功能,该功能可用于确定图像,诸如自动对焦功能。照射设备可以诸如通过使用连接器(诸如usb连接器或诸如耳机插孔的电话连接器)被附接到移动设备。
41.具体地,照射源可以被配置为发射红外光谱范围内的光。然而,应当注意,另外地或可替代地,其它光谱范围也是可行的。此外,照射源具体地可以被配置为发射调制或非调制光。在使用多个照射源的情况下,不同的照射源可以具有不同的调制频率,如下面进一步详细概述的,稍后可以使用该不同的调制频率来区分光束。检测器可以被配置为评估单个光束或多个光束。在多个光束从对象传播到检测器的情况下,可以提供用于区分光束的装置。因此,光束可以具有不同的光谱特性,并且检测器可以包括用于区分不同光束的一个或多个波长选择元件。然后可以独立地评估光束中的每个光束。作为示例,波长选择元件可以是或可以包括一个或多个滤波器、一个或多个棱镜、一个或多个光栅、一个或多个二向色镜、或其任意组合。此外,另外地或可替代地,为了区分两个或更多个光束,可以以特定的方式调制光束。因此,作为示例,可以对光束进行频率调制,并且可以对传感器信号进行解调,以便根据它们的解调频率来部分地区分源自不同光束的传感器信号。这些技术通常是高频电子领域的技术人员已知的。通常,评估设备可以被配置用于区分具有不同调制的不同光束。
42.具体地,照射源和光学传感器可以布置在公共平面内或不同平面内。照射源和光学传感器可以具有不同的空间取向。特别地,照射源和传感器元件可以被布置成扭曲布置。
43.照射源可以适于生成和/或投影点云,使得在光学传感器(例如cmos检测器)的矩阵上生成多个照射区域。另外,在光学传感器的矩阵上可能存在干扰,诸如由于斑点和/或外来光和/或多次反射引起的干扰。评估设备可以适于确定至少一个关注区域,例如由光束照射的一个或多个像素,该像素用于确定对象的纵坐标。例如,评估设备可以适于执行过滤方法,例如斑点分析和/或边缘滤波器和/或对象识别方法。
44.如在此进一步使用的,术语“评估设备”通常是指适于执行指定操作的任意设备,优选地通过使用至少一个数据处理设备,并且更优选地,通过使用至少一个处理器和/或至少一个专用集成电路。因此,作为示例,至少一个评估设备可以包括具有存储在其上的软件代码的至少一个数据处理设备,该软件代码包括多个计算机命令。评估设备可以提供用于执行一个或多个指定操作的一个或多个硬件元件,和/或可以向一个或多个处理器提供在其上运行的用于执行一个或多个指定操作的软件。评估设备可以包括一个或多个可编程设备,诸如一个或多个计算机、专用集成电路(asic)、数字信号处理器(dsp)、或现场可编程门阵列(fpga),它们被配置为执行图像分析,诸如参考特征的选择,距离估计的确定,并确定对象的至少一个纵坐标。然而,另外地或可替代地,评估设备也可以完全或部分地由硬件体现。
45.评估设备被配置为选择反射图像的至少一个反射特征。如在此所使用的,术语“选
择至少一个反射特征”是指识别、确定和选择反射图像的至少一个反射特征中的一种或多种。检测器可适于针对反射图像的至少一个反射特征确定对象点的纵坐标。因此,检测器可以适于对反射图像的至少一个反射特征进行预分类。这允许使用包括规则和/或恒定和/或周期性图案的照射图案,诸如三角形图案、矩形图案、六边形图案、或包括其它凸出的镶嵌图案的图案。照射图案可以在每个区域包括尽可能多的特征,使得六边形图案可以是优选的。评估设备可以适于执行至少一种图像分析和/或图像处理以便识别反射特征。图像分析和/或图像处理可以使用至少一种特征检测算法。图像分析和/或图像处理可以包括以下一项或多项:滤波;选择至少一个关注区域;由传感器信号产生的图像与至少一个偏移之间形成差异图像(difference image);通过反转由传感器信号产生的图像来反转传感器信号;在不同时间由传感器信号产生的图像之间形成的差异图像;背景校正;分解成颜色通道;分解成色调;饱和;以及亮度通道;频率分解;奇异值分解;应用canny边缘检测器;应用高斯滤波器的拉普拉斯算子;应用差分高斯滤波器;应用sobel算子;应用拉普拉斯算子;应用scharr算子;应用prewitt算子;应用roberts算子;应用kirsch算子;应用高通滤波器;应用低通滤波器;应用傅立叶变换;应用radon变换;应用霍夫变换;应用小波变换;阈值转换法;创建二进制图像。关注区域可以由用户手动确定或可以自动确定,诸如通过识别由光学传感器生成的图像内的对象。
46.评估设备被配置为通过优化至少一个模糊函数f
a
来确定反射图像的所选反射特征的至少一个距离估计,其中距离估计由纵坐标z和误差区间
±
ε给出。如在此所使用的,术语“距离估计”是指纵坐标的至少一个估计,具体地,由纵坐标z和纵坐标的确定的测量不确定度(uncertainty)
±
ε定义的至少一个不确定区间。误差区间ε可以取决于光学传感器的测量不确定度和/或诸如温度、运动等的其它参数。光学传感器的测量不确定度可以被预先确定和/或估计和/或可以存储在评估设备的至少一个数据存储单元中。例如,误差区间可以是
±
10%,优选地
±
5%,更优选地
±
1%。距离估计的确定可以产生具有误差条的距离估计,该误差条通常大于三角测量方法的误差条。距离估计可以通过使用至少一种基于卷积的算法(诸如离焦深度算法)来确定。为了获得距反射特征的距离,离焦深度算法估计对象的离焦。对于该估计,假设了模糊函数。如在此所使用的,术语“模糊函数f
a”(也称为模糊核或点扩散函数)是指检测器对来自对象的照射的响应函数。具体地,模糊函数对离焦对象的模糊进行建模。至少一个模糊函数f
a
可以是由来自以下项组成的组中的至少一个函数组成的函数或复合函数:高斯函数、正弦函数、抛物柱面函数(pillbox)、平方函数、洛伦兹函数、径向函数、多项式、hermite多项式、zernike多项式、legendre多项式。
47.传感器元件可以适于确定至少一种反射图案。评估设备可以适于选择反射图案的至少一个特征并且通过优化至少一个模糊函数f
a
来确定反射图案的所选特征的距离估计。
48.可以通过改变至少一个模糊函数的参数来优化模糊函数。反射图像可以是模糊图像i
b
。评估设备可以被配置为根据模糊图像i
b
和模糊函数f
a
重建纵坐标z。可以通过改变模糊函数的参数σ来最小化模糊图像i
b
和模糊函数f
a
与至少一个其它图像i’b
的卷积(*)之间的差从而确定纵坐标z,
49.min||(i

b
*f
a
(σ(z))

i
b
)||,
50.σ(z)是一组距离相关的模糊参数。另一个图像可能模糊或清晰(sharp)。如在此所使用的,术语“清晰”或“清晰图像”是指具有最大对比度的模糊图像。可以通过与已知模糊
函数的卷积从模糊图像i
b
生成至少一个其它图像。因此,可以使用离焦深度算法来获得反射特征的距离估计。该距离估计可用于有效地选择在其中选择对极线的区域,这将在下面更详细地概述。然后可以使用三角测量和所选的对极线来计算距离。与大多数三角测量方法相反,距离估计的确定可以应用于反射图像的单个特征。因此,距离估计的确定可用于通过产生解决对应关系问题的较小区域来加速三角测量方法。
51.评估设备适于确定至少一个参考图像中与距离估计对应的至少一个位移区域。如在此所使用的,术语“参考图像”是指与反射图像不同的图像,其与反射图像相比在不同的空间位置处确定。参考图像可以通过记录至少一个参考特征、对至少一个参考特征成像、计算参考图像中的一项或多项来确定。参考图像和反射图像可以是在具有固定距离的不同空间位置处确定的对象的图像。距离可以是相对距离,也称为基线。评估设备可适于确定至少一个参考图像中与至少一个反射特征对应的至少一个参考特征。如上概述,评估设备可适于执行图像分析并识别反射图像的特征。评估设备可以适于识别参考图像中的至少一个参考特征,该参考特征具有与所选的反射特征基本上相同的纵坐标。术语“基本上相同”是指在10%、优选5%、最优选1%内相同。与反射特征对应的参考特征可以使用对极几何来确定。对于对极几何的描述,例如参考x.jiang,h.bunke:“dreidimensionales computersehen”springer,berlin heidelberg,1997中的第2章。对极几何可以假定参考图像和反射图像可以是在具有固定距离的不同空间位置和/或空间取向处确定的对象的图像。评估设备可以适于确定参考图像中的对极线。参考图像和反射图像的相对位置可以是已知的。例如,参考图像和反射图像的相对位置可以存储在评估设备的至少一个存储单元内。评估设备可以适于确定从反射图像的所选反射特征延伸的直线。直线可以包括与所选特征对应的可能对象特征。直线和基线跨越对极平面。由于参考图像在与反射图像不同的相对位置确定,因此对应的可能对象特征可能会在参考图像中的直线(称为对极线)上成像。因此,与反射图像的所选特征对应的参考图像的特征位于对极线上。由于图像的失真或系统参数的变化,诸如由于老化、温度变化、机械应力等,对极线可能相交或彼此非常接近和/或参考特征与反射特征之间的对应关系可能不清楚。此外,真实世界中的每个已知位置或对象都可以投影到参考图像上,反之亦然。由于检测器的校准,投影可能是已知的,而校准与特定相机的对极几何的示教相当。
52.评估设备适于将所选反射特征与位移区域内的至少一个参考特征匹配。如在此所使用的,术语“位移区域”是指参考图像中的区域,在该区域中,可以对与所选反射特征对应的参考特征进行成像。具体地,位移区域可以是参考图像中的区域,在该区域中,与所选反射特征对应的参考特征预期位于参考图像中。取决于到对象的距离,与反射图像中的反射特征的图像位置相比,与反射特征对应的参考特征的图像位置可能在参考图像内位移。位移区域可以仅包括一个参考特征。位移区域还可以包括多于一个的参考特征。位移区域可以包括对极线或对极线的一部分。位移区域可以包括多于一个的对极线或多于一个的对极线的多个部分。如在此所使用的,术语“参考特征”是指参考图像的至少一个特征。位移区域可以沿着对极线延伸、与对极线正交、或两者。评估设备可以适于确定沿着对极线与纵坐标z对应的参考特征并且确定沿着对极线与误差区间
±
ε对应或与对极线正交的位移区域的范围。距离估计的测量不确定度可能导致非圆形的位移区域,因为不同方向的测量不确定度可能不同。具体地,沿着一个对极线或多个对极线的测量不确定度可能大于在关于一个
对极线或多个对极线的正交方向上的测量不确定度。位移区域可以包括在关于一个对极线或多个对极线的正交方向上的延伸。评估设备可以确定反射特征的图像位置周围的位移区域。评估设备可以适于确定距离估计并且确定沿着对极线与z
±
ε对应的位移区域。
53.如在此所使用的,术语“匹配”是指确定和/或评估对应的参考和反射特征。评估设备可适于通过使用考虑所确定的距离估计的至少一种评估算法来将反射图像的所选特征与位移区域内的参考特征匹配。评估算法可以是线性缩放算法。评估设备可以适于确定最靠近和/或在位移区域内的对极线。评估设备可以适于确定最靠近反射特征的图像位置的对极线。沿着对极线的位移区域的范围可以大于与对极线正交的位移区域的范围。评估设备可适于在确定对应的参考特征之前确定对极线。评估设备可以确定每个反射特征的图像位置周围的位移区域。评估设备可以适于诸如通过分配最靠近位移区域的和/或在位移区域内的和/或沿着与对极线正交的方向最靠近位移区域的对极线,向反射特征的每个图像位置的每个位移区域分配对极线。评估设备可以适于通过确定最靠近所分配的位移区域的和/或在所分配的位移区域内的和/或沿着所分配的对极线最靠近所分配的位移区域的和/或沿着所分配的对极线在所分配的位移区域内的参考特征,确定与反射特征的图像位置对应的参考特征。
54.评估设备可以适于确定匹配的参考特征和所选反射特征的位移。评估设备可以适于使用纵坐标和位移之间的预定关系来确定匹配特征的纵向信息。如在此所使用的,术语“位移”是指参考图像中的位置与反射图像中的位置之间的差。如在此所使用的,术语“纵向信息”是指与纵坐标有关的信息。例如,纵向信息可以是距离值。预定关系可以是经验关系、半经验关系和分析得出关系中的一种或多种。评估设备可以包括用于存储预定关系(诸如查找列表或查找表)的至少一个数据存储设备。评估设备可以适于通过使用三角测量方法来确定预定关系。在反射图像中所选反射特征的位置和匹配参考特征的位置和/或所选反射特征与匹配参考特征的相对位移已知的情况下,对应的对象特征的纵坐标可通过三角测量确定。因此,评估设备可以适于选择例如后续和/或逐列的反射特征并且使用三角测量针对参考特征的每个潜在位置确定对应的距离值。位移和对应的距离值可以存储在评估设备的至少一个存储设备中。作为示例,评估设备可以包括至少一种数据处理设备,诸如至少一种处理器、至少一种dsp、至少一种fpga、和/或至少一种asic。此外,为了存储纵坐标与位移之间的至少一种预定或可确定的关系,可以提供至少一个数据存储设备,诸如用于提供用于存储预定关系的一个或多个查找表。评估设备可以适于存储用于相机和/或检测器的本征和/或非本征校准的参数。评估设备可以适于诸如通过执行tsai相机校准来生成用于相机和/或检测器的本征和/或非本征校准的参数。评估设备可适于计算和/或估计参数,诸如传递设备的焦距、径向透镜畸变系数、径向透镜畸变中心的坐标、用于解决由于扫描和数字化的硬件时序不完善造成的任何不确定性的比例因子、世界坐标与相机坐标之间变换的旋转角度、世界坐标与相机坐标之间变换的平移分量、孔径角、图像传感器格式、主点、倾斜系数、相机中心、相机航向、基线、相机和/或照射源之间的旋转或平移参数、孔径、焦距等。
55.另外地或可替代地,评估设备可以被配置为执行以下步骤:
56.‑
针对每个反射特征的图像位置确定位移区域;
57.‑
诸如通过分配最靠近位移区域的和/或在位移区域内的和/或沿着与对极线正交的方向最靠近位移区域的对极线,向每个反射特征的位移区域分配对极线;
58.‑
诸如通过分配最靠近分配的位移区域的和/或在分配的位移区域内的和/或沿着分配的对极线最靠近分配的位移区域的和/或沿着分配的对极线在分配的位移区域内的参考特征,向每个反射特征分配和/或确定至少一个参考特征。
59.另外地或可替代地,评估设备可以适于诸如通过比较参考图像内的对极线和/或反射特征的距离和/或通过比较误差加权距离,诸如参考图像内的对极线和/或反射特征的ε加权距离,并向参考特征和/或反射特征分配更短距离和/或ε加权距离的对极线和/或参考特征,在多于一个的对极线和/或要分配给反射特征的参考特征之间做出决定。
60.优选地,检测器可以适于使用距离估计对所选的反射特征进行预分类,使得对一个参考特征的明确分配是可能的。特别地,照射图案的照射特征可以被布置为使得参考图像的对应参考特征可以在对极线上具有尽可能大的彼此相对距离。照射图案的照射特征可以被布置为使得仅少数参考特征位于对极线上。例如,照射图案可以包括至少一个六边形图案。优选地,照射图案可以包括至少一个六边形图案,其中该图案相对于基线旋转。优选地,照射图案可以包括至少一个位移的六边形图案,其中六边形图案的各个点从规则位置位移了随机距离,例如正交于该点的对极线。各个点的位移可以小于两条平行对极线之间距离的一半,优选地小于两条平行对极线之间距离的四分之一。各个点的位移可以是这样的,即两个点不会在彼此上方位移。
61.使用离焦深度方法允许估计距离,诸如误差区间ε内的纵坐标z。通过确定与估计的纵坐标对应的位移区域和对应的误差区间,允许显著减少沿着对极线的可能解的数量。可能解的数量甚至可以减少到一个。纵坐标z和误差区间的确定可以在匹配所选反射特征与参考特征之前的预评估期间执行。这可以允许减少计算需求,使得可以显著降低成本并允许在移动设备或户外设备中使用。
62.此外,通常在三角测量系统中,基线必须很大以便检测大距离。使用距离估计和所选反射特征与参考特征的后续匹配对纵坐标z和误差区间进行预评估可以允许使用短基线,使得可以提供紧凑的设备。此外,离焦深度结果不取决于基线或光源的位置。此外,使用离焦深度和所选反射特征与参考特征的后续匹配对纵坐标z和误差区间进行预评估,与传统的三角测量系统相比,可以提高准确性和/或速度和/或可以降低计算需求。
63.离焦深度方法可以允许估计距图像的单个特征(诸如距投影点)的距离。此外,可以减少照射特征的数量,诸如照射图案中的照射点的数量,以增加每个照射点中的光强度,诸如在遵守眼睛安全法规的同时与环境光竞争。传统三角测量系统中照射特征的减少的数量可能会增加匹配反射特征与参考特征的难度。此外,可以增加照射特征的数量,诸如照射图案中的照射点的数量,诸如提高距离测量的分辨率,例如诸如在移动应用中,在不增加评估设备的处理能力的情况下,提高获得的深度图的分辨率。
64.具体地,基于cmos的离焦深度系统可以通过对图像中的区域进行积分(integrate)并形成这些区域的商来估计距单目图像的距离。可以沿着圆形或边缘形状执行积分。在解决对应关系问题之前,在应用基于离焦深度的距离估计时,可能解的数量可能显著减少。可以对所选的特征点执行距离估计。距离估计及其误差条可以对应于线x
i
上的一段(section)并且因此在对极线的一段上。解决对应关系问题的二次缩放算法,例如对于结构光,可以简化为线性缩放算法。在对应关系问题中,计算能力是可以显著降低的严重的成本驱动因素。
65.例如,参考图像可以是照射图案在照射源的位置处的图像平面处的图像。评估设备可以适于确定在参考图像中与反射图案的所选特征的距离估计对应的位移区域。评估设备可适于将反射图案的所选特征与位移区域内的参考图案的至少一个特征匹配。照射源和传感器元件可以隔开固定距离。
66.例如,检测器可以包括至少两个传感器元件,每个传感器元件具有光学传感器矩阵。该至少一个第一传感器元件和至少一个第二传感器元件可以位于不同的空间位置处。第一传感器元件与第二元件之间的相对距离可以是固定的。该至少一个第一传感器元件可以适于确定至少一个第一反射图案,特别是至少一个第一反射特征,并且至少一个第二传感器元件可以适于确定至少一个第二反射图案,特别是至少一个第二反射特征。评估设备可以适于选择由第一传感器元件或第二传感器元件确定的至少一个图像作为反射图像并且选择由第一传感器元件或第二传感器元件中的另一个传感器元件确定的至少一个图像作为参考图像。评估设备可以适于选择反射图像中的至少一个反射特征并且确定所选的反射特征的距离估计。评估设备可以适于确定参考图像中与反射图案的所选特征的距离估计对应的位移区域。评估设备可适于将反射图案的所选特征与位移区域内的参考图案的至少一个特征匹配。
67.检测器可进一步包括一个或多个附加元件,诸如一个或多个附加光学元件。此外,检测器可以完全或部分地集成到至少一个壳体中。
68.检测器可以包括选自包括以下项的组的至少一个光学元件:传递设备,诸如至少一个透镜和/或至少一个透镜系统,至少一个衍射光学元件。术语“传递设备”(也称为“传递系统”)通常可以指一个或多个光学元件,其适于诸如通过修改光束的束参数、光束的宽度、或光束的方向上的一个或多个来修改光束。传递设备可以适于将光束引导到光学传感器上。传递设备具体地可以包括以下中的一种或多种:至少一个透镜,例如选自包括以下项的组的至少一个透镜:至少一个聚焦可调透镜、至少一个非球面透镜、至少一个球面透镜、至少一个菲涅耳透镜;至少一个衍射光学元件;至少一个凹面镜;至少一个束偏转元件,优选至少一个反射镜;至少一个分束元件,优选分束立方体或分束镜中的至少一个;至少一个多透镜系统。如在此所使用的,术语传递设备的“焦距”是指可能撞击传递设备的入射准直光线进入“焦点”的距离,该“焦点”也可以被称为“焦距点”。因此,焦距构成传递设备会聚撞击光束的能力的量度。因此,传递设备可以包括可以具有会聚透镜作用的一个或多个成像元件。举例来说,传递设备可具有一个或多个透镜,特别是一个或多个折射透镜,和/或一个或多个凸面镜。在该示例中,焦距可以被定义为从薄折射透镜的中心到薄透镜的主焦点的距离。对于会聚的薄折射透镜(诸如凸或双凸薄透镜),焦距可以被视为正值,并且可以提供一个距离,在该距离处,撞击作为传递设备的薄透镜的准直光束可以聚焦到单个斑点中。另外,传递设备可包括至少一个波长选择元件,例如至少一个滤波器。另外地,传递设备可以设计为(例如,在传感器区域的位置处,并且特别是传感器区域中)将预定的束轮廓施加在电磁辐射上。原则上,传递设备的上述可选实施例可以单独地或以任何所需的组合来实现。
69.传递设备可具有光轴。特别地,检测器和传递设备具有公共光轴。如在此所使用的,术语“传递设备的光轴”通常是指透镜或透镜系统的镜面对称或旋转对称的轴。检测器的光轴可以是检测器的光学装置的对称线。该检测器包括至少一个传递设备,优选地具有至少一个透镜的至少一个传递系统。作为示例,传递系统可以包括至少一个束路径,其中束
路径中的传递系统的元件以关于光轴旋转对称的方式定位。仍然,如还将在下面更详细地概述的,位于束路径内的一个或多个光学元件也可以关于光轴偏心或倾斜。然而,在该情况下,可以顺序地定义光轴,诸如通过互连束路径中的光学元件的中心,例如通过互连透镜的中心,其中,在该情况下,光学传感器不算作光学元件。光轴通常可以表示束路径。其中,检测器可以具有单个束路径,光束可以沿着该束路径从对象行进到光学传感器,或者可以具有多个束路径。作为示例,可以给出单个束路径,或者可以将束路径分成两个或更多个部分束路径。在后一种情况下,每个部分束路径可以具有其自己的光轴。光学传感器可以位于一个且相同的束路径或部分束路径中。然而,可替代地,光学传感器也可以位于不同的部分束路径中。
70.传递设备可以构成坐标系,其中纵坐标l是沿着光轴的坐标,并且其中d是距光轴的空间偏移。坐标系可以是极坐标系,其中传递设备的光轴形成z轴,并且其中距z轴的距离和极角可以用作附加坐标。平行于或反平行于z轴的方向可以被认为是纵向方向,并且沿着z轴的坐标可以被认为是纵坐标l。垂直于z轴的任何方向都可以被认为是横向方向,并且极坐标和/或极角可以被认为是横坐标。
71.传递设备可以被布置和/或配置为在测量范围内最大化焦点变化。对于使用离焦深度方法的设备,在测量范围内最大化焦点变化可能是有益的,特别是在测量范围内减小焦深可能是有益的。
72.如上概述,可以使检测器能够确定对象的至少一个纵坐标,包括确定整个对象或其一个或多个部分的纵坐标的选项。然而,此外,对象的其它坐标,包括一个或多个横坐标和/或旋转坐标,可以由检测器确定,具体地由评估设备确定。因此,作为示例,一个或多个横向传感器可以用于确定对象的至少一个横坐标。如上概述,至少一个光学传感器(从中产生中心信号)的位置可以提供有关对象的至少一个横坐标的信息,其中,作为示例,可以使用简单的透镜方程式进行光学转换并用于得出横坐标。另外地或可替代地,可以使用一个或多个附加横向传感器,并且可以由检测器包括。各种横向传感器在本领域中通常是已知的,诸如wo 2014/097181 a1中公开的横向传感器和/或其它位置敏感装置(psd),诸如象限二极管、ccd或cmos芯片等。另外地或可替代地,作为示例,根据本发明的检测器可以包括r.a.street(ed.):technology and applications of amorphous silicon,springer

verlag heidelberg,2010,pp.346

349(非晶硅技术和应用,施普林格出版社海德堡,2010年,第346

349页)中公开的一个或多个psd。其它实施例是可行的。这些设备通常也可以实现在根据本发明的检测器中。作为示例,光束的一部分可以在检测器内通过至少一个分束元件分开。作为示例,分开部分可以被导向横向传感器(诸如ccd或cmos芯片或相机传感器),并且由分开部分在横向传感器上生成的光斑的横向位置可以被确定,从而确定对象的至少一个横坐标。因此,根据本发明的检测器可以是一维检测器,诸如简单的距离测量设备,或者可以被体现为二维检测器或甚至被体现为三维检测器。此外,如以上概述的或如以下进一步详细概述的,通过以一维方式扫描场景或环境,还可以创建三维图像。因此,根据本发明的检测器具体地可以是一维检测器、二维检测器或三维检测器之一。评估设备可以进一步被配置为确定对象的至少一个横坐标x、y。评估设备可以适于组合纵坐标和横坐标的信息并确定对象在空间中的位置。
73.光学传感器矩阵的使用提供了多个优点和益处。因此,由光束在传感器元件上(诸
如在传感器元件的矩阵的光学传感器的光敏区域的公共平面上)生成的光斑的中心可以随着对象的横向位置而变化。因此,光学传感器的矩阵的使用在对象的位置方面(具体地在对象的横向位置方面)提供了显著的灵活性。光斑在光学传感器矩阵上的横向位置(诸如生成传感器信号的至少一个光学传感器的横向位置)可以用作附加信息项,从该信息项中可以导出关于对象的横向位置的至少一项信息,如例如在wo 2014/198629 a1中公开。另外地或可替代地,根据本发明的检测器可以包含至少一个附加横向检测器,用于除了至少一个纵坐标之外还检测对象的至少一个横坐标。
74.在本发明的另一方面,公开了一种用于确定至少一个对象的位置的检测器系统。检测器系统包括根据本发明(诸如根据上面公开的一个或多个实施例或根据下面进一步详细公开的一个或多个实施例)的至少一个检测器。检测器系统进一步包括至少一个信标设备,该信标设备适于将至少一个光束朝向检测器引导,其中信标设备是可附接到对象、可被对象握持和可集成到对象中的至少一种。下面将给出关于信标设备的进一步细节,包括其潜在的实施例。因此,该至少一个信标装置可以是或可以包括至少一个有源信标装置,该有源信标装置包括一个或多个照射源,诸如一个或多个光源,如激光器、led、灯泡等。作为示例,由照射源发射的光可以具有300至500nm的波长。可替代地,如上概述,可以使用红外光谱范围,诸如在780nm至3.0μm的范围内。具体地,可以使用其中在700nm至1000nm的范围内具体可适用的硅光电二极管的近红外区域。如上概述,由一个或多个信标装置发射的光可以是未调制的或可以被调制的,以便区分两个或多个光束。另外地或可替代地,至少一个信标装置可以适于诸如通过包括一个或多个反射元件而将一个或多个光束朝向检测器反射。此外,该至少一个信标装置可以是或可以包括适于散射光束的一个或多个散射元件。其中,可以使用弹性或非弹性散射。在至少一个信标装置适于朝向检测器反射和/或散射主光束的情况下,该信标装置可以适于使光束的光谱特性不受影响,或者可替代地可以适于诸如通过修改光束的波长来改变光束的光谱特性。
75.在本发明的另一方面,公开了一种用于在用户与机器之间交换至少一项信息的人机界面。人机界面包括根据以上公开的实施例和/或根据以下进一步详细公开的实施例中的一个或多个实施例的至少一个检测器系统。其中,至少一个信标设备适于直接或间接中的至少一种附接到用户或由用户握持。人机界面被设计为借助于检测器系统确定用户的至少一个位置,其中,人机界面被设计为将至少一项信息分配给该位置。
76.在本发明的另一方面,公开了一种用于执行至少一个娱乐功能的娱乐设备。娱乐设备包括根据上面公开的实施例和/或根据下面进一步详细公开的实施例中的一个或多个实施例的至少一个人机界面。娱乐设备被配置为使得玩家能够借助于人机界面输入至少一项信息。娱乐设备进一步被配置为根据信息改变娱乐功能。
77.在本发明的另一方面,公开了一种用于跟踪至少一个可移动对象的位置的跟踪系统。跟踪系统包括根据涉及如上面公开的和/或如下面进一步详细公开的检测器系统的一个或多个实施例的至少一个检测器系统。跟踪系统进一步包括至少一个跟踪控制器。跟踪控制器适于跟踪对象在特定时间点的一系列位置。
78.在本发明的另一方面,公开了一种用于对至少一个对象成像的相机。相机包括根据涉及如上面公开或下面进一步详细公开的检测器的实施例中的任一实施例的至少一个检测器。
79.在本发明的另一方面中,提供了一种用于确定场景的深度轮廓(profile)的扫描系统,其也可暗示确定至少一个对象的至少一个位置。扫描系统包括根据本发明的至少一个检测器,诸如在上面列出的一个或多个实施例中公开的和/或在下面一个或多个实施例中公开的至少一个检测器。扫描系统进一步包括至少一个照射源,该照射源适于用至少一个光束扫描场景,该光束也可以被称为照射光束或扫描光束。如在此所使用的,术语“场景”通常是指检测器可见的二维或三维范围,使得可用检测器评估二维或三维范围的至少一种几何或空间特性。如在此进一步使用的,术语“扫描”通常指不同区域中的连续测量。因此,扫描具体地可以暗示至少一个第一测量,其中照射光束以第一方式取向或定向,以及至少一个第二测量,其中照射光束以与第一方式不同的第二方式取向或定向。扫描可以是连续扫描或逐步扫描。因此,以连续或逐步的方式,照射光束可以被引导到场景的不同区域,并且检测器可以被检测以针对每个区域生成至少一项信息,诸如至少一个纵坐标。作为示例,为了扫描对象,一个或多个照射光束可以连续地或以逐步的方式在对象的表面上产生光斑,其中生成光斑的纵坐标。然而,可替代地,光图案可用于扫描。扫描可以是点扫描或线扫描,或甚至可以是具有更复杂光图案的扫描。扫描系统的照射源可以不同于检测器的可选照射源。然而,可替代地,扫描系统的照射源也可以与检测器的至少一个可选照射源完全或部分相同或集成到其中。
80.因此,扫描系统可以包括至少一个照射源,该照射源适于发射被配置用于照射位于至少一个对象的至少一个表面处的至少一个点的至少一个光束。如在此所使用的,术语“点”是指对象表面的一部分上的区域,具体地是小区域,其可以被例如扫描系统的用户选择以由照射源照射。优选地,一方面,该点可以表现出尽可能小的尺寸,以便允许扫描系统确定扫描系统所包括的照射源与点可以尽可能精确地定位在其上的对象的表面的部分之间的距离的值,并且另一方面,它可以尽可能大,以便允许扫描系统的用户或扫描系统本身,特别是通过自动程序,检测对象表面相关部分上是否存在点。
81.为此,照射源可以包括人工照射源,特别是至少一个激光源和/或至少一个白炽灯和/或至少一个半导体光源,例如至少一种发光二极管,特别是有机和/或无机发光二极管。例如,由照射源发出的光可以具有300至500nm的波长。另外地或可替代地,可以使用红外光谱范围内(诸如780nm至3.0μm的范围内)的光。具体地,可以使用近红外区域的部分中的光,其中硅光电二极管在700nm至1000nm的范围内具体适用。考虑到它们通常定义的光束轮廓和其它可操作性特性,特别优选使用至少一个激光源作为照射源。在此,使用单个激光源可能是优选的,特别是在提供可能容易地由用户存储和运输的紧凑扫描系统可能很重要的情况下。因此,照射源可以优选地是检测器的组成部分并且因此可以特别地集成到检测器中,诸如集成到检测器的壳体中。在优选实施例中,特别地,扫描系统的壳体可以包括至少一个显示器,该显示器被配置为诸如以易于阅读的方式向用户提供与距离相关的信息。在另一优选实施例中,特别地,扫描系统的壳体可以另外包括至少一个按钮,该按钮可以被配置用于操作与扫描系统相关的至少一个功能,诸如用于设置一个或多个操作模式。在另一优选实施例中,特别地,扫描系统的壳体可以另外包括至少一个紧固单元,该紧固单元可以被配置用于将扫描系统紧固到另一表面,诸如橡胶脚、底板或墙壁保持器,诸如包括磁性材料的基板或保持器,特别用于提高距离测量的准确度和/或用户对扫描系统的可操作性。
82.特别地,扫描系统的照射源因此可以发射单个激光束,该激光束可以被配置用于
照射位于对象表面的单个点。通过使用根据本发明的至少一个检测器,因此可以生成关于至少一个点与扫描系统之间的距离的至少一项信息。因此,优选地,可以确定由扫描系统包括的照射系统与如由照射源生成的单个点之间的距离,诸如通过采用如由至少一个检测器包括的评估设备。然而,扫描系统可以进一步包括附加评估系统,该附加评估系统可以特别适用于该目的。可替代地或另外地,可以考虑扫描系统(特别是扫描系统的壳体)的大小,并且因此扫描系统的壳体上的特定点(诸如壳体的前边缘或者后边缘)与单个点之间的距离可以可替代地确定。照射源可以适于生成和/或投影点云,例如照射源可以包括如下中的一个或多个:至少一个数字光处理投影仪、至少一个lcos投影仪、至少一个空间光调制器;至少一个衍射光学元件;至少一个发光二极管阵列;至少一个激光光源阵列。
83.可替代地,扫描系统的照射源可以发射两个单独的激光束,该激光束可以被配置为在光束的发射方向之间提供相应的角度,诸如直角,由此可以照射位于同一对象表面或位于两个不同对象的两个不同表面处的两个相应的点。然而,两个单独激光束之间的相应角度的其它值也是可行的。该特征特别可以用于间接测量功能,诸如用于推导间接距离,诸如由于在扫描系统与点之间存在一个或多个障碍物或否则可能很难到达而可能无法直接访问。举例来说,因此,通过测量两个单独的距离并通过使用毕达哥拉斯公式推导出高度来确定对象高度的值可能是可行的。特别地,为了能够保持相对于对象的预定水平(level),扫描系统可以进一步包括至少一个水平单元,特别是集成气泡瓶,该集成气泡瓶可以用于保持用户预定义的水平。
84.作为进一步的替代,扫描系统的照射源可以发射多个单独的激光束,诸如激光束阵列,其可以相对于彼此表现出相应的间距(pitch),特别是规则间距,并且可以以生成位于至少一个对象的至少一个表面上的点阵列的方式排列。为此目的,可以提供特别适合的光学元件,诸如分束设备和反射镜,其可以允许所述的激光束阵列的生成。特别地,可以通过使用一个或多个可移动反射镜以周期性或非周期性方式重定向光束来引导照射源来扫描区域或体积。
85.因此,扫描系统可以提供一个或多个点在一个或多个对象的一个或多个表面上的静态布置。可替代地,扫描系统的照射源,特别是一个或多个激光束,诸如上述激光束阵列,可被配置为提供一个或多个光束,该光束可以随着时间推移表现出变化的强度和/或随着时间的推移可能会经受发射方向的交替,特别是通过移动一个或多个反射镜,诸如包括在所述微反射镜阵列内的微反射镜。结果,照射源可以被配置为通过使用具有如由扫描系统的至少一个照射源生成的交替特征的一个或多个光束来扫描至少一个对象的至少一个表面的一部分作为图像。特别地,扫描系统因此可以使用至少一次行扫描和/或线扫描,诸如顺序地或同时地扫描一个或多个对象的一个或多个表面。因此,扫描系统可适于通过测量三个或更多点来测量角度,或者扫描系统可适于测量角落或狭窄区域,诸如屋顶的三角形顶棚(gable),使用传统的量尺很难接近该区域。作为非限制性示例,扫描系统可用在安全激光扫描仪中(例如生产环境中),和/或用于确定对象形状的3d扫描设备中(诸如与3d打印、身体扫描、质量控制结合),建筑应用中(例如作为测距仪),物流应用中(例如用于确定包裹的大小或体积),家庭应用中(例如在机器人真空吸尘器或割草机中),或在可能包括扫描步骤的其它类型的应用中。作为非限制性示例,扫描系统可用于工业安全帘应用。作为非限制性示例,扫描系统可用于执行清扫、吸尘、拖地或打蜡功能,或庭院或花园护理功能,诸
如割草或耙地。作为非限制性示例,扫描系统可以采用具有准直光学器件的led照射源,并且可以适于将照射源的频率偏移到不同的频率以获得更准确的结果和/或采用滤波器来衰减某些频率,同时传输其它频率。作为非限制性示例,扫描系统和/或照射源可以作为一个整体旋转或使用专用电机仅旋转特定的光学组件,诸如反射镜、分束器等,这样在操作中,扫描系统可具有完整的360度观看,或甚至可以移动和/或旋转到平面外以进一步增加扫描区域。此外,照射源可以有源地瞄准预定方向。此外,为了允许有线电气系统的旋转,可以采用滑环(slip ring)、光数据传输、或电感耦合。
86.作为非限制性示例,扫描系统可以附接到三脚架并且指向具有多个角和表面的对象或区域。一个或多个灵活可移动的激光源附接到扫描系统。一个或多个激光源被移动以使得它们照射关注点。当按下扫描系统上的指定按钮时,照射点相对于扫描系统的位置被测量,并且位置信息经由无线接口传输到移动电话。位置信息存储在移动电话应用中。激光源被移动以照射其他关注点,该关注点的位置被测量并传输到移动电话应用。移动电话应用可以通过将相邻点与平面表面连接来将点集变换为3d模型。3d模型可以被存储和进一步处理。测量点或表面之间的距离和/或角度可以直接显示在附接到扫描系统的显示器上或位置信息传输到的移动电话上。
87.作为非限制性示例,扫描系统可以包括用于投影点的两个或更多个灵活可移动激光源和用于投影线的其他可移动激光源。线可用于沿线布置两个或更多激光斑点,并且扫描系统的显示器可显示可沿着线(诸如等距)布置的两个或更多激光斑点之间的距离。在两个激光斑点的情况下,可以使用单个激光源,而使用一个或多个分束器或棱镜来修改投影点的距离,其中可以移动分束器或棱镜,使得投影的激光斑点分开或靠近。此外,扫描系统可以适于投影其它他图案,诸如直角、圆形、正方形、三角形等,沿着这些图案可以通过投影激光斑点并测量它们的位置来进行测量。
88.作为非限制性示例,扫描系统可以适用于线扫描设备。特别地,扫描系统可以包括至少一个传感器线或行。三角测量系统需要足够的基线,使得在近场中不可能检测到。如果激光斑点在传递设备的方向上倾斜,则近场检测可以是可能的。然而,倾斜导致光斑移出视野,这限制了远场区域的检测。通过使用根据本发明的检测器可以克服这些近场和远场问题。特别地,检测器可以包括光学传感器的cmos线。扫描系统可以适于检测在cmos线上从对象传播到检测器的多个光束。光束可以在对象上的不同位置处或通过照射源的移动生成。如上面和下面更详细描述的,扫描系统可以适于确定光点中的每个光点的至少一个纵坐标。
89.作为非限制性示例,扫描系统可适于用工具(诸如木材或金属加工工具,诸如锯、钻机等)支撑工作。因此,扫描系统可以适于在两个相反方向上测量距离并在显示器中显示两个测量的距离或距离的总和。此外,扫描系统可以适于测量到表面边缘的距离,使得当扫描系统放置在表面上时,激光点沿着表面自动远离扫描系统移动,直到距离测量示出由于表面的角落或边缘而引起的突然变化。这使得可以在扫描系统放置在木板上但远离木板端部时测量木板的端部的距离。此外,扫描系统可以在一个方向上测量木板端部的距离,并在相反方向上在指定距离内投影线或圆或点。扫描系统可以适于取决于在相反方向上测量的距离,诸如取决于预定的总距离,在一定距离内投影线或圆或点。这允许在投影位置处用工具(诸如锯或钻机)工作,而将扫描系统放置在距工具的安全距离处,并同时在距木板边缘
预定距离处使用工具执行过程。此外,扫描系统可以适于在预定距离中在两个相反方向上投影点或线等。当距离的总和改变时,投影距离中的仅一个投影距离改变。
90.作为非限制性示例,扫描系统可以适于放置在表面上,诸如在其上执行诸如切割、锯切、钻孔等任务的表面上,并在预定距离中将线投影到表面上,该预定距离可以诸如采用扫描系统上的按钮进行调节。
91.作为非限制性示例,扫描系统可用在安全激光扫描仪中(例如在生产环境中),和/或在用于确定对象形状的3d扫描设备中(诸如与3d打印、身体扫描、质量控制结合)、建筑应用中(例如作为测距仪),物流应用中(例如用于确定包裹的大小或体积),家庭应用中(例如在机器人真空吸尘器或割草机中),或在可能包括扫描步骤的其它类型的应用中。
92.传递设备可以被设计为将从对象传播到检测器的光优选地依次馈送到光学传感器。该馈送可以可选地借助于成像或另外借助于传递设备的非成像特性来实现。特别地,传递设备还可以设计为在电磁辐射随后被馈送到光学传感器之前收集电磁辐射。传递设备也可以全部或部分地是至少一个可选照射源的组成部分,例如通过将照射源设计为提供具有定义的光学特性的光束,例如具有定义的或精确已知的光束轮廓,例如高斯束的至少一种线性组合,特别是具有已知光束轮廓的至少一种激光束。
93.对于可选照射源的潜在实施例,可以参考wo 2012/110924 a1。尽管如此,其它实施例也是可行的。从对象发出的光可以起源于对象本身,但也可以可选地具有不同的起源,并从该起源传播到对象并随后朝向横向和/或纵向光学传感器传播。后一种情况可以例如通过使用至少一个照射源来实现。该照射源可以例如是或包括环境照射源和/或可以是或可以包括人工照射源。举例来说,检测器本身可以包括至少一个照射源,例如至少一个激光器和/或至少一个白炽灯和/或至少一个半导体照射源,例如至少一个发光二极管,特别是有机和/或无机发光二极管。考虑到它们通常定义的束轮廓和其它可操作性特性,特别优选使用一个或多个激光器作为照射源或其一部分。照射源本身可以是检测器的组成部分或者另外独立于检测器形成。照射源可以特别地集成到检测器中,例如集成到检测器的壳体中。可替代地或另外地,至少一个照射源也可以集成到至少一个信标设备中或集成到一个或多个信标设备中和/或集成到对象中或连接到或空间耦接到对象。
94.从一个或多个可选信标设备发出的光可以相应地、可替代地或另外地从所述光起源于相应信标设备本身的选项中从照射源发出和/或被照射源激发。举例来说,从信标设备发出的电磁光可以由信标设备本身发射和/或被信标设备反射和/或在被馈送到检测器之前被信标设备散射。在该情况下,电磁辐射的发射和/或散射可以在没有电磁辐射的频谱影响或具有此类影响的情况下实现。因此,举例来说,例如根据斯托克斯或拉曼,在散射期间也可能发生波长偏移。此外,光的发射可以例如由初级照射源(例如由被激发以产生发光(特别是磷光和/或荧光)的对象或对象的部分区域)激发。原则上,其它发射过程也是可能的。如果发生反射,则对象可以具有例如至少一个反射区域,特别是至少一个反射表面。所述反射表面可以是对象本身的一部分,但也可以是例如连接或空间耦接到对象的反射器,例如连接到对象的反射板。如果使用至少一个反射器,则它进而可以被视为检测器的一部分,该检测器的一部分例如与检测器的其它组成部分无关地连接到对象。
95.信标设备和/或至少一个可选的照射源通常可以发射以下至少之一的光:紫外光谱范围,优选地在200nm到380nm的范围内;可见光谱范围(380nm至780nm);红外光谱范围,
优选在780nm至3.0微米的范围内,更优选地在其中硅光电二极管具体地在700nm至1000nm的范围内适用的近红外区域的一部分。对于热成像应用,目标可以发射远红外光谱范围内(优选地在3.0微米到20微米的范围内)的光。例如,至少一个照射源适于发射可见光谱范围内的光,优选地在500nm至780nm的范围内,最优选地在650nm至750nm、或690nm至700nm。例如,至少一个照射源适于发射红外光谱范围内的光。然而,其它选项也是可行的。
96.光束到光学传感器的馈送特别可以这样实现,即在光学传感器的可选传感器区域上产生光斑,例如光斑具有圆形、椭圆形、或不同配置的横截面。举例来说,检测器可以具有可视范围,特别是立体角(solid angle)范围和/或空间范围,在该可视范围内可以检测对象。优选地,传递设备可以设计为使得光斑例如在对象布置在检测器的可视范围内的情况下完全布置在光学传感器的传感器区上和/或传感器区域上。举例来说,可以选择具有对应大小的传感器区域以确保该条件。
97.在另一方面,本发明公开了一种用于通过使用检测器(诸如根据本发明(诸如根据涉及上面公开的或下面进一步详细公开的检测器的一个或多个实施例)的检测器)确定至少一个对象的位置的方法。仍然可以使用其它类型的检测器。该方法包括以下方法步骤,其中方法步骤可以以给定的顺序执行或者可以以不同的顺序执行。此外,可能存在未列出的一个或多个附加方法步骤。此外,可以重复执行一个、多于一个或甚至所有方法步骤。
98.该方法包括以下方法步骤:
99.‑
通过使用具有光学传感器矩阵的至少一个传感器元件来确定对象的至少一个反射图像,每个光学传感器具有光敏区域;
100.‑
通过使用至少一个评估设备来选择反射图像的至少一个反射特征;
101.‑
通过优化至少一个模糊函数f
a
来确定反射图像的所选反射特征的至少一个距离估计,其中,距离估计由纵坐标z和误差区间
±
ε给出;
102.‑
确定至少一个参考图像中与距离估计对应的至少一个位移区域;
103.‑
将所选的反射特征与位移区域内的至少一个参考特征匹配。
104.对于细节、选项和定义,可以参考上面讨论的检测器。因此,具体地,如上概述,该方法可以包括使用根据本发明(诸如根据上面给出的或下面进一步详细给出的一个或多个实施例)的检测器。
105.在本发明的另一方面,出于使用的目的,提出了根据本发明(诸如根据上面给出的或下面进一步详细给出的一个或多个实施例)的检测器的用途,该用途选自包括以下项的组:交通技术中的位置测量;娱乐应用;安全性应用;监视应用;安全应用;人机界面应用;物流应用;跟踪应用;户外应用;移动应用;通信应用;摄影应用;机器视觉应用;机器人应用;质量控制应用;制造应用。
106.对象通常可以是有生命的或无生命的对象。检测器或检测器系统甚至可以包括至少一个对象,该对象由此形成检测器系统的一部分。然而,优选地,对象可以在至少一个空间维度中独立于检测器移动。对象通常可以是任意对象。在一个实施例中,对象可以是刚性对象。其它实施例是可行的,诸如其中对象是非刚性对象或可以改变其形状的对象的实施例。
107.如下面将更详细地概述,本发明可具体用于跟踪人的位置和/或运动,诸如用于控制机器、游戏或运动模拟的目的。在该实施例或其它实施例中,具体地,对象可选自包括以
下项的组:运动器材物品,优选地选自包括球拍、球杆、球棒的物品;衣服;帽子;鞋的物品。
108.因此,通常,根据本发明的设备(诸如检测器)可以应用于各种用途领域。具体地,该检测器可以应用于用途目的,该用途选自包括以下项的组:交通技术中的位置测量;娱乐应用;安全性应用;人机界面应用;跟踪应用;摄影应用;地图绘制应用,用于生成至少一个空间(诸如从房间、建筑物和街道的组中选择的至少一个空间)的地图;移动应用;网络摄像头;音频设备;杜比环绕音响系统;计算机外围设备;游戏应用;相机或视频应用;安全性应用;监视应用;汽车应用;运输应用;医疗应用;运动应用;机器视觉应用;车辆应用;飞机应用;船舶应用;航天器应用;建筑应用;施工应用;制图应用;制造应用。另外地或可替代地,可以指定本地和/或全球定位系统中的应用,特别是基于地标的定位和/或导航,具体地用于汽车或其它车辆(诸如火车、摩托车、自行车、用于货物运输的卡车)、机器人或用于行人。此外,室内定位系统可被指定为潜在应用,诸如用于家庭应用和/或用于在制造、物流、监视或维护技术中使用的机器人。
109.根据本发明的设备可用于移动电话、平板计算机、膝上型计算机、智能面板、或其它固定或移动或可穿戴计算机或通信应用。因此,根据本发明的设备可以与至少一种有源光源结合,诸如发射可见光范围或红外光谱范围内的光的光源,以便提高性能。因此,作为示例,根据本发明的设备可以诸如与用于扫描和/或检测环境、对象和生物的移动软件结合用作相机和/或传感器。根据本发明的设备甚至可以与2d相机(诸如传统相机)结合,以便增加成像效果。根据本发明的设备可进一步用于监视和/或用于记录目的或用作控制移动设备的输入设备,特别是结合语音和/或手势识别。因此,具体地,根据本发明的用作人机界面的设备(也称为输入设备)可用于移动应用中,诸如用于经由移动设备(诸如移动电话)控制其它电子设备或组件。作为示例,包括根据本发明的至少一个设备的移动应用可以用于控制电视机、游戏机、音乐播放器或音乐设备或其它娱乐设备。
110.此外,根据本发明的设备可用于网络摄像头或用于计算应用的其它外围设备。因此,作为示例,根据本发明的设备可以与用于成像、记录、监视、扫描或运动检测的软件结合使用。如在人机界面和/或娱乐设备的上下文中概述,根据本发明的设备对于通过面部表情和/或身体表情给出命令特别有用。根据本发明的设备可以与其它输入生成设备(如例如鼠标、键盘、触摸板、麦克风等)相结合。此外,根据本发明的设备可以用于游戏应用中,诸如通过使用网络摄像头。此外,根据本发明的设备可用于虚拟训练应用和/或视频会议。此外,根据本发明的设备可用于识别或跟踪在虚拟或增强现实应用中使用的手、手臂或对象,特别是在佩戴头戴式显示器时。
111.此外,如上面部分地解释,根据本发明的设备可以用于移动音频设备、电视设备和游戏设备。具体地,根据本发明的设备可以用作电子设备、娱乐设备等的控制器或控制设备。此外,根据本发明的设备可以用于眼睛检测或眼睛跟踪,诸如在2d和3d显示技术中(特别是具有用于增强现实应用的透明显示器),和/或用于识别显示器是否正被观看和/或从哪个角度正在观看显示器。此外,根据本发明的设备可用于结合虚拟或增强现实应用来探索房间、边界、障碍物,特别是在佩戴头戴式显示器时。
112.此外,根据本发明的设备可用于或用作数字相机(诸如dsc相机)和/或用于或用作反射式相机(诸如slr相机)。对于这些应用,如上所述,可以参考根据本发明的设备在诸如移动电话的移动应用中的使用。
113.此外,根据本发明的设备可用于安全或监视应用。因此,作为示例,根据本发明的至少一个设备可以与一个或多个数字和/或模拟电子器件相结合,如果对象在预定区域之内或之外,则该电子设备将给出信号(例如,用于银行或博物馆中的监视应用)。具体地,根据本发明的设备可以用于光加密。通过使用根据本发明的至少一个设备的检测可以与其它检测设备(诸如与ir、x射线、uv

vis、雷达或超声检测器)结合以补充波长。根据本发明的设备可以进一步与有源红外光源结合以允许在弱光环境中进行检测。与有源检测器系统相比,根据本发明的设备通常是有利的,特别是因为根据本发明的设备避免主动发送可能被第三方检测到的信号,如例如在雷达应用、超声波应用、lidar或类似的有源检测器设备中的这种情况。因此,通常,根据本发明的设备可用于对移动对象进行无法识别和无法检测的跟踪。此外,与传统设备相比,根据本发明的设备通常不太容易受到操纵和刺激。
114.此外,考虑到通过使用根据本发明的设备进行3d检测的简便性和准确性,根据本发明的设备通常可以用于面部、身体和人的识别和标识。其中,根据本发明的设备可以与用于识别或个性化目的的其它检测手段(诸如密码、指纹、虹膜检测、语音识别或其它手段)相结合。因此,通常,根据本发明的设备可用于安全设备和其它个性化应用。
115.此外,根据本发明的设备可以用作用于产品标识的3d条形码读取器。
116.除了上述安全和监视应用之外,根据本发明的设备通常可以用于空间和区域的监视和监控。因此,根据本发明的设备可以用于监视和监控空间和区域,并且作为示例,用于在禁止区域被违反的情况下触发或执行警报。因此,通常,根据本发明的设备可以用于建筑物监视或博物馆中的监视目的,可选地与其它类型的传感器结合,诸如与运动或热传感器结合,与图像增强器或图像增强设备和/或光电倍增管结合。此外,根据本发明的设备可用于公共空间或拥挤空间,以检测潜在的危险活动,诸如犯罪行为,诸如停车场或无人看管的对象(诸如机场中无人看管的行李)的盗窃。
117.此外,根据本发明的设备可以有利地应用于诸如视频和摄像机应用的相机应用中。因此,根据本发明的设备可用于运动捕获和3d电影录制。其中,根据本发明的设备通常提供优于传统光学设备的大量优点。因此,根据本发明的设备通常需要关于光学组件的较低复杂度。因此,作为示例,与传统光学设备相比,可以减少透镜的数量,诸如通过提供仅具有一个透镜的根据本发明的设备。由于降低的复杂度,非常紧凑的设备是可能的,诸如用于移动使用。诸如由于对大量分束器的普遍需要,具有两个或更多个高质量透镜的传统光学系统通常体积庞大。此外,根据本发明的设备通常可用于对焦/自动对焦设备,诸如自动对焦相机。此外,根据本发明的设备还可用于光学显微镜,特别是共焦显微镜。
118.此外,根据本发明的设备一般适用于汽车技术和运输技术的技术领域。因此,作为示例,根据本发明的设备可以用作距离和监视传感器,诸如用于自适应巡航控制、紧急制动辅助、车道偏离警告、环视、盲点检测、交通标志检测、交通标志识别、车道识别、后方交叉路口交通警报、取决于接近的交通或前方行驶的车辆调节大灯强度和范围的光源识别、自适应前照灯系统、远光灯自动控制、前灯系统中的自适应截止灯、无眩光远光前灯系统、通过前灯照射标记动物、障碍物等、后方交叉路口交通警报和其他驾驶员辅助系统,诸如高级驾驶员辅助系统或其它汽车和交通应用。此外,根据本发明的设备可用于驾驶员辅助系统中,该驾驶员辅助系统预先预测驾驶员的操纵以用于避免碰撞等。此外,诸如通过分析使用根据本发明的检测器获得的位置信息的一阶和二阶时间导数,根据本发明的设备还可用于速
度和/或加速度测量。该特征一般可适用于汽车技术、运输技术或通用交通技术。在其它技术领域中的应用是可行的。室内定位系统中的特定应用可以是在运输中乘客的位置的检测,更具体地,以电子方式控制安全系统(诸如安全气囊)的使用。如果乘客处于使用安全气囊将导致严重伤害的这样位置,则可能会阻止使用安全气囊。此外,在诸如汽车、火车、飞机等的交通工具中,特别是在自主车辆中,根据本发明的设备可用于确定驾驶员是否注意交通或分心,或睡着,或疲倦,或诸如由于饮酒等而不能驾驶。
119.在这些或其它应用中,通常,根据本发明的设备可用作独立设备或与其它传感器设备组合(诸如与雷达和/或超声波设备组合)使用。具体地,根据本发明的设备可以用于自主驾驶和安全问题。此外,在这些应用中,根据本发明的设备可以与作为声波传感器、二维相机或其它类型的传感器的红外传感器、雷达传感器结合使用。在这些应用中,根据本发明的设备的一般无源特性是有利的。因此,由于根据本发明的设备通常不需要发射信号,因此可以避免有源传感器信号与其它信号源干扰的风险。根据本发明的设备具体地可以与识别软件(诸如标准的图像识别软件)结合使用。因此,由根据本发明的设备提供的信号和数据通常易于处理,并且因此通常需要比建立的3d测量系统更低的计算能力。考虑到低空间需求,根据本发明的设备(诸如相机)实际上可以放置在车辆中的任何位置,诸如在窗屏上或后面、前引擎盖上、保险杠上、灯上、后视镜上或其它地方等。可以组合根据本发明的各种检测器,诸如基于本发明内公开的效果的一个或多个检测器,诸如以便允许自动驾驶车辆或以便提高主动安全概念的性能。因此,根据本发明的各种设备可以与根据本发明的一个或多个其它设备和/或传统传感器(诸如在像后窗、侧窗或前窗的车窗中、在保险杠上或在灯上)组合。
120.根据本发明的至少一个设备(诸如根据本发明的至少一个检测器)与一个或多个雨检测传感器的组合也是可能的。这是由于根据本发明的设备通常优于传统传感器技术(诸如雷达)的事实,具体是在大雨期间。根据本发明的至少一个设备与至少一种传统感测技术(诸如雷达)的组合可以允许软件根据天气条件挑选正确的信号组合。
121.此外,根据本发明的设备通常可以用作制动辅助和/或停车辅助和/或用于速度测量。速度测量可以集成在车辆中,或可以在车辆外部使用,诸如以便在交通控制中测量其它汽车的速度。此外,根据本发明的设备可用于检测停车场中的空闲停车位。
122.此外,根据本发明的设备可用于医疗系统和运动领域。因此,在医疗技术领域中,手术机器人(例如用于内窥镜)可以被指定,因为如上所述,根据本发明的设备可能只需要小体积并且可以集成到其它设备中。具体地,根据本发明的至多具有一个透镜的设备可以用于在诸如内窥镜的医疗设备中捕获3d信息。此外,根据本发明的设备可以与适当的监控软件结合,以便能够跟踪和分析运动。这可以允许医疗设备(诸如内窥镜或手术刀)的位置与医疗成像的结果(诸如从磁共振成像、x射线成像、或超声成像获得)的即时叠加。这些应用例如在精确位置信息很重要的医学治疗中(诸如脑外科、远程诊断和远程医疗中)特别有价值。此外,根据本发明的设备可以用于3d身体扫描。身体扫描可应用于医疗的上下文中,诸如牙科手术、整形手术、减肥手术或美容整形手术,或可应用于医疗诊断的上下文中,诸如诊断肌筋膜疼痛综合征、癌症、身体变形障碍,或进一步的疾病。身体扫描可进一步应用于运动领域,以评估运动器材的人体工程学使用或合身性。此外,根据本发明的设备可用于可穿戴机器人,诸如外骨骼或假肢等。
123.身体扫描还可用于服装的上下文中,诸如确定衣服的合适大小和合身度。该技术可用于定制衣服的上下文中,或从互联网订购衣服或鞋子或自助购物设备(诸如微型售货亭设备或客户礼宾设备)的上下文中。服装的上下文中的身体扫描对于扫描穿着整齐的顾客特别重要。
124.此外,根据本发明的设备可用于人数统计系统的上下文中,诸如计算电梯、火车、公共汽车、汽车或飞机中的人数,或统计通过走廊、门、过道、零售店、体育场、娱乐场所、博物馆、图书馆、公共场所、电影院、剧院等的人数。此外,人数统计系统中的3d功能可用于获得或估计关于被统计人的进一步信息,诸如身高、体重、年龄、身体健康等。该信息可用于商业智能度量,和/或用于进一步优化可统计人数的地点,以使其更具吸引力或安全性。在零售环境中,根据本发明的设备在人数统计的上下文中可用于识别回头客或交叉购物者、评估购物行为、评估进行购买的访客的百分比、优化员工轮班,或监控每位访客的购物中心成本。此外,人数统计系统可用于人体测量学调查。此外,根据本发明的设备可用于公共交通系统,用于取决于运输长度自动向乘客收费。此外,根据本发明的设备可用于儿童游乐场,以识别受伤的儿童或从事危险活动的儿童,允许与游乐场玩具的附加互动,以确保安全使用游乐场玩具等。
125.此外,根据本发明的设备可用于建筑工具,诸如确定到对象或到墙壁的距离的测距仪,以评估表面是否是平面的,以有序的方式对齐对象或放置对象,或用于在建筑环境等中使用的检查相机中。
126.此外,根据本发明的设备可以应用于运动和锻炼领域,诸如用于训练、远程指导或比赛目的。具体地,根据本发明的设备可以应用于舞蹈、有氧运动、足球、英式足球、篮球、棒球、板球、曲棍球、田径、游泳、马球、手球、排球、橄榄球、相扑、柔道、击剑、拳击、高尔夫、赛车、激光标签、战场模拟等。根据本发明的设备可用于检测球、球棒、剑、动作等的位置,无论是在运动中还是在比赛中,诸如监控比赛,支持裁判或判断,特别是自动判断运动中的特定情况,诸如判断是否真地得分或进球。
127.此外,根据本发明的设备可用于赛车或汽车驾驶员培训或汽车安全培训等领域,以确定汽车的位置或汽车的轨迹,或与先前轨迹或理想轨迹的偏差等。
128.根据本发明的设备可进一步用于支持乐器的练习,特别是远程课程,例如弦乐器(诸如民族提琴(fiddle)、小提琴(violin)、中提琴、大提琴、贝司、竖琴、吉他、班卓琴或尤克里里琴)、键盘乐器(诸如钢琴、风琴、键盘、大键琴、风琴或手风琴)和/或打击乐器(诸如鼓、定音鼓、马林巴琴、木琴、颤音琴、邦戈鼓、康加鼓、定音鼓、非洲鼓或手鼓)的课程。
129.根据本发明的设备还可以用于康复和物理治疗,以便鼓励训练和/或以便调查和纠正运动。其中,根据本发明的设备还可以应用于距离诊断。
130.此外,根据本发明的设备可以应用于机器视觉领域。因此,可以使用根据本发明的一种或多种设备,例如,作为自主驾驶和或机器人工作的无源控制单元。与移动机器人相结合,根据本发明的设备可以允许自主移动和/或自主检测零件中的故障。根据本发明的设备还可以用于制造和安全监视,诸如以便避免事故,包括但不限于机器人、生产零件和生物之间的碰撞。在机器人技术中,人与机器人的安全和直接交互通常是一个问题,因为机器人在未被识别时可能会严重伤害人类。根据本发明的设备可以帮助机器人更好更快地定位对象和人类,并允许安全交互。考虑到根据本发明的设备的无源特性,根据本发明的设备可能优
于有源设备和/或可以用于补充现有的解决方案,如雷达、超声波、2d相机、红外检测等。根据本发明的设备的一个特殊优点是信号干扰的低可能性。因此,多个传感器可以在同一个环境中同时工作,没有信号干扰的风险。因此,根据本发明的设备通常可用于高度自动化的生产环境,如例如但不限于汽车、采矿、钢铁等。根据本发明的设备还可以用于生产中的质量控制,例如与如2d成像、雷达、超声波、红外等的其它传感器结合,诸如用于质量控制或其它目的。此外,根据本发明的设备可用于评估表面质量,诸如用于监视产品的表面平整度或对特定尺寸(从微米范围到米范围)的遵守情况。其它质量控制应用是可行的。在制造环境中,根据本发明的设备特别适用于加工天然产品,诸如食物或木材,具有复杂的三维结构以避免大量废料。此外,根据本发明的设备可用于监控罐、筒仓等的填充水平。此外,根据本发明的设备可用于检查复杂产品的缺失零件、不完整零件、松散零件、低质量零件等,诸如在诸如印刷电路板、组件或子组件的检查、工程组件的验证、发动机零件检查、木材质量检查、标签检查、医疗设备检查、产品取向检查、包装检查、食品包装检查等的自动光学检查中。
131.此外,根据本发明的设备可用于车辆、火车、飞机、轮船、航天器和其它交通应用。因此,除了上面在交通应用的上下文中提到的应用之外,还可以指定用于飞机、车辆等的无源跟踪系统。用于监控移动对象的速度和/或方向的根据本发明的至少一个设备(诸如根据本发明的至少一个检测器)的使用是可行的。具体地,可以指定对陆地、海洋和空中(包括太空)的快速移动对象的跟踪。根据本发明的至少一个设备(诸如根据本发明的至少一个检测器)具体地可以安装在静止的和/或移动的设备上。根据本发明的至少一个设备的输出信号可以例如与用于另一个对象的自主或引导运动的引导机制相结合。因此,用于避免被跟踪对象与被操纵对象之间得碰撞或用于使被跟踪对象与被操纵对象之间发生碰撞的应用是可行的。由于所需的低计算功率、即时响应以及由于与有源系统(如例如雷达)相比通常更难检测和干扰的检测系统的无源性质,根据本发明的设备通常是有用和有利的。根据本发明的设备特别有用但不限于例如速度控制和空中交通控制设备。此外,根据本发明的设备可用于道路收费的自动收费系统。
132.根据本发明的设备通常可用于无源应用。无源应用包括在港口或危险区域中用于船舶以及在着陆或启动时用于飞机的引导。其中,固定的已知的有源目标可用于精确引导。这同样适用于在危险但明确定义的路线上行驶的车辆,诸如采矿车辆。此外,根据本发明的设备可用于检测快速接近的对象,诸如汽车、火车、飞行对象、动物等。此外,根据本发明的设备可用于检测对象的速度或加速度,或通过根据时间来跟踪对象的位置、速度和/或加速度中的一个或多个来预测对象的运动。
133.此外,如上概述,根据本发明的设备可用于游戏领域。因此,根据本发明的设备可以是无源的,用于与具有相同或不同大小、颜色、形状等的多个对象一起使用,诸如与将运动结合到其内容中的软件相结合用于运动检测。特别地,应用在将运动实现位图形输出的方面是可行的。此外,用于给出命令的根据本发明的设备的应用是可行的,诸如通过使用根据本发明的用于手势或面部识别的设备中的一个或多个。根据本发明的设备可以与有源系统相结合以便在例如弱光条件下或在需要增强周围条件的其它情况下工作。另外地或可替代地,根据本发明的一个或多个设备与一个或多个ir或vis光源的组合是可能的。根据本发明的检测器与特殊设备的组合也是可能的,这可以通过系统及其软件轻松区分,例如并且不限于特殊颜色、形状、与其它设备的相对位置、移动速度、光、用于调制设备上光源的频
率、表面特性、使用的材料、反射特性、透明度、吸收特性等。除其它可能性外,该设备可以类似于棍子、球拍、球杆、枪、刀、轮子、环状物、方向盘、瓶子、球、玻璃杯、花瓶、勺子、叉子、立方体、骰子、人偶、木偶、泰迪熊、烧杯、踏板、开关、手套、珠宝、乐器或演奏乐器的辅助设备,诸如拨片、鼓槌等。其它选项是可行的。
134.此外,根据本发明的设备可用于检测和/或跟踪诸如由于高温或进一步的发光过程而自身发光的对象。发光部分可以是排气流等。此外,根据本发明的设备可用于跟踪反射对象并分析这些对象的旋转或取向。
135.此外,根据本发明的设备通常可用于建筑、施工和制图领域。因此,通常,可以使用根据本发明的一个或多个设备来测量和/或监控环境区域,例如乡村或建筑物。其中,根据本发明的一个或多个设备可以与其它方法和设备相结合或可以单独使用,以监控建筑项目、改变的对象、房屋等的进度和准确性。根据本发明的设备可用于生成扫描环境的三维模型,以便从地面或空中构建房间、街道、房屋、社区或景观的地图。潜在的应用领域可以是建筑、制图、房地产管理、土地测量等。作为示例,根据本发明的设备可用于无人机或多旋翼飞行器,以监控建筑物、生产现场、烟囱、农业生产环境,诸如田地、生产工厂或景观,以支持救援行动,支持在危险环境中的工作,在室内或室外燃烧的地方支持消防队,或寻找或监视一个或多个人或动物等,或用于娱乐目的,诸如无人机跟随和记录一个或多个人做的运动(诸如滑雪或骑自行车等),这可以通过跟随头盔、标记、信标设备等来实现。根据本发明的设备可用于识别障碍物、遵循预定路线、遵循边缘、管道、建筑物等,或者记录环境的全局或局部地图。此外,根据本发明的设备可用于无人机的室内或室外定位和位置测定,用于在气压传感器不够准确的室内稳定无人机的高度,或用于多个无人机的交互,诸如作为几架无人机的协同运动或在空中充电或加油等。
136.此外,根据本发明的设备可以在诸如chain(cedec家用电器互操作网络)的家用电器的互连网络中使用,从而互连、自动化和控制家庭中的基本设备相关服务,例如能源或负荷管理、远程诊断、宠物相关电器、儿童相关电器、儿童监视、电器相关监视、对老年人或病人的支持或服务、家庭安全和/或监视、电器操作的远程控制以及自动维护支持。此外,根据本发明的设备可以用于加热或冷却系统,例如空调系统,以定位房间的哪个部分应该被设置为一定的温度或湿度,特别是取决于一个或多个人的位置。此外,根据本发明的设备可以用于家用机器人,例如可以用于家务的服务或自主机器人。根据本发明的设备可以用于许多不同的目的,例如为了避免碰撞或映射环境,还用于识别用户,针对给定用户个性化机器人的性能,用于安全目的,或者用于手势或面部识别。作为示例,根据本发明的设备可用于机器人吸尘器、洗地机器人、干扫机器人、用于熨烫衣服的熨烫机器人、动物垃圾机器人,诸如狗或猫垃圾机器人、用于电动车辆的充电机器人、检测入侵者的安全机器人、机器人割草机、自动泳池清洁器、雨水槽清洁机器人、机器人购物车、行李搬运机器人、巡线机器人、洗衣机器人、熨烫机器人、擦窗机器人、玩具机器人、病人监护机器人、婴儿监护机器人、老人监护机器人、儿童监护机器人、运输机器人、远程呈现机器人、专业服务机器人、可编程玩具机器人、探路机器人、为行动不便的人提供陪伴的社交机器人、跟随机器人、智能卡跟随机器人、心理治疗机器人,或将语音翻译成手语或将手语翻译成语音的机器人。在行动不便的人群(诸如老年人)的情况下,具有根据本发明的设备的家用机器人可用于拾取对象、运输对象以及以安全的方式与对象和用户交互。此外,根据本发明的设备可用于人形机器人,特
别是在使用人形手拾取或握住或放置对象的上下文中。此外,根据本发明的设备可以与音频接口结合使用,特别是与家用机器人结合使用,该家用机器人可以用作具有到在线或离线计算机应用的接口的数字助理。此外,根据本发明的设备可以用于可控制工业和家庭用途中的开关和按钮的机器人。此外,根据本发明的设备可用于智能家居机器人,诸如mayfield的kuri。此外,根据本发明的设备可以用在机器人与危险材料或对象一起操作或在危险环境中。作为非限制性示例,根据本发明的设备可以用在机器人或无人遥控车辆中,从而操作诸如化学品或放射性材料的危险材料,尤其是在灾害之后,或者操作诸如其他危险或潜在危险的对象,诸如地雷、未爆炸的武器等,或在诸如近处燃烧对象或灾后地区的不安全环境中操作或进行调研,或在空中、海上、地下等进行有人或无人救援行动。
137.此外,根据本发明的设备可用于检查粘合珠、密封珠等,诸如识别破裂、粗节、收缩、不对称、局部缺陷等。此外,根据本发明的设备可用于对传送带上的诸如干果的对象进行计数,诸如在困难情况下,诸如当颜色和形状相似的水果可能彼此直接接触时。此外,根据本发明的设备可用于压铸或注塑零件的质量控制,诸如以确保无缺陷的铸造或模制,识别表面损坏、磨损的工具等。此外,根据本发明的设备可用于激光划线,诸如用于激光的质量控制和定位。此外,根据本发明的设备可用于分类系统,诸如检测对象的位置、旋转和形状,将其与对象数据库进行比较,并对对象进行分类。此外,根据本发明的设备可用于冲压零件检查、包装检查,诸如食品和药品包装检查、细丝检查等。
138.此外,根据本发明的设备可用于导航目的,其中全球定位系统不够可靠。gps信号通常使用无线电波,该无线电波在室内或室外的山谷或林木线以下的森林中可能会被阻挡或难以接收。此外,特别是在无人自主车辆中,系统的重量可能很关键。特别是无人自主车辆需要用于其控制系统的可靠反馈和稳定性的高速位置数据。使用根据本发明的设备可以允许短时间响应和定位,而不会因设备重而增加重量。
139.此外,根据本发明的设备可以用于家用、移动或娱乐设备,例如冰箱、微波炉、洗衣机、窗帘或百叶窗、家用警报器、空调设备、加热设备、电视、音频设备、智能手表、移动电话、电话、洗碗机、炉子等,用于检测人的存在,监测设备的内容或功能,或与人进行交互和/或与其他家庭、移动或娱乐设备共享有关该人的信息。
140.此外,根据本发明的设备可用于支持老年人或残疾人或视力有限或没有视力的人,诸如在做家务时或在工作中,诸如在用于保持、携带或拾取对象的设备中,或在具有光学或声学信号发信号通知环境中障碍物的安全系统中。
141.根据本发明的设备可以进一步用于农业,例如完全或部分地检测和分类害虫、杂草和/或受感染的作物植物,其中作物植物可以被真菌或昆虫感染。此外,为了收获作物,根据本发明的设备可以用于检测动物(例如鹿),否则它们可能受到收获设备侵害。此外,根据本发明的设备可以用于监测田地或温室中植物的生长,特别是用于调节田地或温室中给定区域的水或肥料或作物保护产品的量,或甚至用于给定的植物。此外,在农业生物技术中,根据本发明的设备可以用于监测植物的大小和形状。
142.此外,根据本发明的设备可用于自动去除杂草,诸如通过机械方式,诸如以避免使用除草剂。此外,根据本发明的设备可用于农业领域,特别是检测和/或定位特定昆虫,诸如决定是否施用作物保护或施肥物质,诸如以减少施用物质的量或保护特定的动物群体(诸如蜜蜂)。
143.此外,根据本发明的设备可以用于在剃须、剪发或化妆过程等期间引导使用者。此外,根据本发明的设备可以用于记录或监测在诸如小提琴的乐器上演奏的内容。此外,根据本发明的设备可以用在诸如智能冰箱的智能家用电器中,诸如监测冰箱的内容并根据内容发送通知。此外,根据本发明的设备可以用于监测或跟踪人类、动物或植物的群体,例如森林中的珍贵或树木种群。此外,根据本发明的设备可以用在收割机中,例如用于收割庄稼、花卉或水果,例如葡萄、玉米、啤酒花、苹果、谷物、大米、草莓、芦笋、郁金香、玫瑰、大豆等等。此外,根据本发明的设备可以用于监测植物、动物、藻类、鱼类等的生长,例如在育种、食品生产、农业或研究应用中,以便控制灌溉、施肥、湿度、温度,除草剂、杀虫剂、杀真菌剂、杀鼠剂等的使用。此外,根据本发明的设备可以用于动物或宠物的喂食机器,例如用于牛、猪、猫、狗、鸟、鱼等。此外,根据本发明的设备可以用于动物产品生产过程,例如用于收集牛奶、鸡蛋、毛皮、肉类等,例如在自动挤奶或屠宰过程中。此外,根据本发明的设备可以用于自动播种机、或撒种机、或种植机,例如用于种植玉米、大蒜、树木、沙拉等。此外,根据本发明的设备可以用于评估或监测天气现象,例如云、雾等,或用于警告雪崩、海啸、大风、地震、雷暴等危险。此外,根据本发明的设备可以用于测量运动、冲击、震荡等,以便监测地震风险。此外,根据本发明的设备可以用于交通技术中以监测危险的交叉路口,根据交通控制交通灯,监测公共空间,监测道路、健身房、体育场馆、滑雪场、公共事件等。此外,根据本发明的设备可以用于医疗应用中,例如监测或分析组织、医学或生物学测定、组织中的变化,例如痣或黑素瘤等,计数细菌、血细胞、细胞、藻类,用于视网膜扫描、呼吸或脉搏测量、胃镜检查、患者监视等。此外,根据本发明的设备可以用于监测液滴、流、喷射等的形状、大小或周长,或用于分析、评估或监测诸如风道中的轮廓或气体或液体流等。此外,根据本发明的设备可以用于在诸如汽车或火车司机生病或疲倦等时警告驾驶员。此外,根据本发明的设备可以用于材料测试以识别应变或张力或裂缝等。此外,根据本发明的设备可以用于航行以监测和优化航行位置,例如自动。此外,根据本发明的设备可以用于燃料液位计。
144.此外,根据本发明的设备可以与检测化学品或污染物的传感器、电子鼻芯片、检测细菌或病毒等的微生物传感器芯片、盖格(geiger)计数器、触觉传感器,热传感器等进行组合。例如,这可以用于构造智能机器人,其被配置用于处理危险或困难的任务,例如治疗高度感染的患者,处理或去除高度危险的物质,清洁高度污染的区域,例如高放射性区域或化学品泄漏,或者用于农业害虫防治。
145.根据本发明的一个或多个设备还可以用于扫描对象,例如与cad或类似软件相组合,例如用于增材制造和/或3d打印。其中,可以使用根据本发明的设备的高空间精度,例如在x方向、y方向或z方向或这些方向的任意组合中,例如同时。此外,根据本发明的设备可以用于检查和维护,例如管道检测仪表。此外,在生产环境中,根据本发明的设备可以用于处理难以限定形状的对象,例如天然生长的对象,例如按形状或大小分类蔬菜或其他天然产品,或切割诸如肉类或者以低于加工步骤所需的精度进行制造的对象。
146.此外,根据本发明的设备可以用在本地导航系统中,以允许自动或部分自动地移动车辆或多旋翼飞机等通过室内或室外空间。非限制性示例可以包括车辆移动通过自动储存器以拾取对象并将它们放置在不同的位置。室内导航还可以用于商场、零售商店、博物馆、机场或火车站,以跟踪移动商品、移动设备、行李、顾客或雇员的位置,或者向用户提供位置特定信息,例如地图上的当前位置、或所售商品的信息等。
147.此外,根据本发明的设备可以用于确保摩托车的安全驾驶,例如通过监测速度、倾斜度、即将到来的障碍物、道路的不平坦性或曲线等来为摩托车提供驾驶辅助。此外,根据本发明的设备可以用在火车或有轨电车中以避免碰撞。
148.此外,根据本发明的设备可以用在手持设备中,例如用于扫描包装或包裹以优化物流过程。此外,根据本发明的设备可以用于其他手持设备,例如个人购物设备、rfid读取器,用于在医院或健康环境中的手持设备,诸如医疗用途或用于获取、交换或记录患者或患者相关信息的手持设备,零售或健康环境的智能徽章等。
149.如上所述,根据本发明的设备还可以用于制造、质量控制或识别应用,例如产品识别或尺寸识别(例如用于寻找最佳位置或包装,以减少浪费等)。此外,根据本发明的设备可以用于物流应用中。因此,根据本发明的设备可用于优化装载或包装容器或车辆。此外,根据本发明的设备可以通过使用至少一个图像矩阵并将预先记录的大小与条码、qr码或预先记录的符号的记录图像的测量特性进行比较(诸如通过将符号的宽度或高度与预先记录的值进行比较),使用已知大小的条形码、qr码或预先记录的符号来重新校准。此外,根据本发明的设备可以用于监测或控制制造领域中的表面损坏,用于监测或控制诸如租赁车辆的租赁物品,和/或用于保险应用,例如用于评估损害。此外,根据本发明的设备可用于识别材料、对象或工具的尺寸,例如用于最佳材料处理,尤其是与机器人组合。此外,根据本发明的设备可以用于生产中的过程控制,例如,用于观察罐的填充水平。此外,根据本发明的设备可以用于维护生产资产,例如但不限于罐、管道、反应器、工具等。此外,根据本发明的设备可以用于分析3d质量标记。此外,根据本发明的设备可以用于制造定制产品,例如牙齿镶嵌物、牙齿矫正器、假体、衣服等。根据本发明的设备还可以与一个或多个3d打印机组合,用于快速原型制作、3d复制等。此外,根据本发明的设备可以用于检测一个或多个物品的形状,例如用于反产品盗版和用于防伪目的。
150.因此,具体地,本技术可以应用于摄影领域。因此,检测器可以是摄影设备的一部分,具体地是数字相机的一部分。具体地,检测器可以用于3d摄影,具体地用于数字3d摄影。因此,检测器可以形成数字3d相机或者可以是数字3d相机的一部分。如在此所使用的,术语摄影通常是指获取至少一个对象的图像信息的技术。如在此进一步使用的,相机通常是适于执行摄影的设备。如在此进一步使用的,术语数字摄影通常是指通过使用多个光敏元件来获取至少一个对象的图像信息的技术,该光敏元件适于生成指示照射强度和/或颜色的电信号,优选地数字电信号。如在此进一步使用的,术语3d摄影一般是指在三个空间维度中获取至少一个对象的图像信息的技术。因此,3d相机是一种适于执行3d摄影的设备。相机通常可以适于获取单个图像,诸如单个3d图像,或者可以适于获取多个图像,诸如图像序列。因此,相机也可以是适于视频应用的视频相机,诸如用于获取数字视频序列。
151.因此,通常,本发明进一步涉及一种用于对至少一个对象进行成像的相机,具体地是数字相机,更具体地是3d相机或数字3d相机。如上概述,如在此所使用的术语成像通常是指获取至少一个对象的图像信息。相机包括根据本发明的至少一个检测器。如上概述,相机可以适于获取单个图像或用于获取多个图像(诸如图像序列),优选地用于获取数字视频序列。因此,作为示例,相机可以是或可以包括视频相机。在后一种情况下,相机优选地包括用于存储图像序列的数据存储器。
152.如在本发明中使用的,表述“位置”通常是指关于对象的一个或多个点的绝对位置
和取向中的一个或多个的至少一项信息。因此,具体地,可以在检测器的坐标系中(诸如在笛卡尔坐标系中)确定位置。然而,另外地或可替代地,可以使用其它类型的坐标系,诸如极坐标系和/或球坐标系。
153.如上所述并且如下面将进一步详细描述的,本发明优选地可以应用于人机界面领域、运动领域和/或计算机游戏领域。因此,优选地,对象可以选自包括以下项的组:运动器材物品,优选地选自由球拍、球杆、球棒组成的组的物品、衣服、帽子、鞋子物品。其它实施例是可行的。
154.如在此所使用的,对象通常可以是从有生命的对象和无生命的对象中选择的任意对象。因此,作为示例,至少一个对象可以包括一个或多个物品和/或物品的一个或多个部分。另外地或可替代地,对象可以是或可以包括一个或多个生物和/或其一个或多个部分,诸如人类(例如用户)和/或动物的一个或多个身体部位。
155.关于用于确定对象位置的坐标系,其可以是检测器的坐标系,检测器可以构成坐标系,其中检测器的光轴形成z轴,并且其中,另外,可以提供与z轴垂直并且彼此垂直的x轴和y轴。作为示例,检测器和/或检测器的一部分可以停留在该坐标系中的特定点处,诸如在该坐标系的原点处。在该坐标系中,与z轴平行或反平行的方向可以被认为是纵向方向,并且沿z轴的坐标可以被认为是纵坐标。垂直于纵向方向的任意方向可以被认为是横向方向,并且x坐标和/或y坐标可以被认为是横坐标。
156.可替代地,可以使用其它类型的坐标系。因此,作为示例,可以使用极坐标系,其中光轴形成z轴并且其中距z轴的距离和极角可以用作附加坐标。同样,平行或反平行于z轴的方向可以被认为是纵向方向,并且沿着z轴的坐标可以被认为是纵坐标。垂直于z轴的任何方向都可以被认为是横向方向,并且极坐标和/或极角可以被认为是横坐标。
157.检测器可以是被配置为提供关于至少一个对象和/或其一部分的位置的至少一项信息的设备。因此,位置可以指完全描述对象或其一部分优选地在检测器的坐标系中的位置的信息项,或者可以指仅部分地描述位置的部分信息。检测器通常可以是适于检测光束(诸如从信标设备朝向检测器传播的光束)的设备。
158.评估设备和检测器可以完全或部分地集成到单个设备中。因此,通常,评估设备也可以形成检测器的一部分。可替代地,评估设备和检测器可以完全或部分地体现为单独的设备。检测器可以包括其它组件。
159.检测器可以是固定设备或移动设备。此外,检测器可以是独立设备或可以形成另一设备(诸如计算机、车辆或任何其它设备)的一部分。此外,检测器可以是手持设备。检测器的其它实施例是可行的。
160.检测器具体地可用于记录在检测器的透镜或透镜系统后面的光场,与全光或光场相机相当。因此,具体地,检测器可以体现为适于诸如同时获取多个焦平面中的图像的光场相机。如在此所使用的,术语光场通常是指光在检测器内侧(诸如相机内侧)的空间光传播。根据本发明的检测器(具体地是具有光学传感器的堆叠)可以具有直接记录检测器或相机内(诸如在透镜后面)的光场的能力。多个传感器可以记录距透镜不同距离处的图像。使用例如基于卷积的算法(诸如“聚焦深度(depth from focus)”或“离焦深度(depth

from

defocus)”),可以对透镜后面的光的传播方向、焦点和扩展(spread)进行建模。从透镜后面的建模光的传播中,可以提取到透镜不同距离处的图像,可以优化景深,可以提取在不同距
离处对焦的图片,或者可以计算对象的距离。可以提取更多信息。
161.多个光学传感器的使用进一步允许在记录图像之后在图像处理步骤中校正透镜误差。当需要校正透镜误差时,光学仪器通常会变得昂贵且结构复杂。这些在显微镜和望远镜中特别成问题。在显微镜中,典型的透镜误差是距光轴不同距离的光线不同地失真(球面像差)。在望远镜中,不同的大气温度可能会导致焦距发生变化。可以通过在校准步骤中确定误差并且然后使用固定图像处理(诸如固定的像素和传感器组)或使用光传播信息的更复杂的处理技术来校正静态误差,诸如球面像差或生产中的其它误差。在透镜误差与时间密切相关的情况下,即取决于望远镜中的天气条件,可以通过使用透镜后面的光传播,计算扩展景深图像,使用聚焦深度技术等来校正透镜误差。
162.根据本发明的检测器可进一步允许颜色检测。对于颜色检测,可以使用具有不同光谱特性的多个光学传感器,并且可以比较这些光学传感器的传感器信号。此外,根据本发明的设备可以用在手势识别的上下文中。在该上下文中,结合根据本发明的设备的手势识别特别可以用作人机界面,用于经由身体、身体部位或对象的运动向机器传输信息。在此,信息可以优选地经由手或手的部分(诸如手指)的运动来传输,特别是通过指向对象、应用手语(诸如对于聋人)、做出数字的手势、通过挥手表示赞成、不赞成等,例如当要求某人接近、离开或迎接某人,按压对象,拿走对象,或者在体育或音乐领域,用手或手指运动,如热身运动。此外,信息可以通过手臂或腿的运动传递,例如旋转、踢、抓、扭、旋转、滚动、浏览、推动、弯曲、打孔、摇动、手臂、腿、双臂或双腿,或者手臂和腿的组合,例如用于运动或音乐的目的,例如用于机器的娱乐、锻炼或训练功能。此外,信息可以通过整个身体或其主要部分的运动来传输,例如跳跃、旋转或制作复杂的标志,例如在机场或由交警使用的手语以便传输信息,例如“右转”、“左转”、“前进”、“减速”、“停止”或“停止引擎”,或通过假装游泳、潜水、跑步、射击等,或制作复杂运动或身体姿势,如瑜伽、普拉提、柔道、空手道、舞蹈或芭蕾舞。此外,可以通过使用真实或模拟设备来传输信息,以控制与模拟设备相对应的虚拟设备,例如使用模拟吉他来控制计算机程序中的虚拟吉他功能,使用真正的吉他来控制计算机程序中的虚拟吉他功能,使用真实或模拟书籍来阅读电子书或移动页面或浏览虚拟文档,使用真实或模拟笔在计算机程序中绘图等。此外,信息的传输可以耦接到对用户的反馈,例如声音、振动或运动。
163.在音乐和/或乐器的情境下,根据本发明的设备结合手势识别可以用于锻炼目的,乐器控制,乐器记录,通过使用模拟乐器演奏或录制音乐或仅假装存在乐器,例如弹奏空气吉他,例如避免噪音或录音,或者用于进行虚拟管弦乐队、合唱团、乐队、大乐队、合唱团等,以便练习、锻炼、录音或娱乐目的等。
164.此外,在安全和监视的情境下,根据本发明的设备结合手势识别可以用于识别人的运动轮廓,例如通过行走或移动身体来识别人,或者使用手势或移动或者身体部位或整个身体的标志或移动,作为访问或识别控制,例如个人识别标志或个人识别移动。
165.此外,在智能家用电器或物联网的情境下,根据本发明的设备结合手势识别可以用于家庭设备的中央或非中央控制,家庭设备可以是家用电器和/或家用设备的互连网络的一部分,诸如冰箱、集中供热、空调、微波炉、冰块制造机或煮水器,或娱乐设备,如电视机、智能手机、游戏机、录像机、dvd播放器、个人电脑、笔记本电脑、平板电脑或其组合,或家用设备和娱乐设备的组合。
166.此外,在虚拟现实或增强现实的情境下,根据本发明的设备结合手势识别可以用于控制虚拟现实应用或增强现实应用的移动或功能,例如使用标志、手势、身体运动或身体部位运动等玩游戏或控制游戏,在虚拟世界中移动,操纵虚拟对象,使用虚拟对象来练习、锻炼或进行运动、艺术、手工艺、音乐或游戏,虚拟对象如球、国际象棋棋子、石头、仪器、工具、刷子。
167.此外,在医学的情境下,根据本发明的设备结合手势识别可以用于支持康复训练、远程诊断,或监测或调查手术或治疗,以叠加和显示具有医疗设备位置的医学图像,或者利用手术或治疗过程中记录的来自内窥镜或超声波等的图像来叠加显示预先记录的医学图像,例如来自磁共振断层摄影术或x射线等的医学图像。
168.此外,在制造和过程自动化的情境下,根据本发明的设备结合手势识别可以用于控制、教导或编程机器人、无人机、无人驾驶自动驾驶车辆、服务机器人、可移动对象等,例如用于编程、控制、制造、操纵、修理或教学目的,或用于远程操纵对象或区域,例如出于安全原因或用于维护目的。
169.此外,在商业智能度量的情境下,根据本发明的设备结合手势识别可以用于人数统计,调查客户移动,客户花费时间的区域,对象,客户测试,接受,探测等。
170.此外,根据本发明的设备可以用于手工或专业工具,尤其是电或电机驱动工具或电动工具,例如钻孔机、锯、凿子、锤子、扳手、钉枪、圆盘切割机、金属剪刀和冲击器、角磨机、模具磨床、钻头、锤钻、热风枪、扳手、砂光机、雕刻机、钉枪、曲线锯、比司吉细木工、木材刳铣机、刨床、抛光机、瓷砖切割机、垫圈、滚筒、墙壁追逐器、车床、冲击驱动器、连接器、涂料滚筒、喷枪、榫眼或焊工,尤其是为了支持制造精度,保持最小或最大距离,或用于安全措施。
171.此外,根据本发明的设备可以用于帮助视障人士。此外,根据本发明的设备可以用在触摸屏中,以避免直接接触,例如出于卫生原因,可以在零售环境、医疗应用、生产环境等中使用。此外,根据本发明的设备可以用于农业生产环境,例如稳定的清洁机器人、蛋收集机、挤奶机、收割机器、农机具、收割机、货运代理、联合收割机、拖拉机、耕耘机、犁、去石机、耙子、条带收割机、撒种机、诸如马铃薯种植机的种植机、肥料撒播机、喷雾器、喷水灭火系统、割谷机、打包机、装载机、叉车、割草机等。
172.此外,根据本发明的设备可以用于选择和/或调整衣服、鞋子、眼镜、帽子、假肢、牙齿矫正器,用于具有有限沟通技巧或可能性的人或动物,例如儿童或残疾人等。此外,根据本发明的设备可以用于仓库、物流、配送、运输、装载、卸载、智能制造、工业4.0等的情境下。此外,在制造情境中,根据本发明的设备可以用于加工、分配、弯曲、材料处理等的情境中。
173.评估设备可以是或可以包括一个或多个集成电路,诸如一个或多个专用集成电路(asic),和/或一个或多个数据处理设备,诸如一个或多个计算机,优选是一个或多个微计算机和/或微控制器、现场可编程阵列、或数字信号处理器。可以包括附加组件,诸如一个或多个预处理设备和/或数据采集设备,诸如用于接收和/或预处理传感器信号的一个或多个设备,诸如一个或多个ad转换器和/或一个或多个滤波器。此外,评估设备可以包括一个或多个测量设备,诸如用于测量电流和/或电压的一个或多个测量设备。此外,评估设备可以包括一个或多个数据存储设备。此外,评估设备可以包括一个或多个接口,诸如一个或多个无线接口和/或一个或多个有线绑定接口。
174.至少一个评估设备可以适于执行至少一个计算机程序,诸如适于执行或支持根据本发明的方法的一个或多个或甚至所有方法步骤的至少一个计算机程序。作为示例,可以实现一种或多种算法,通过使用传感器信号作为输入变量,该算法可以确定对象的位置。
175.评估设备可以连接到或可以包括至少一个其它数据处理设备,该数据处理设备可以用于信息(诸如由光学传感器和/或由评估设备获得的信息)的显示、可视化、分析、分发、通信或进一步处理中的一种或多种。作为示例,数据处理设备可以连接到或结合显示器、投影仪、监视器、lcd、tft、扬声器、多声道声音系统、led图案或其它可视化设备中的至少一个。它可以进一步连接到或结合能够使用电子邮件、文本消息、电话、蓝牙、wi

fi、红外或互联网接口、端口或连接中的一种或多种发送加密或未加密的信息的通信设备或通信接口、连接器或端口中的至少一个。它可以进一步连接到或结合处理器、图形处理器、cpu、开放式多媒体应用平台(omap
tm
)、集成电路、片上系统(诸如来自apple a系列或samsung s3c2系列的产品)、微控制器或微处理器、一个或多个存储块(诸如rom、ram、eeprom或闪存)、定时源(诸如振荡器或锁相环)、计数器定时器、实时定时器或加电重置发生器、电压调节器、电源管理电路、或dma控制器中的至少一个。各个单元可以进一步通过诸如amba总线的总线进行连接,或者集成在物联网或工业4.0型网络中。
176.评估设备和/或数据处理设备可通过其它外部接口或端口连接,或者具有其它外部接口或端口,这些外部接口或端口例如为如下项中的一者或多者:串行或并行接口或端口、usb、centronics端口、firewire、hdmi、以太网、蓝牙、rfid、wi

fi、usart或spi、或模拟接口或端口(例如adc或dac中的一个或多个)、或标准化接口或端口,用于连接到其它设备,例如使用诸如cameralink之类的rgb接口的2d相机设备。评估设备和/或数据处理设备可进一步通过处理器间接口或端口、fpga

fpga接口,或串行或并行接口端口中的一者或多者实现连接。评估设备和数据处理设备可进一步连接到光盘驱动器、cd

rw驱动器、dvd rw驱动器、闪存驱动器、存储卡、磁盘驱动器、硬盘驱动器、固态盘或固态硬盘中的一者或多者。
177.评估设备和/或数据处理设备可通过一个或多个其它外部连接器实现连接,或者具有一个或多个其它外部连接器,所述一个或多个其它外部连接器例如为电话连接器、rca连接器、vga连接器、雌雄同体连接器、usb连接器、hdmi连接器、8p8c连接器、bcn连接器、iec 60320c14连接器、光纤连接器、d超小型连接器、rf连接器、同轴连接器、scart连接器、xlr连接器中的一者或多者,和/或可以包含用于这些连接器中的一者或多者的至少一个合适的插座。
178.包含一个或多个根据本发明的检测器、评估设备或数据处理设备(例如包含光学传感器、光学系统、评估设备、通信设备、数据处理设备、接口、片上系统、显示设备或其它电子设备中的一者或多者)的单个设备的可能的实施例是:移动电话、个人计算机、平板pc、电视机、游戏机或其它娱乐设备。在进一步的实施例中,将在下面更详细描述的3d相机功能可以被集成在可用于传统2d数字相机的设备中,而在该设备的壳体或外观上没有显著的差异,其中对于用户而言的显著差异可以仅是获得和/或处理3d信息的功能。此外,根据本发明的设备可用于360
°
数字相机或环视相机。
179.具体而言,包含检测器和/或其一部分(例如评估设备和/或数据处理设备)的实施例可以是:移动电话,其包含显示设备、数据处理设备、光学传感器、可选的传感器光学器件、以及评估设备,以用于3d相机的功能。根据本发明的检测器具体地可以适用于在娱乐设
备和/或诸如移动电话的通信设备中集成。
180.本发明的另一实施例可以是检测器或其部分(例如评估设备和/或数据处理设备)在用于汽车、用于自主驾驶或用于轿车安全系统(例如戴姆勒的智能驱动系统)的设备中的合并,其中,作为示例,包含光学传感器、可选地一个或多个光学系统、评估设备、可选地通信设备、可选地数据处理设备、可选地一个或多个接口、可选地芯片上系统、可选地一个或多个显示器设备,或可选地其它电子设备中的一者或多者的设备可以是车辆、轿车、卡车、火车、自行车、飞机、船舶、摩托车的一部分。在汽车应用中,将该设备集成到汽车设计中需要对光学传感器、可选地光学器件或处于从外部或内部的最小可见度的设备的集成。检测器或其一部分(例如评估设备和/或数据处理设备)可以尤其适合于到汽车设计中的这样的集成。
181.如本文中所使用的,术语“光”通常是指在可见光谱范围、紫外光谱范围和红外光谱范围中的一者或多者中的电磁辐射。其中,术语“可见光谱范围”通常是指380nm到780nm的光谱范围。术语“红外光谱范围”通常是指在780nm到1mm的范围内,优选地在780nm到3.0微米的范围内的电磁辐射。术语“紫外光谱范围”通常是指在1nm到380nm的范围内,优选地在100nm到380nm的范围内的电磁辐射。优选地,本发明中使用的光是可见光,即在可见光谱范围内的光。
182.术语“光束”通常可以指被发射和/或反射到特定方向中的光的量。因此,光束可以是在垂直于光束传播方向的方向上具有预定扩展的光线束。优选地,光束可以是或可以包括可通过一个或多个高斯束参数来表征的一个或多个高斯光束(诸如高斯光束的线性组合),该一个或多个高斯束参数例如为束腰、瑞利长度、或任何其它光束参数、或适于表征光束直径和/或光束在空间中的传播的发展的光束参数的组合中的一者或多者。
183.根据本发明的检测器可以进一步与一个或多个其它类型的传感器或检测器组合。因此,该检测器可以进一步包括至少一个附加的检测器。该至少一个附加的检测器可以适于检测至少一个参数,例如以下项中的至少一项:周围环境的参数,例如周围环境的温度和/或亮度;关于检测器的位置和/或取向的参数;指定待检测的对象的状态的参数,例如对象的位置,例如对象的绝对位置和/或对象在空间中的取向。因此,一般而言,本发明的原理可以与其它测量原理结合,以便获得附加的信息,和/或以便验证测量结果或减少测量误差或噪声。
184.人机界面可以包括多个信标设备,这些信标设备适于为直接地或间接地附接到用户和由用户握持中的至少一种。因此,信标设备可以分别通过任何合适的手段(例如通过适当的固定设备)独立地附接到用户。附加地或替代地,用户可在他的或她的手中和/或通过在身体部位上穿戴至少一个信标设备和/或包含信标设备的衣服来握持和/或携带至少一个信标设备或信标设备中的一个或多个。
185.信标设备通常可以是可由至少一个检测器检测到和/或便于被至少一个检测器检测到的任意设备。因此,如上面描述或将在下面更详细描述的,信标设备可以是适于生成将由检测器检测的至少一个光束的有源信标设备,例如通过具有用于生成至少一个光束的一个或多个照射源。附加地或替代地,该信标设备可以完全或部分地被设计为无源信标设备,例如通过提供适于反射由单独的照射源生成的光束的一个或多个反射元件。所述至少一个信标设备可以以直接或间接的方式永久地或暂时地附接到用户和/或可以由用户携带或握
持。可以通过使用一个或多个附接设备和/或由用户自己,例如通过用户手持所述至少一个信标设备和/或通过用户穿戴信标设备,来实现所述附接。
186.附加地或替代地,信标设备可以是附接到对象以及集成到用户握持的对象中的至少一种,就本发明而言,这应当被包括到用户握持信标设备的选项的含义中。因此,如下面更详细描述的,信标设备可以附接到或集成到控制元件中,该控制元件可以是人机界面的一部分,并且可以由用户握持或携带,其取向可以由检测器设备来识别。因此,一般而言,本发明还涉及一种检测器系统,其包括至少一个根据本发明的检测器设备,并且可以进一步包括至少一个对象,其中信标设备是附接到对象、由对象握持以及集成到对象中的一种。作为示例,该对象优选地可以形成控制元件,该控制元件的取向可以被用户识别。因此,如上面描述或在下面进一步描述的,检测器系统可以是人机界面的一部分。作为示例,用户可以以特定方式操作控制元件,以便将一项或多项信息发送到机器,例如以便将一个或多个命令发送到机器。
187.替代地,可以以其它方式使用检测器系统。因此,作为示例,检测器系统的对象可以不同于用户或用户的身体部位,并且作为示例,可以是独立于用户移动的对象。作为示例,检测器系统可用于控制设备和/或工业过程,诸如制造过程和/或机器人过程。因此,作为示例,对象可以是机器和/或机器部件,诸如机器人手臂,其取向可以通过使用检测器系统来检测。
188.人机界面可以适于使得检测器设备生成关于用户或用户的至少一个身体部位的位置的至少一项信息。具体而言,在已知至少一个信标设备到用户的附接的方式的情况下,通过评估至少一个信标设备的位置,可以获得关于用户或用户的身体部位的位置和/或取向的至少一项信息。
189.信标设备优选地为可附接到用户的身体或身体部位的信标设备和可由用户握持的信标设备中的一者。如上所述,信标设备可以完全或部分地被设计为有源信标设备。因此,信标设备可以包括至少一个照射源,其适于产生至少一个将被传输到检测器的光束,优选地为至少一个具有已知光束特性的光束。附加地或替代地,信标设备可以包括至少一个发射器,其适于反射由照射源产生的光,由此产生将被传输到检测器的反射光束。
190.可以形成检测器系统的一部分的对象通常可以具有任意的形状。优选地,如上所述,作为检测器系统的一部分的对象可以是可由用户(例如手动地)操作的控制元件。作为示例,控制元件可以是或可以包括从由以下项构成的组中选择的至少一个元件:手套、外套、帽子、鞋、裤子和套装、可用手握住的手杖、球棒、球杆、球拍、拐杖、玩具(例如玩具枪)。因此,作为示例,检测器系统可以是人机界面和/或娱乐设备的一部分。
191.如本文中所使用的,娱乐设备是可以用于一个或多个用户(在下文中也被称为一个或多个玩家)的休闲和/或娱乐目的的设备。作为示例,娱乐设备可以用于游戏的目的,优选地用于计算机游戏的目的。因此,娱乐设备可以被实现为计算机、计算机网络或计算机系统,或者可以包括运行一个或多个游戏软件程序的计算机、计算机网络或计算机系统。
192.娱乐设备包括至少一个根据本发明(例如根据上面公开的实施例中的一个或多个和/或根据下面公开的实施例中的一个或多个)的人机界面。娱乐设备被设计为允许由玩家借助人机界面输入至少一项信息。该至少一项信息可以被传输到娱乐设备的控制器和/或计算机,和/或可以由娱乐设备的控制器和/或计算机使用。该至少一项信息优选地可以包
括适于影响游戏过程的至少一个命令。因此,作为示例,该至少一项信息可以包括与玩家和/或玩家的一个或多个身体部位的至少一个取向有关的至少一项信息,由此允许玩家模拟游戏所需的特定位置和/或取向和/或动作。作为示例,可以模拟以下移动中的一者或多者并且将其传达到娱乐设备的控制器和/或计算机:跳舞;跑步;跳跃;挥动球拍;挥动球棒;挥动球杆;将对象指向另一对象,例如将玩具枪指向目标。
193.作为一部分或整体的娱乐设备,优选地娱乐设备的控制器和/或计算机,被设计为根据信息改变娱乐功能。因此,如上所述,可以根据至少一项信息而影响游戏过程。因此,娱乐设备可以包括一个或多个控制器,该一个或多个控制器可以从至少一个检测器的评估设备分开和/或可以与至少一个评估设备完全或部分地相同,或者甚至可以包括至少一个评估设备。优选地,至少一个控制器可以包括一个或多个数据处理设备,例如一个或多个计算机和/或微控制器。
194.如本文进一步使用的,跟踪系统是适于收集与至少一个对象和/或关于该对象的至少一部分的一系列过去的位置有关的信息的设备。另外,跟踪系统可以适于提供与至少一个对象或该对象的至少一个部分的至少一个预测的未来位置和/或取向有关的信息。跟踪系统可以具有至少一个跟踪控制器,该至少一个跟踪控制器可以完全或部分地体现为电子设备,优选地体现为至少一个数据处理设备,更优选地体现为至少一个计算机或微控制器。此外,该至少一个跟踪控制器可以完全或部分地包括至少一个评估设备和/或可以是至少一个评估设备的一部分和/或可以与至少一个评估设备完全或部分地相同。
195.跟踪系统包括至少一个根据本发明的检测器,例如至少一个在上面列出的一个或多个实施例中公开的和/或在下面的一个或多个实施例中公开的检测器。跟踪系统进一步包括至少一个跟踪控制器。该跟踪控制器适于跟踪对象在特定时间点处的一系列位置,例如通过记录多组数据或数据对,每组数据或数据对包括至少一个位置信息和至少一个时间信息。
196.跟踪系统可以进一步包括至少一个根据本发明的检测器系统。因此,除了至少一个检测器和至少一个评估设备以及可选的至少一个信标设备之外,跟踪系统可以进一步包括对象本身或对象的一部分,例如至少一个控制元件,该至少一个控制元件包括信标设备或至少一个信标设备,其中控制元件直接或间接地附接到或集成到待跟踪的对象中。
197.跟踪系统可以适于发起跟踪系统本身和/或一个或多个单独设备的一个或多个动作。为了后一目的,跟踪系统,优选地跟踪控制器,可以具有用于发起至少一个动作的一个或多个无线和/或有线接口和/或其它类型的控制连接。优选地,至少一个跟踪控制器可以适于根据对象的至少一个实际位置来发起至少一个动作。作为示例,该动作可以从由以下项构成的组中选择:对对象的未来位置的预测;将至少一个设备指向对象;将至少一个设备指向检测器;照射对象;照射检测器。
198.作为跟踪系统的应用的示例,跟踪系统可以用于连续地将至少一个第一对象指向至少一个第二对象,即使第一对象和/或第二对象可能移动。另外,潜在的示例可以在工业应用中(例如在机器人技术中)找到,和/或用于连续地工作在物品上,即使该物品在移动,例如在制造线或装配线中的制造期间。附加地或替代地,跟踪系统可被用于照射目的,例如用于通过连续地将照射源指向对象而持续照射对象,即使对象可能正在移动。其它应用可以在通信系统中找到,例如以便通过将发送器指向移动的对象来持续向移动的对象发送信
息。
199.总的来说,在本发明的上下文中,以下实施例被认为是优选的:
200.实施例1:一种用于确定至少一个对象的位置的检测器,所述检测器包括:
201.‑
至少一个传感器元件,其具有光学传感器的矩阵,每个所述光学传感器具有光敏区域,其中,所述传感器元件被配置为确定所述对象的至少一个反射图像;
202.‑
至少一个评估设备,其中,所述评估设备被配置为选择所述反射图像的至少一个反射特征,其中,所述评估设备被配置为通过优化至少一个模糊函数f
a
来确定所述反射图像的所选反射特征的至少一个距离估计,其中,所述距离估计由纵坐标z和误差区间
±
ε给出,
203.其中,所述评估设备适于确定至少一个参考图像中的与所述距离估计对应的至少一个位移区域,其中,所述评估设备适于将所选反射特征与所述位移区域内的至少一个参考特征匹配。
204.实施例2:根据前述实施例所述的检测器,其中,通过使用诸如离焦深度算法的至少一种基于卷积的算法来确定所述距离估计。
205.实施例3.:根据前述实施例中任一项所述的检测器,其中,通过改变所述至少一个模糊函数的参数来优化所述模糊函数。
206.实施例4:根据前述实施例所述的检测器,其中,所述反射图像是模糊图像i
b
,其中,所述评估设备被配置为根据所述模糊图像i
b
和所述模糊函数f
a
来重建所述纵坐标z。
207.实施例5:根据前述实施例所述的检测器,其中,通过改变所述模糊函数的参数σ来最小化所述模糊图像i
b
与所述模糊函数f
a
和至少一个其它图像i’b
的卷积之间的差,从而确定所述纵坐标z,
208.min||(i

b
*fa(σ(z))

i
b
)||。
209.实施例6:根据前述实施例所述的检测器(110),其中,所述其它图像是模糊图像或清晰图像。
210.实施例7:根据前述实施例中任一项所述的检测器,其中,所述至少一个模糊函数f
a
是由来自包括以下项的组的至少一个函数构成的函数或复合函数:高斯函数,正弦函数,抛物柱面函数,平方函数,洛伦兹函数,径向函数,多项式,hermite多项式,zernike多项式,legendre多项式。
211.实施例8:根据前述实施例中任一项所述的检测器,其中,所述评估设备适于确定所匹配的参考特征与所选反射特征的位移,其中,所述评估设备适于使用纵坐标与所述位移之间的预定关系来确定所述所匹配的特征的纵向信息。
212.实施例9:根据前述实施例中任一项所述的检测器,其中,所述参考图像和所述反射图像是在具有固定距离的不同空间位置处确定的所述对象的图像,其中,所述评估设备适于确定所述参考图像中的对极线,其中,所述位移区域沿着所述对极线延伸,其中,所述评估设备适于确定沿着所述对极线与所述纵坐标z对应的所述参考特征,以及确定所述位移区域沿着所述对极线与所述误差区间
±
ε对应的范围。
213.实施例10:根据前述实施例所述的检测器,其中,所述评估设备被配置为执行以下步骤:
214.‑
针对每个反射特征的图像位置确定所述位移区域;
215.‑
诸如通过分配最靠近所述位移区域的和/或在所述位移区域内的和/或沿着与所述对极线正交的方向最靠近所述位移区域的对极线,向每个反射特征的所述位移区域分配对极线;
216.‑
诸如通过分配最靠近所分配的位移区域的和/或在所述所分配的位移区域内的和/或沿着所述所分配的对极线最靠近所述所分配的位移区域的和/或沿着所述所分配的对极线在所述所分配的位移区域内的参考特征,向每个反射特征分配和/或确定至少一个参考特征。
217.实施例11:根据前述实施例中任一项所述的检测器,其中,所述评估设备适于通过使用考虑所确定的纵坐标z的至少一个评估算法将所述反射图像的所选特征与所述位移区域内的所述参考特征进行匹配,其中,所述评估算法是线性缩放算法。
218.实施例12:根据前述实施例中任一项所述的检测器,其中,所述检测器包括至少一个照射源,其中,所述照射源适于生成用于照射所述对象的至少一个照射图案,其中,所述照射图案包括选自包括以下项的组的至少一个图案:至少一个点图案,特别是伪随机点图案;随机点图案或准随机图案;至少一个sobol图案;至少一个准周期图案;包括至少一个已知特征的至少一个图案;至少一个规则图案;至少一个三角形图案;至少一个六边形图案;至少一个矩形图案;包括凸出的均匀镶嵌图案的至少一个图案;包括至少一条线的至少一个线图案;包括诸如平行线或交叉线的至少两条线的至少一个线图案。
219.实施例13:根据前述实施例所述的检测器,其中,所述照射图案包括至少一个六边形图案,其中,所述图案相对于基线旋转,和/或其中,所述六边形图案是至少一个位移的六边形图案,其中,所述六边形图案的各个点距规则位置被位移了随机距离。
220.实施例14:根据前述两项实施例中任一项所述的检测器,其中,所述传感器元件适于确定至少一个反射图案,其中,所述评估设备适于选择所述反射图案的至少一个特征,以及通过优化所述至少一个模糊函数f
a
来确定所述反射图案的所选特征的所述距离估计。
221.实施例15:根据前述实施例所述的检测器,其中,所述参考图像是所述照射图案在所述照射源的位置处的图像平面处的图像,其中,所述评估设备适于确定所述参考图像中的与所述反射图案的所选特征的所述距离估计对应的所述位移区域,其中,所述评估设备适于将所述反射图案的所选特征与所述位移区域内的所述参考图案的至少一个特征匹配。
222.实施例16:根据前述实施例中任一项所述的检测器,其中,所述检测器包括至少两个传感器元件,每个传感器元件具有光学传感器的矩阵,其中,至少一个第一传感器元件和至少一个第二传感器元件位于不同的空间位置处,其中,所述评估设备适于选择由所述第一传感器元件或所述第二传感器元件确定的至少一个图像作为反射图像,并且选择由所述第一传感器元件或所述第二传感器元件中的另一个传感器元件确定的至少一个图像作为参考图像。
223.实施例17:一种用于确定至少一个对象的位置的检测器系统,所述检测器系统包括至少一个根据前述实施例中任一项所述的检测器,所述检测器系统还包括适于将至少一个光束朝向所述检测器引导的至少一个信标设备,其中,所述信标设备是以下中的至少一种:可附接到所述对象,可由所述对象握持,以及可集成到所述对象。
224.实施例18:一种用于在用户与机器之间交换至少一项信息的人机界面,其中,所述人机界面包括至少一个根据前述实施例所述的检测器系统,其中,所述至少一个信标设备
适于是以下中的至少一种:直接或间接附接到所述用户以及由所述用户握持,其中,所述人机界面被设计为借助于所述检测器系统来确定所述用户的至少一个位置,其中,所述人机界面被设计为向所述位置分配至少一项信息。
225.实施例19:一种用于执行至少一个娱乐功能的娱乐设备,其中,所述娱乐设备包括至少一个根据前述实施例所述的人机界面,其中,所述娱乐设备被设计为使玩家能够借助于所述人机界面输入至少一项信息,其中,所述娱乐设备被设计为根据所述信息改变所述娱乐功能。
226.实施例20:一种用于跟踪至少一个可移动对象的位置的跟踪系统,所述跟踪系统包括至少一个根据涉及检测器系统的前述实施例中任一项所述的检测器系统,所述跟踪系统还包括至少一个跟踪控制器,其中,所述跟踪控制器适于跟踪所述对象在特定时间点的一系列位置。
227.实施例21:一种用于确定场景的深度轮廓的扫描系统,所述扫描系统包括至少一个根据涉及检测器的前述实施例中任一项所述的检测器,所述扫描系统还包括适于用至少一个光束扫描所述场景的至少一个照射源。
228.实施例22:一种用于对至少一个对象成像的相机,所述相机包括至少一个根据涉及检测器的前述实施例中任一项所述的检测器。
229.实施例23:一种用于通过使用至少一个根据涉及检测器的前述实施例中任一项所述的检测器来确定至少一个对象的位置的方法,所述方法包括以下步骤:
230.‑
通过使用具有光学传感器的矩阵的至少一个传感器元件来确定所述对象的至少一个反射图像,每个所述光学传感器具有光敏区域;
231.‑
通过使用至少一个评估设备来选择所述反射图像的至少一个反射特征;
232.‑
通过优化至少一个模糊函数f
a
来确定所述反射图像的所选反射特征的至少一个距离估计,其中,所述距离估计由纵坐标z和误差区间
±
ε给出;
233.‑
确定至少一个参考图像中的与所述距离估计对应的至少一个位移区域;
234.‑
将所选反射特征与所述位移区域内的至少一个参考特征匹配。
235.实施例24:根据涉及检测器的前述实施例中任一项所述的检测器的用于使用目的的用途,选自:交通技术中的位置测量;娱乐应用;安全性应用;监督应用;安全应用;人机界面应用;物流应用;跟踪应用;户外应用;移动应用;通信应用;摄影应用;机器视觉应用;机器人应用;质量控制应用;制造应用。
附图说明
236.通过结合从属权利要求的以下优选示例性实施例的描述,本发明的其它可选细节和特征是显而易见的。在该上下文中,可以以孤立的方式或与其它特征组合地实现特定特征。本发明不限于示例性实施例。在附图中示意性地示出了示例性实施例。在各个附图中,相同的附图标记指代相同的元件或具有相同功能的元件,或者关于其功能彼此对应的元件。
237.具体地,在附图中:
238.图1示出根据本发明的检测器的第一实施例;
239.图2示出根据本发明的检测器的另一个实施例。
240.图3示出检测器系统、相机、娱乐设备、跟踪系统的实施例;
241.图4a至4c示出六边形照射图案的三个实施例;以及
242.图5示出扫描系统的实施例。
具体实施方式
243.图1以高度示意性的方式示出用于确定至少一个对象112的位置的检测器110的第一实施例。检测器110包括具有光学传感器120的矩阵118的至少一个传感器元件116。光学传感器120每个都具有光敏区域122。
244.传感器元件116可以形成为单一的单个设备或多个设备的组合。矩阵118具体地可以是或可以包括具有一行或多行和一列或多列的矩形矩阵。行和列具体地可以以矩形方式布置。然而,其它布置也是可行的,诸如非矩形布置。作为示例,圆形布置也是可行的,其中元件围绕中心点布置成同心圆或椭圆。例如,矩阵118可以是单行像素。其它布置也是可行的。
245.矩阵118的光学传感器120具体地可以在大小、灵敏度和其它光学、电学和机械特性中的一个或多个方面相等。矩阵118的所有光学传感器120的光敏区域122具体地可以位于公共平面中,公共平面优选地面向对象112,使得从对象传播到检测器110的光束可以在公共平面上生成光斑。光敏区域122可以具体地位于相应光学传感器120的表面上。然而,其它实施例也是可行的。光学传感器120可以包括例如至少一个ccd和/或cmos设备。作为示例,光学传感器120可以是像素化光学设备的一部分或构成像素化光学设备。作为示例,光学传感器120可以是具有像素矩阵的至少一个ccd和/或cmos设备的一部分或构成至少一个ccd和/或cmos设备,每个像素形成光敏区域122。
246.光学传感器120具体地可以是或可以包括光电检测器(photodetector),优选地无机光电检测器,更优选地无机半导体光电检测器,最优选地硅光电检测器。具体地,光学传感器120可以在红外光谱范围内敏感。矩阵118的所有光学传感器120或矩阵118的至少一组光学传感器120具体地可以是相同的。矩阵118的相同光学传感器120的组可以具体地被提供用于不同的光谱范围,或者所有光学传感器在光谱灵敏度方面可以是相同的。此外,光学传感器120在大小上和/或关于它们的电子或光电特性可以是相同的。矩阵118可以由独立的光学传感器120组成。因此,可以组成无机光电二极管的矩阵118。然而,可替代地,可以使用可商购矩阵,诸如ccd检测器(诸如ccd检测器芯片)和/或cmos检测器(诸如cmos检测器芯片)中的一个或多个。
247.光学传感器120可以形成传感器阵列或者可以是传感器阵列的一部分,诸如上述矩阵。因此,作为示例,检测器110可以包括光学传感器120的阵列,诸如具有m行和n列的矩形阵列,其中m、n独立地为正整数。优选地,给出多于一列和多于一行,即n>1,m>1。因此,作为示例,n可以是2到16或更高,并且m可以是2到16或更高。优选地,行数与列数的比率接近1。作为示例,可以选择n和m使得0.3≤m/n≤3,诸如通过选择m/n=1:1,4:3,16:9或类似。作为示例,该阵列可以是具有相等行数和列数的正方形阵列,诸如通过选择m=2,n=2或m=3,n=3等。
248.矩阵118具体地可以为具有至少一行、优选为多行和多列的矩形矩阵。作为示例,行和列可以基本上垂直取向。为了提供广泛的视野,矩阵118具体地可以具有至少10行,优
选地至少50行,更优选地至少100行。类似地,矩阵可以具有至少10列,优选地至少50列,更优选地至少100列。矩阵118可以包括至少50个光学传感器120,优选地至少100个光学传感器120,更优选地至少500个光学传感器120。矩阵118可以包括数百万像素范围内的多个像素。然而,其它实施例是可行的。
249.在图1中所示的实施例中,检测器110进一步包括照射源124。作为示例,照射源124可以被配置为生成用于照射对象112的照射光束。检测器110可以被配置为使得照射光束从检测器110沿着检测器110的光轴朝向对象112传播。为此,检测器110可以包括至少一个反射元件,优选地至少一个棱镜,用于偏转到光轴上的照射光束。
250.照射源124可以适于生成用于对象112的照射的至少一种照射图案。具体地,照射源124可以包括至少一个激光器和/或激光源。可以采用各种类型的激光器,诸如半导体激光器。另外地或可替代地,可以使用非激光光源,诸如led和/或灯泡。图案可以包括多个特征。该图案可以包括周期性或非周期性特征的排列。照射图案可以包括选自包括以下项的组的至少一种图案:至少一种点图案,特别是伪随机点图案;包括至少一个已知特征的至少一种图案。例如,照射源124可以适于生成和/或投影点云。照射源124可以包括如下中的一个或多个:至少一个光投影仪;至少一个数字光处理投影仪、至少一个lcos投影仪、至少一个空间光调制器;至少一个衍射光学元件;至少一个发光二极管阵列;至少一个激光光源阵列。照射源124可包括适于直接生成照射图案的至少一个光源。照射源124可以包括至少一个光投影仪,该至少一个光投影仪适于生成点云,使得照射图案可以包括多个点图案。照射源124可以包括至少一个掩模,该掩模适于从由照射源124生成的至少一个光束生成照射图案。
251.在图1中所示的实施例中,照射源124可以用照射图案照射至少一个对象112。照射图案可以包括多个点作为图像特征。这些点被示为从照射源124发出的光束115。
252.每个光学传感器120被设计为响应于由从对象112传播到检测器110的反射光束对其相应的光敏区域122的照射而生成至少一个传感器信号。
253.此外,传感器元件116被配置为确定至少一个反射图像126。矩阵118可以包括反射图像126。例如,反射图像126可以包括作为反射特征的点。这些点可以由源自至少一个对象112的反射光束125产生。照射光束和反射光束125的交叉(crossing)131对应于至少一个对象112的可能位置114。
254.检测器110可以包括至少一个传递设备127,该传递设备127包括以下中的一种或多种:至少一个透镜,例如选自包括以下项的组的至少一个透镜:至少一个聚焦可调透镜、至少一个非球面透镜、至少一个球面透镜、至少一个菲涅耳透镜;至少一个衍射光学元件;至少一个凹面镜;至少一个光束偏转元件,优选地至少一个反射镜;至少一个分束元件,优选地分束立方体或分束镜中的至少一种;至少一个多透镜系统。特别地,传递设备127可以包括至少一个准直透镜,该准直透镜适于将至少一个对象点聚焦在图像平面中。
255.检测器110包括至少一个评估设备128。评估设备128被配置为选择反射图像126的至少一个反射特征,例如所选反射特征129。评估设备128可以适于执行至少一种图像分析和/或图像处理,以便识别反射特征。图像分析和/或图像处理可以使用至少一种特征检测算法。图像分析和/或图像处理可以包括以下一项或多项:滤波;选择至少一个关注区域;由传感器信号产生的图像与至少一个偏移之间形成差异图像;通过反转由传感器信号产生的
图像来反转传感器信号;在不同时间由传感器信号产生的图像之间形成差异图像;背景校正;分解成颜色通道;分解成色调;饱和;以及亮度通道;频率分解;奇异值分解;应用canny边缘检测器;应用高斯滤波器的拉普拉斯算子;应用差分高斯滤波器;应用sobel算子;应用拉普拉斯算子;应用scharr算子;应用prewitt算子;应用roberts算子;应用kirsch算子;应用高通滤波器;应用blob分析;应用边缘滤波器;应用低通滤波器;应用傅立叶变换;应用radon变换;应用霍夫变换;应用小波变换;阈值转换法;创建二进制图像。关注区域可以由用户手动确定或可以自动确定,诸如通过识别由光学传感器生成的图像内的对象。
256.如果所选的反射特征129与对应的参考特征匹配,则对应的光束被匹配并且可以计算对象112的距离。对于所选的反射特征129和对应的反射光束,在确定距离估计之后,可以减少对应的照射光束的数量,并且从而减少对应的参考特征112的数量。
257.评估设备128被配置为通过优化至少一个模糊函数f
a
来确定反射图像126的所选反射特征129的至少一个距离估计130,其中距离估计130由纵坐标z和误差区间
±
ε给出。误差ε可以取决于光学传感器120(具体地是传感器元件116)的测量不确定度。光学传感器120的测量不确定度可以预先确定和/或估计和/或可以存储在评估设备128的至少一个数据存储单元中。例如,误差区间可以是
±
10%,优选地
±
5%,更优选地
±
1%。距离估计的确定可以产生具有通常大于三角测量方法的误差条的误差条的距离估计。距离估计可以通过使用至少一种基于卷积的算法(诸如离焦深度算法)来确定。为了获得距反射特征的距离,离焦深度算法估计对象112的离焦。对于该估计,假设模糊函数。具体地,模糊函数对离焦对象112的模糊进行建模。至少一个模糊函数f
a
可以是由来自以下项组成的组中的至少一个函数组成的函数或复合函数:高斯函数、正弦函数、抛物柱面函数、平方函数、洛伦兹函数、径向函数、多项式、hermite多项式、zernike多项式、legendre多项式。
258.传感器元件116可以适于确定至少一种反射图案。反射图案可包括与照射图案的至少一个特征对应的至少一个特征。与照射图案相比,反射图案可以包括至少一种失真图案,其中,失真取决于对象的距离,诸如对象的表面特性。评估设备128可以适于选择反射图案的至少一个特征并且通过优化至少一个模糊函数f
a
来确定反射图案的所选特征的距离估计。
259.可以通过改变至少一个模糊函数的参数来优化模糊函数。反射图像126可以是模糊图像i
b
。评估设备128可以被配置为根据模糊图像i
b
和模糊函数f
a
重建纵坐标z。可以通过改变模糊函数的参数σ来最小化模糊图像i
b
和模糊函数f
a
与至少一个其它图像i’b
的卷积(*)之间的差从而确定纵坐标z,
260.min||(i

b
*fa(σ(z))

i
b
)||。
261.σ(z)是一组距离相关的模糊参数。另一图像可能模糊或清晰。因此,离焦深度算法可用于获得反射特征的距离估计。该距离估计130可用于有效地选择其中选择对极线的区域。然后可以使用三角测量和所选的对极线来计算距离。与大多数三角测量方法相反,距离估计130的确定可以应用于反射图像的单个特征。因此,距离估计的确定可用于通过产生解决对应关系问题的较小区域来加速三角测量方法。
262.距离估计130的确定可以电子地执行或者可以完全或部分地由软件执行。反射图像的反射特征的确定可以完全或部分地以电子方式或完全或部分地通过使用一种或多种软件算法来执行。具体地,评估设备128可以包括用于确定反射特征的至少一个图像分析设
备160。图像分析设备160具体地可以完全或部分地体现在软件中和/或可以完全或部分地体现在硬件中。图像分析设备160可以完全或部分地集成到至少一个传感器元件116中和/或可以完全或部分地独立于传感器元件116体现。
263.评估设备128适于在至少一个参考图像134中确定与距离估计130对应的至少一个位移区域132。参考图像134和反射图像126可以是在不同空间位置处(具体地具有固定距离b,也称为基线)确定的对象112的图像。评估设备128可以适于确定参考图像134中的对极线136。参考图像134和反射图像126的相对位置可以是已知的。例如,参考图像134和反射图像126的相对位置可以存储在评估设备128的至少一个存储单元内。评估设备128可以适于确定从反射图像126的所选反射特征129延伸的直线138。直线138可以包括可能的对象位置114。直线138和基线b跨越(span)对极面140。因为在与反射图像不同的相对位置处确定参考图像134,因此对应的参考特征可以成像在参考图像134中的对极线136上。
264.例如,在图1中所示的实施例中,参考图像134可以是照射图案在照射源124的位置处的图像平面处的图像。评估设备128可以适于确定在参考图像134中与反射图案的所选特征129的距离估计130对应的位移区域132。评估设备128可适于将反射图案的所选特征129与位移区域132内的参考图案的至少一个特征匹配。照射源124和传感器元件116可分开固定距离。
265.位移区域132可以沿着对极线136延伸。评估设备128可以适于确定沿着对极线136与纵坐标z对应的参考特征并且确定沿着对极线136与误差区间
±
ε对应的位移区域132的范围。评估设备128适于将所选反射特征129与位移区域132内的至少一个参考特征匹配。评估设备128可适于通过使用考虑所确定的纵坐标z的至少一种评估算法,将反射图像的所选特征与位移区域132内的参考特征匹配。评估算法可以是线性缩放(scaling)算法。
266.评估设备128可适于确定匹配的参考特征和所选反射特征129的位移。评估设备128可适于使用纵坐标与位移之间的预定关系来确定匹配特征的纵向信息。例如,纵向信息可以是距离值。评估设备128可以适于通过使用三角测量方法来确定预定关系。在反射图像126中的所选反射特征129的位置和匹配的参考特征的位置和/或所选反射特征和匹配的参考特征的相对位移已知的情况下,对应的对象特征114的纵坐标可以通过三角测量来确定。因此,评估设备128可以适于选择例如后续和/或逐列的反射特征并且使用三角测量针对参考特征的每个潜在位置确定对应的距离值。例如,图1示出导致反射图像126中的反射特征并且与参考图像134中的参考特征对应的可能的投影线。另外,这些线的交点被示出为对应于对象位置。位移和对应的距离值可以存储在评估设备的至少一个存储设备中。作为示例,评估设备128可以包括至少一种数据处理设备,诸如至少一种处理器、至少一种dsp、至少一种fpga和/或至少一种asic。此外,为了存储纵坐标z与位移之间的至少一种预定的或可确定的关系,可以提供至少一个数据存储设备,诸如用于提供用于存储预定义关系的一个或多个查找表。
267.在图2中,示出了检测器110的实施例,其中检测器110可以包括至少两个传感器元件116,每个传感器元件116具有光学传感器120的矩阵118。至少一个第一传感器元件142和至少一个第二传感器元件144可以位于不同的空间位置。第一感测元件142与第二感测元件144之间的相对距离b可以是固定的。至少一个第一传感器元件142可以适于确定至少一个第一反射图案并且至少一个第二传感器元件144可以适于确定至少一个第二反射图案。评
估设备128可以适于选择由第一传感器元件142或第二传感器元件144确定的至少一个图像作为反射图像126并且选择由第一传感器元件142或第二传感器元件144中的另一个传感器元件确定的至少一个图像作为参考图像134。在图2中,如关于图1概述,第一传感器元件142的图像被选择作为反射图像126,而第二传感器元件144的图像被选择作为参考图像134。评估设备128可以适于选择反射图案中的至少一个反射特征并确定所选特征的距离估计130。评估设备128可适于确定参考图像134中与反射图案的所选特征129的距离估计130对应的位移区域132。如关于图1概述,评估设备128可适于将反射图案的所选特征129与位移区域132内的参考图案的至少一个特征匹配。
268.使用离焦深度技术可以允许估计距离,诸如误差区间内的纵坐标z。通过确定与估计的纵坐标对应的位移区域132和对应的误差区间,允许显著减少沿着对极线136的可能数量的解。解的数量甚至可以减少到一个。所选反射特征和参考特征的后续匹配可以提高准确度。纵坐标z和误差区间的确定可以在匹配所选反射特征129和参考特征之前的预评估期间执行。这可以允许减少计算需求,使得可以显著降低成本并允许在电池寿命或通风或热管理成问题的移动设备或户外设备中使用。此外,通常在三角测量系统中,基线必须很大以便检测大距离。使用组合的传感器信号对纵坐标z和误差区间进行预评估和所选反射特征129和参考特征的后续匹配可以允许使用短基线,使得可以提供紧凑的设备。此外,与三角测量系统相比,纵坐标z和误差区间的预评估以及所选反射特征和参考特征的后续匹配可以提高准确度。此外,可以使用更密集的图案以便提高进一步的分辨率或使用密度较小的图案以便增加每点的功率。
269.例如根据图2中所示的实施例,图3以高度示意性的图示示出了检测器110的示例性实施例。检测器110具体地可以体现为相机146和/或可以是相机146的一部分。相机146可以被制造用于成像,具体地用于3d成像,并且可以被制造用于获取静止图像和/或图像序列,诸如数字视频剪辑。其它实施例是可行的。图3进一步示出检测器系统148的实施例,其除了至少一个检测器110之外,还包括一个或多个信标设备150,在该示例中,该信标设备可以附接和/或集成到对象112中,其位置将通过使用检测器110来检测。图3进一步示出人机界面152的示例性实施例,其包括至少一个检测器系统148;并且进一步示出娱乐设备154,其包括人机界面152。该图进一步示出用于跟踪对象112的位置的跟踪系统156的实施例,其包括检测器系统148。设备和系统的组件将在下面进一步详细解释。
270.图3进一步示出用于扫描包括对象112的场景(诸如用于扫描对象112和/或用于确定至少一个对象112的至少一个位置)的扫描系统158的示例性实施例。扫描系统158包括至少一个检测器110,以及进一步可选地,至少一个照射源124,以及可选地,至少一个其它照射源(这里没有描述)。照射源124通常被配置为发射至少一个照射光束,诸如用于照射至少一个点,例如位于信标设备150的一个或多个位置上和/或对象112的表面上的点。扫描系统158可以被设计为生成包括对象112的场景的轮廓和/或对象112的轮廓,和/或可以被设计为通过使用至少一个检测器110生成关于至少一个点和扫描系统158(具体地是检测器110)之间的距离的至少一项信息。
271.如上概述,可以在图3的设置中使用的检测器110的示例性实施例在图2中示出。因此,除了光学传感器120之外,检测器110包括至少一个评估设备128,其具有例如至少一个图像分析设备160和/或至少一个位置评估设备162,如图3中象征性地描绘。评估设备128的
组件可以完全或部分地集成到不同的设备中和/或可以完全或部分地集成到检测器110的其它组件中。除了完全或部分组合两个或多个组件的可能性之外,光学传感器120中的一个或多个光学传感器和评估设备128的组件中的一个或多个组件可以通过一个或多个连接器164和/或通过一个或多个接口相互连接,如图3中象征性地描绘。此外,一个或多个连接器164可以包括一个或多个驱动器和/或一个或多个设备,用于修改或预处理传感器信号。此外,代替使用至少一个可选的连接器164,评估设备128可以完全或部分地集成到光学传感器120中的一个或二者和/或检测器110的壳体166中。另外地或可替代地,评估设备128可以完全或部分地设计为单独的设备。
272.在该示例性实施例中,其位置可被检测的对象112可被设计为运动器材物品和/或可形成控制元件或控制设备168,其位置可由用户170操纵。作为示例,对象112可以是或可以包括球棒、球拍、球杆或任何其它运动器材和/或假运动器材。其它类型的对象112是可能的。此外,用户170他或她自己可以被认为是对象112,其位置将被检测到。
273.如上概述,检测器110包括光学传感器120。光学传感器120可以位于壳体166内侧。此外,检测器110可以包括至少一个传递设备127,诸如一个或多个光学系统,优选地包括一个或多个透镜。优选地关于检测器110的光轴174同心定位的壳体166内侧的开口172优选地定义检测器110的观看方向176。可以定义坐标系178,其中平行于或反平行于光轴174的方向可以定义为纵向方向,而垂直于光轴174的方向可以定义为横向方向。在图3中象征性地描绘的坐标系178中,纵向方向由z表示,而横向方向分别由x和y表示。其它类型的坐标系也是可行的,诸如非笛卡尔坐标系。
274.一个或多个光束180(诸如照射图案的光束)从对象112和/或从一个或多个信标设备150传播朝向检测器110。检测器110被配置用于确定至少一个对象112的位置。在没有使用照射源124的情况下,信标设备150和/或这些信标设备150中的至少一个可以是或可以包括具有集成照射源(诸如发光二极管)的有源信标设备。可替代地,可以使用环境光源。
275.例如由照射源124(诸如至少一种照射图案)生成的光束180可以通过使用一个或多个光学元件朝向对象引导。对象112可响应于照射而生成至少一个反射光束182。关于评估的细节,可参考上述图1。
276.如上概述,通过使用检测器110确定对象112和/或其一部分的位置可用于提供人机界面152,以便向机器184提供至少一项信息。在图3中示意性描绘的实施例中,机器184可以是计算机和/或可以包括计算机。其它实施例是可行的。评估设备128甚至可以完全或部分地集成到机器184中,诸如集成到计算机中。
277.如上概述,图3还描绘了跟踪系统156的示例,其被配置用于跟踪至少一个对象112和/或其部分的位置。跟踪系统156包括检测器110和至少一个跟踪控制器186。跟踪控制器186可以适于跟踪对象112在特定时间点的一系列位置。跟踪控制器186可以是独立设备和/或可以完全或部分地集成到机器184(具体地是计算机,如图3所示)中和/或评估设备128中。
278.类似地,如上概述,人机界面152可以形成娱乐设备154的一部分。机器184(具体地是计算机)也可以形成娱乐设备154的一部分。因此,借助于用户170用作对象112和/或借助于用户170操纵作为对象112的控制设备,用户170可以将至少一项信息(诸如至少一个控制命令)输入计算机,从而改变娱乐功能,诸如控制计算机的进程。
279.图4a至4c示出六边形照射图案188的三个实施例。照射源124可适于生成用于照射对象112的至少一种照射图案。另外地或可替代地,照射图案可由至少一个环境光源生成。具体地,照射源124可以包括至少一个激光器和/或激光源。可以采用各种类型的激光器,诸如半导体激光器。另外地或可替代地,可以使用非激光光源,诸如led和/或灯泡。照射图案可以包括至少一个特征,诸如点或符号。照射图案可以包括多个特征。照射图案可以包括周期性或非周期性特征的布置。照射图案可由环境光(诸如由至少一个环境光源或由至少一个照射源)生成。照射图案可以包括选自包括以下项的组的至少一种图案:至少一种点图案,特别是伪随机点图案;随机点图案或准随机图案;至少一种sobol图案;至少一种准周期图案;包括至少一种已知特征的至少一种图案;至少一种规则图案;至少一个三角形图案;至少一个六边形图案;至少一个矩形图案;包括凸出的均匀镶嵌图案的至少一种图案;包括至少一条线的至少一个线图案;包括诸如平行线或交叉线的至少两条线的至少一个线图案。例如,照射源可以适于生成和/或投影点云。照射图案可以包括规则的和/或恒定的和/或周期性的图案,诸如三角形图案、矩形图案、六边形图案或包括其它凸出的镶嵌图案的图案。照射图案可以在每个区域包括尽可能多的特征,使得六边形图案可以是优选的。照射图案的两个特征之间的距离和/或至少一个照射特征的面积可以取决于图像中的混淆圆。
280.照射图案的照射特征可以被布置为使得仅少数参考特征位于对极线上。如图4a中所示,照射图案188可以包括至少一个六边形图案,其中各个点位于对极线190上。如图4b中所示,照射图案188可以包括至少一个六边形图案,其中该图案相对于基线旋转。照射特征的此类定位允许增加每条对极线上的各个点之间的距离。例如,如图4c中所示,照射图案188可以包括至少一个位移的六边形图案,其中六边形图案的各个点从规则位置被位移了随机距离,例如正交于该点的对极线。各个点的位移可以小于两条平行对极线之间距离的一半,优选地小于两条平行对极线之间距离的四分之一。各个点的位移可以使得两个点不会彼此位移。
281.图5示出扫描系统158的实施例。扫描系统158可以适于线扫描设备。特别地,扫描系统158可以包括至少一个传感器线或行的光学传感器120。此外,扫描系统158可以包括至少一个传递设备127和至少一个照射源124。三角测量系统需要足够的基线,但是由于近场中的基线,可能无法进行检测。如果光斑在传递设备127的方向上倾斜,则近场检测是可能的。然而,倾斜导致光斑将移出视野,这限制了远场区域中的检测。因此,在三角测量系统中,非零基线总是会导致测量范围、近场和/或远场的大幅减少。采用根据本发明的检测器110尽可能减少基线将因此总是增加测量范围。此外,这些近场和远场问题可以通过使用图5的扫描系统158来克服。扫描系统158可以适于检测从对象112传播到cmos线上的扫描系统158的多个光束182。光束182可在对象112上的不同位置处或通过对象112的运动生成。如上所述,扫描系统158可适于通过使用距离估计130确定每个光点的至少一个纵坐标。
282.参考编号列表
283.110 检测器
284.112 对象
285.114 对象位置
286.116 传感器元件
287.118 矩阵
288.120 光学传感器
289.122 光敏区域
290.124 照射光源
291.126 反射图像
292.127 传递设备
293.128 评估设备
294.129 所选反射特征
295.130 纵向区域
296.131 交叉
297.132 位移区域
298.134 参考图像
299.136 对极线
300.138 直线
301.140 对极面
302.142 第一传感器元件
303.144 第二传感器元件
304.146 相机
305.148 检测器系统
306.150 信标设备
307.152 人机界面
308.154 娱乐设备
309.156 跟踪系统
310.158 扫描系统
311.160 图像分析设备
312.162 位置评估设备
313.164 连接器
314.166 壳体
315.168 控制设备
316.170 用户
317.172 开口
318.174 光轴
319.176 视图方向
320.178 坐标系
321.182 反射光束
322.184 机器
323.186 跟踪控制器
324.188 六边形图案
325.190 对极线
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献

  • 日榜
  • 周榜
  • 月榜