用于在使用检测到的图像的情况下触发车辆的功能的方法和装置与流程
本发明涉及用于在使用检测到的图像的情况下触发车辆的功能的特别是计算机实现的方法、装置、机动车和计算机程序。
背景技术:
1、现代车辆越来越多地配备有驾驶员辅助系统(英文:advanced driverassistance systems,adas),所述驾驶员辅助系统应在确定的行驶状况中辅助驾驶员。所述辅助从单纯地显示可能相关的信息(例如通过车道变换辅助系统输出警告),经过部分自主地干预(例如通过防抱死系统调节施加到车轴上的力矩),乃至全自动干预到车辆控制中(例如通过距离调节定速巡航装置、英文adaptive cruise control、acc进行自适应速度调节)。
2、通常传感器数据、例如超声波传感器、雷达传感器或摄像头提供的信号形成用于这种驾驶员辅助系统的基础,借助所述传感器数据可以确定当前的行驶状况,并且响应于所述当前的行驶状况可以执行相应的驾驶员辅助系统的功能。
3、此外,在现代车辆中包含大量其他可以手动、半自动化亦或自动化地激活的功能或车辆组件。其中包括雨刮器、车窗升降器、通风装置、加热装置、车窗加热装置、无线电设定装置、导航系统以及其他。通过导航系统可以显示路线以及所属的交通信息、如速度限制、隧道和收费道路。这些示例性提及的车辆功能通常可以直接通过操作元件或调节器、亦或也通过显示器、特别是也称为cid(英文:“central information display”)的中央显示器来激活或控制。
4、此外,可以通过车辆的内部空间中的摄像头在图像技术上检测内部空间的场景亦或内部空间中的乘客。例如,可以在图像技术上检测乘客的手势,并且通过所述手势又可以启动或控制功能、例如车辆的上述功能之一。
5、此外,用户定义的信息可以通过电子移动设备、如车辆钥匙亦或其他电子移动设备传输到车辆上。用户定义的信息可以涉及车辆上的用户定义的设定、例如座椅位置或车辆的内部空间中的温度。由此可以个性化车辆中的设定。
6、在当今时代,可能需要能够及时且简单或直观地对当前情况作出反应。例如,用户可以通过其电子移动设备获得地图区段的图像,所述地图区段具有街道名称和约定了会合点的建筑物。为了通过车辆中集成的导航系统获得至所述建筑物的路线引导,需要将街道名称或者说地址输入到导航系统中。在这里期望一种将所述图像的信息传输到导航系统的更简单的可能性。
技术实现思路
1、本发明所基于的任务在于提供一种简单的可能性,使用在物理对象的图像上示出的信息来触发车辆的功能。
2、该任务的解决方案根据独立权利要求的教导来实现。本发明的不同实施形式和进一步扩展方案是从属权利要求的技术方案。
3、所述解决方案的第一方面涉及一种用于在使用通过车辆的内部空间摄像头检测到的图像的情况下触发车辆的功能的方法、特别是计算机实现的方法,所述方法具有:(i)通过所述内部空间摄像头检测在物理对象、特别是电子移动设备上示出的对象图像的多个图像;(ii)将所述多个图像中的所检测到的图像中的每个图像划分成多个图像区段;(iii)对于所述多个图像中的第一图像的每个图像区段确定,所述图像区段是否分别满足图像特征量的预给定的准则;(iv)如果对第一图像的图像区段进行的确定已得出:第一图像的如下的第一图像区段不满足所述预给定的准则,在所述第一图像区段上基本上示出与第二图像区段上相同的内容,则从所述多个图像中确定如下的第二图像,在所述第二图像中,第二图像区段满足预给定的准则;(v)在第一图像中,通过第二图像的所述第二图像区段在图像技术上替换第一图像的所述第一图像区段,以便获得经校正的第一图像;(vi)在使用所述经校正的图像的情况下触发所述车辆的车辆设备的功能。
4、在此处可能使用的术语“包括”、“包含”、“包括有”、“具有”、“有”、“带有”或其任何其他变体应涵盖非排他性的包含。这样,例如包括或具有一列元素的方法或装置不一定限于这些元素,而是可以包括未明确列出的或对于这种方法或这种装置固有的其他元素。
5、此外,只要没有明确地给出相反说明,“或”涉及包含性的“或”而不是排他性的“或”。例如,条件a或b通过以下条件之一满足:a为真(或存在)且b为假(或不存在),a为假(或不存在)且b为真(或存在),以及a和b均为真(或存在)。
6、如在此使用的术语“一个”或“一种”被定义为“一个/一种或多个/多种”的含义。术语“另一个”和“另外的”及其任何其他变体应理解为“至少一个另外的”的含义。
7、如在此使用的术语“多个”应理解为“两个或更多个”的含义。
8、在此使用的术语“配置”或“设置”用于满足确定的功能(及其相应的变化形式)应理解为,相应的装置已经以这样的设计或设定存在,在所述设计或设定中,所述装置能够执行所述功能,或者所述装置至少是可设定的、即可配置的,使得所述装置在相应的设定之后能够执行所述功能。所述配置在此例如可以通过对过程流程或开关等的参数的相应的设定来进行,以用于激活或停用功能或设定。特别是,所述装置可以具有多个预先确定的配置或运行模式,从而所述配置可以借助选择这些配置或运行模式之一来进行。
9、在这里使用的术语“图像传感器”特别是应理解为摄像头的、特别是电光的传感器,所述传感器能够传感器式地检测场景。特别是,所述图像传感器可以被构成用于检测或测量电磁信号,并将所述电磁信号转换为电信号。这些传感器特别是可以涉及也称为ccd(英文charge coupled device)的电荷耦合传感器、雷达传感器、激光雷达传感器或其他传感器。特别是,所述图像传感器可以构成为3d图像传感器,所述3d图像传感器能够传感器式地检测三个空间维度中的场景,从而在此特别是能实现测量场景的距离。此外,这种传感器也可以被构成用于向对象发射电磁信号,并又检测由该对象反射回的电磁信号,从而在随后的评估中可以从发射的和反射回的电磁信号中获得关于对象的信息。这种传感器应用于所谓的tof(英文: time-of-flight)摄像头中。
10、在这里使用的术语“控制设备”特别是应理解为电子设备,所述电子设备特别是借助处理器、特别是cpu至少部分地控制车辆设备的运行。特别是,控制设备可以具有发送和接收单元以用于发送和接收无线信号、如电磁信号,和/或用于通过线缆发送和接收有线信号、如电信号。这种控制器特别是可以具有用于分析接收的和/或已经存储的数据的微处理器,和/或用于发起控制过程的微处理器。
11、在这里使用的术语“图像特征量”特别是应理解为描述图像的光学质量的特征量或准则。特别是,特征量可以是图像清晰度、对比度、曝光、色彩饱和度或其他特征量。
12、在这里使用的术语“基本上相同”特别是应理解为,两个内容、特别是两个图像区段的两个图像内容彼此偏差不超过10%、特别是不超过5%。特别是,两个基本上相同的图像内容或相同的图像应理解为,在短的时间顺序内、即典型地在一秒内拍摄多个图像时拍摄的对象图像可能由于摄像头或对象的朝向的最小的、不期望的变化而彼此不同。
13、在这里使用的术语“物理对象”特别是应理解为物理上可抓握的对象,在所述对象上或通过所述对象可以示出对于用户可见的图像。特别是,物理对象可以涉及电子移动设备、如智能手机或平板电脑,通过所述电子移动设备的显示器可以分别示出可见的图像。同样,物理对象可以涉及具有光学被动的表面、即不主动发光的表面的物品、特别是一张纸、一块塑料或一件其他材料,在所述物品的表面上印刷有所述图像。
14、在这里使用的术语“电子移动设备”特别是应理解为智能手机、平板电脑或移动计算机,其特别是分别具有一个或多个用于发送和接收信号的发送和接收单元。在此,信号特别是可以具有电磁信号,所述电磁信号在使用移动通信标准、特别是蓝牙、无线局域网(wlan)或2g、3g、lte或5g标准的情况下被发送和接收。同样可设想,所述信号通过线缆连接被发送和接收。
15、在这里使用的术语“一个功能”或“多个功能”特别是应理解为车辆功能、亦即例如信息娱乐系统的功能或其他车辆功能或与行驶相关的功能、如通过导航系统的路线计算和显示。然而此术语特别是也应理解为行驶无关的功能或与行驶无关的应用,所述与行驶无关的功能或与行驶无关的应用可以在车辆中执行,然而与车辆或行驶没有或至少没有直接关系,而是例如用于娱乐、如计算机游戏或视频游戏或其他应用或应用程序。
16、在这里使用的术语“车辆设备”应理解为在车辆运行期间可以执行预定的指令的设备。特别是,在这里可以涉及可以在驾驶员辅助系统、信息娱乐应用、驱动系统亦或底盘系统中使用的车辆设备。特别是也可以涉及导航系统或布置在车辆中的显示器,通过所述显示器可以控制车辆功能。
17、在这里使用的术语“位置”、特别是对象的位置、特别是电子移动设备或内部空间摄像头的位置,特别是应理解为相应对象的代表性的点的位置。这特别是可以是横截面的中点或对象的重心。
18、通过根据第一方面的方法可以实现,车辆的功能可以通过由内部空间摄像头检测到的、在物理对象、特别是电子移动设备上示出的图像来触发。由此特别是能实现,通过车辆的内部空间摄像头检测到的图像可以关于图像的图像区段的图像特征量来改善。由此可以更好地评估改善后的图像的图像内容,并且可以通过由图像示出的内容而触发的车辆功能能够更可靠地触发。当要检测的图像具有相对小的尺寸、如智能手机显示器上的图像,并且被不稳定地支承、如智能手机在用户手中的情况下,这可能是有利的。
19、下面描述所述方法的优选实施形式,所述优选实施形式在未明确排除或并非技术上不可能的情况下分别能够任意地相互组合以及与进一步的所描述的其他方面组合。
20、在一些实施形式中,特别是在使用tof摄像头的情况下确定物理对象与内部空间摄像头之间的距离,并且当所确定的距离小于预给定的距离时,则不满足准则。特别是,所述预给定的距离可以是内部空间摄像头的物镜的最小距离,从而在距离小于所述最小距离时,物镜不能实现清晰的成像。由此能实现以简单且可靠的方式确定是否可以清晰地检测一个或多个图像区段。
21、在一些实施形式中,所述方法此外具有:(i)确定所述内部空间摄像头的位置;(ii)在使用所述内部空间摄像头的所确定的位置和所确定的距离的情况下来确定所述物理对象的位置,并且当所述物理对象的位置位于预给定的空间区域之外时,则不满足所述准则。特别是,内部空间摄像头和参考对象的位置可以通过已知的对车辆的内部空间中的对象的测量和位置确定来确定,或者说紧接着所述确定从数据库读出。通过内部空间摄像头的物镜预给定了孔径角,在所述孔径角之内可以检测图像。特别是,所述预给定的空间区域可以代表该孔径角。在此,空间区域随着至物镜的距离增加而增大。通过该实施形式可以实现确认,所述物理对象是否完全或部分地位于该空间区域之外,并且在该情况中可以确定,是否可以检测物理对象的图像。在否定情况中,可以替换至少一个不可检测的图像区段。
22、在一些实施形式中,通过新的图像区段来替换所述第一图像的所述第一图像区段,所述新的图像区段由所述多个检测到的图像中的、基本上分别示出相同图像内容的多个图像区段叠加而成。由此能够实现要替换的图像区段的特别好的改善。特别是,由此能在图像的曝光方面实现改善。
23、在一些实施形式中,确定所述对象图像的图平面与所述内部空间摄像头的图像传感器的传感器平面之间的角度,其中,当所述图平面和所述传感器平面彼此平行布置时,所述角度为0°,并且当所确定的角度大于预给定的值时,则不满足所述准则。由此能实现确认物理对象和在其上示出的对象图像在何时相对于传感器平面过度倾斜,并且因此检测到的图像不满足所述准则。
24、在一些实施形式中,当作为图像特征量的图像清晰度小于预给定的图像清晰度时,则不满足所述准则。由此可以实现通过具有更高的图像清晰度的第二图像区段来替换第一图像区段。
25、在一些实施形式中,当作为图像特征量的平均图像对比度小于预给定的图像对比度时,则不满足所述准则。由此可以实现通过具有更高的平均图像对比度的第二图像区段来替换第一图像区段。
26、在一些实施形式中,如下检查经校正的第一图像,以确定在使用经校正的第一图像的情况下是否可以触发车辆设备的所设置的功能,并且在接收到确认信号之后进行所述功能的触发。由此可以提前确认是否可以触发所述功能,并且随后特别是可以通过用户进行输入,所述输入触发确认信号。
27、在一些实施形式中,紧接着所述检查,当不能触发所述功能时,在所述车辆的车辆显示器上输出消息。由此可以使得用户能够将物理对象以其他朝向或其他距离再次保持在内部空间摄像头的拍摄区域中,以便能实现触发所述功能。
28、所述解决方案的第二方面涉及一种用于在使用通过所述车辆的内部空间摄像头检测到的图像的情况下触发车辆的功能的装置,其中,所述装置配置为用于执行根据第一方面所述的方法。
29、在一些实施形式中,(i)所述内部空间摄像头设置为用于检测在物理对象、特别是电子移动设备上示出的对象图像的多个图像;(ii)其中,所述装置此外具有控制设备,所述控制设备设置为用于执行以下步骤:(ii-1)将所述多个图像中的所检测到的图像中的每个图像划分成多个图像区段;(ii-2)对于所述多个图像中的第一图像的每个图像区段,确定所述图像区段是否分别满足图像特征量的预给定的准则;(ii-3)如果对第一图像的图像区段进行的确定已得出:第一图像的如下第一图像区段不满足所述预给定的准则,在所述第一图像区段上基本上示出在与第二图像区段上相同的内容,则从所述多个图像中确定如下的第二图像,在所述第二图像中,第二图像区段满足预给定的准则;(ii-4)在第一图像中,通过第二图像的所述第二图像区段在图像技术上替换第一图像的所述第一图像区段,以便获得经校正的第一图像;(ii-5)在使用所述经校正的图像的情况下触发所述车辆的车辆设备的功能。
30、所述解决方案的第三方面涉及一种车辆、特别是机动车,所述车辆具有根据第二方面所述的装置。
31、所述解决方案的第四方面涉及一种计算机程序,所述计算机程序包括指令,在根据第二方面的装置上执行所述指令时,所述指令促使该装置执行根据第一方面的方法。
32、所述计算机程序特别是可以存储在非易失性数据载体上。优选地,这是一种光学数据载体或闪存模块形式的数据载体。当这样的计算机程序应独立于处理器平台处理时,这能够是有利的,在所述处理器平台上要执行所述一个或多个程序。在另一种实现方式中,计算机程序可以作为文件存在于数据处理单元上、特别是服务器上,并且通过数据连接、例如互联网或专用数据连接、例如专有或本地网络可下载。此外,所述计算机程序可以具有多个共同作用的单独的程序模块。所述模块特别是可以配置为或在任何情况下这样可使用,使得所述模块在分布式计算(英语“distributed computing”)的意义上在不同的设备(计算机或处理器单元)上执行,所述设备在位置上彼此间隔开并且通过数据网络相互连接。
33、关于所述解决方案的第一方面所阐述的特征和优点相应也适用于所描述的其他方面。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com