一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

用于记录车辆图像的装置和方法与流程

2022-06-02 04:49:28 来源:中国专利 TAG:

用于记录车辆图像的装置和方法
1.相关申请的交叉引用
2.本技术要求于2020年11月27日向韩国知识产权局提交的韩国专利申请no.10-2020-0163220的权益,该专利申请通过引用并入本文。
技术领域
3.本发明涉及用于记录车辆图像的装置和方法。


背景技术:

4.车辆的内置相机能够在行驶或停车期间记录车辆的前方/后方区域的图像,并且记录的图像能够用作参考或用于事故发生时寻找原因的过程。
5.在现有的内置相机的情况下,可以通过将记录区分为行驶恒定记录、行驶事件(手动)记录、停车恒定记录、停车事件记录、延时记录等来执行。
6.通过行驶恒定记录,即使驾驶员没有单独提供动作,当车辆行驶时,也会自动记录和存储图像。然而,因为存储容量有限制,所以只有2到3小时的图像保留在存储器中,并且在此之前记录的图像被删除,因为保存新的行驶图像。
7.通过行驶事件记录功能,使用车辆的g传感器确定的怀疑事故的时间点之前/之后的10秒总共20秒、或者驾驶员手动按下内置相机的开关的时间点的记录图像可以存储在不删除图像的空间中。
8.然而,当车辆由于事故没有直接发生而不能感测到事件,并且驾驶员由于惊慌而未能按下事件记录开关时,记录的图像的必要部分没有存储在不删除图像的空间中,并且记录的图像可能被另一个图像删除。
9.此外,随着测量车辆中生物信号的技术的最新发展,可以使用车辆中的边框电极、雷达传感器、ir相机、体温传感器等来收集驾驶员的生物信号,例如压力、紧张状态等。
10.因此,需要通过测量驾驶员的生物信号并将记录的图像存储在不删除图像的空间中来确定特定事件的技术。


技术实现要素:

11.本发明涉及用于记录车辆图像的装置和方法。特定实施例涉及用于存储记录的车辆图像的装置和方法。
12.本发明的实施例可以解决现有技术中出现的问题,同时保持现有技术获得的优点不变。
13.本发明的实施例提供用于记录车辆图像的装置和方法,其可以使用生物信号确定要存储在不删除图像的空间中的内置相机的记录图像的图像部分,并且防止删除必要的图像。
14.本发明的另一实施例提供用于记录车辆图像的装置和方法,其即使当车辆没有通过g传感器感测到事故的发生时,也在使用生物信号或车辆信号确定需要图像存储的部分
的过程中提供高可靠性。
15.本发明的另一实施例提供用于记录车辆图像的装置和方法,其即使当驾驶员在需要图像存储时由于恐慌不能按下开关而未能存储图像时,也通过使用生物信号或车辆信号自行确定需要图像存储的部分,有助于驾驶员的便利。
16.本发明的另一实施例提供用于记录车辆图像的装置和方法,其使用生物信号或车辆信号自行确定需要图像存储的部分,并将图像存储在不删除图像的空间中,从而利用该图像查找事故原因并作为参考。
17.本发明构思的实施例要解决的技术问题不限于上述问题,并且本发明所属领域的技术人员将从以下描述中清楚地理解本文未提及的任何其他技术问题。
18.根据本发明的实施例,一种用于记录车辆图像的装置包括:图像获取装置,其获取车辆周围区域的图像;传感器装置,其获取生物信号,该生物信号包括驾驶员的心率、心电图、皮肤电反应(gsr)、体温、声音、面部表情和压力中的至少一个;以及控制器,其基于生物信号确定要存储在非易失性存储器中的获取图像的一些部分,并将所述一些部分的图像存储在非易失性存储器中。
19.在一个实施方式中,传感器装置可以获取车辆信号,该车辆信号包括车辆是否已经偏离路线、车速和/或方向盘角度中的至少一个,并且控制器可以基于生物信号和/或车辆信号中的至少一个确定要存储在非易失性存储器中的获取图像的一些部分。
20.在一个实施方式中,传感器装置可以包括心电图(ecg)电极、静电传感器、雷达、红外(ir)相机、体温计、皮肤温度(skt)传感器、麦克风、gsr传感器和/或相机中的至少一个,用于获取生物信号。
21.在一个实施方式中,传感器装置可以包括车道保持辅助系统(lkas)、车速传感器、仪表盘和转向角传感器(sas)中的至少一个,用于获取车辆信号。
22.在一个实施方式中,控制器可以确定事件时间点,其中通过单个得分计算的最终得分在事件时间点超过阈值得分,通过对与生物信号的项目对应的心率、心电图、gsr、体温、声音和压力以及与车辆信号的项目对应的车辆是否已经偏离路线、车速和方向盘角度中的一个或多个项目中的每个应用权重而计算单个得分,并且基于事件时间点确定要存储在非易失性存储器中的获取图像的部分。
23.在一个实施方式中,控制器可以确定事件时间点,其中最终得分超过阈值得分,并且最终得分不是仅通过在事件时间点与车辆信号对应的项目的单个得分来计算的。
24.在一个实施方式中,分配给心率的权重可以包括分配给生物信号项目的权重中的最大权重,并且分配给车速的权重可以包括分配给车辆信号项目的权重中的最大权重。
25.在一个实施方式中,控制器可以基于在每个项目的预定时间内对应于项目的变化来计算项目的单个得分,项目包括心率、心电图、gsr、体温、声音、面部表情、压力、车辆是否已经偏离路线、车速和/或方向盘角度中的至少一个。
26.在一个实施方式中,当面部表情被识别为对应于特定情绪的面部表情时,控制器可以计算与面部表情的项目对应的单个得分。
27.在一个实施方式中,当通过获取的声音识别出特定单词时,控制器可以计算声音的项目。
28.在一个实施方式中,控制器可以将分别对应于事件时间点之前和之后的特定时间
的部分确定为要存储在非易失性存储器中的一些部分。
29.根据本发明的另一实施例,一种用于记录车辆图像的方法包括:获取车辆周围区域的图像;获取生物信号,该生物信号包括驾驶员的心率、心电图、gsr、体温、声音、面部表情和压力中的至少一个;以及基于生物信号确定要存储在非易失性存储器中的获取的图像的一些部分;以及将所述一些部分的图像存储在非易失性存储器中。
30.在一个实施方式中,该方法还可以包括获取车辆信号,该车辆信号包括车辆是否已经偏离路线、车速和/或方向盘角度中的至少一个,并且基于生物信号确定要存储在非易失性存储器中的获取的图像的所述一些部分可以包括基于生物信号和/或车辆信号中的至少一个,确定要存储在非易失性存储器中的获取的图像的所述一些部分。
31.在一个实施方式中,基于生物信号和/或车辆信号中的至少一个确定要存储在非易失性存储器中的获取图像的所述一些部分可以包括:通过为与生物信号项目对应的心率、心电图、gsr、体温、声音、面部表情、压力以及与车辆信号项目对应的车辆是否已经偏离路线、车速或方向盘角度中的至少一个的每个项目分配权重来计算单个得分;确定事件时间点,其中通过单个得分计算的最终得分超过阈值得分;以及基于事件时间点确定要存储在非易失性存储器中的获取的图像的一些部分。
32.在一个实施方式中,事件时间点的确定可以包括确定事件时间点,其中最终得分超过阈值得分,并且计算的最终得分不是仅通过在事件时间点与车辆信号对应的项目的单个得分来计算的。
33.在一个实施方式中,分配给心率的权重可以包括分配给生物信号项目的权重中的最大权重,并且分配给车速的权重可以包括分配给车辆信号项目的权重中的最大权重。
34.在一个实施方式中,计算单个得分可以包括基于在每个项目的预定时间内对应于项目的变化,计算项目的单个得分,项目包括心率、心电图、gsr、体温、声音、面部表情、压力、车辆是否已经偏离路线、车速和/或方向盘角度中的至少一个。
35.在一个实施方式中,计算单个得分可以包括当面部表情被识别为对应于特定情绪的面部表情时,计算与面部表情的项目对应的单个得分。
36.在一个实施方式中,计算单个得分可以包括当通过获取的声音识别出特定单词时,计算与声音的项目对应的单个得分。
37.在一个实施方式中,基于事件时间点确定要存储在非易失性存储器中的获取图像的所述一些部分可以包括将分别对应于事件时间点之前和之后的特定时间的部分确定为要存储在非易失性存储器中的所述一些部分。
附图说明
38.从以下结合附图的详细描述中,本发明的实施例的上述和其他目的、特征和优点将变得更加明显,其中:
39.图1是示出根据本发明实施例的用于记录车辆图像的装置的框图;
40.图2是示出根据本发明实施例的用于记录车辆图像的方法的流程图;
41.图3是以表格的形式示出根据本发明实施例的用于记录车辆图像的装置基于每个项目计算单个得分的过程的图;
42.图4是示出通过根据本发明实施例的用于记录车辆图像的装置的传感器装置获取
的生物信号和车辆信号的项目的图;
43.图5是示出通过根据本发明实施例的用于记录车辆图像的装置确定事件时间点的过程的图;
44.图6是示出通过根据本发明实施例的用于记录车辆图像的装置识别面部表情的过程的图;以及
45.图7是示出根据本发明的另一实施例的用于记录车辆图像的方法的流程图。
46.附图标记说明:
47.100:用于记录车辆图像的装置;
48.110:图像获取装置;
49.120:传感器装置;
50.130:控制器;
51.140:非易失性存储器;
52.410:传感器装置;
53.411:生物信号(传感器);
54.412:车辆信号(传感器)。
具体实施方式
55.在下文中,将参考示例性附图详细描述本发明的一些实施例。在将附图标记添加到每个附图的部件中时,应当注意,相同或等效的部件即使当显示在其他附图上时,它们也由相同的标记表示。此外,在描述本发明的实施例时,当确定相关的已知配置或功能干扰了对本发明的实施例的理解时,将省略其详细描述。
56.在描述根据本发明的实施例的部件时,可以使用术语诸如第一、第二、a、b、(a)、(b)等。这些术语仅旨在将部件与其他部件区分开来,并且这些术语不限制部件的性质、顺序或次序。除非另有定义,否则本文使用的包括技术和科学术语在内的所有术语具有与本发明所属领域的普通技术人员通常理解的含义相同的含义。还应当理解,术语例如在常用词典中定义的术语,应当被解释为具有与它们在相关领域的上下文中的含义一致的含义,并且不会以理想化或过于正式的含义来解释,除非在此明确定义。
57.在下文中,将参照图1至图7详细描述本发明的实施例。
58.图1是示出根据本发明实施例的用于记录车辆图像的装置的框图。
59.参考图1,可以实现用于记录车辆图像的装置100,该装置100包括图像获取装置110、传感器装置120和控制器130。
60.用于记录车辆图像的装置100可以与车辆一体形成,或者可以以作为与车辆分离的部件安装在车辆中/附接到车辆的形式来实现。装置100的一部分可以与车辆一体地实现,并且其剩余部分可以以作为与车辆分离的部件安装在车辆中/附接到车辆的形式来实现。
61.图像获取装置110可以获取车辆周围区域的图像。
62.作为示例,图像获取装置110可以通过包括安装在车辆的前/后和左/右表面上的一个或多个相机来捕获车辆周围区域的图像。
63.作为示例,图像获取装置110可以获取能够在事故发生时识别事故情况的构图的
车辆周围区域的图像。
64.作为示例,图像获取装置110可以包括用于车辆的黑匣子和高级驾驶员辅助系统(adas)传感器。
65.传感器装置120可以获取生物信号,该生物信号包括驾驶员的心率、心电图、皮肤电反应(gsr)、体温、声音、面部表情和/或压力中的至少一个。
66.此外,传感器装置120可以获取车辆信号,该车辆信号包括车辆是否已经偏离路线、车速和/或方向盘角度中的至少一个。
67.作为示例,传感器装置120可以包括心电图(ecg)电极、静电传感器、雷达、红外(ir)相机、体温计、皮肤温度(skt)传感器、麦克风、gsr传感器和/或相机中的至少一个,用于获取生物信号。
68.作为示例,传感器装置120可以包括车道保持辅助系统(lkas)、车速传感器、仪表盘和/或转向角传感器(sas)中的至少一个,用于获取车辆信号。
69.控制器130可以执行整体控制,使得每个部件能够正常执行其功能。这种控制器130可以以硬件、软件或硬件和软件的组合的形式来实现。优选地,控制器130可以实现为微处理器,但可以不限于此。此外,控制器130可以执行稍后描述的各种数据处理、计算等。
70.作为示例,控制器130可以接收从传感器装置120获取的生物信号和车辆信号,并使用接收的生物信号和车辆信号执行操作。
71.作为示例,控制器130可以通过接收与从图像获取装置110获取的图像有关的信息来控制图像的存储或删除。
72.作为示例,控制器130可以连接到非易失性存储器140,以将从图像获取装置110获取的图像存储在非易失性存储器140中。
73.作为示例,控制器130可以确定基于生物信号获取的图像的存储在非易失性存储器中的一些部分,并且将一些部分的图像存储在非易失性存储器140中。
74.作为示例,控制器130可以确定基于生物信号和/或车辆信号中的至少一个获取的图像的存储在非易失性存储器中的一些部分,并且将一些部分的图像存储在非易失性存储器140中。
75.非易失性存储器140可以连接到用于记录车辆图像的装置100,以交换信息。
76.非易失性存储器140可以存储图像数据,并且即使当非易失性存储器140关闭时,存储的图像数据也不会被擦除。
77.非易失性存储器140可以设置在用于记录车辆图像的装置100的外部,但是可以包括在用于记录车辆图像的装置100中。
78.图2是示出根据本发明实施例的用于记录车辆图像的方法的流程图。
79.用于记录车辆图像的装置100可以获取车辆周围区域的图像(s201)。
80.作为示例,用于记录车辆图像的装置100可以获取车辆的前方/后方和左侧/右侧的区域的图像。
81.用于记录车辆图像的装置100可以获取车辆周围区域的图像,然后获取生物信号和车辆信号(s202)。
82.作为示例,用于记录车辆图像的装置100可以通过传感器装置120获取生物信号和车辆信号,生物信号包括驾驶员的心率、心电图、皮肤电反应(gsr)、体温、声音、面部表情
和/或压力中的至少一个,车辆信号包括车辆是否已经偏离路线、车速和/或方向盘角度中的至少一个。
83.在获取生物信号和车辆信号之后,用于记录车辆图像的装置100可以基于生物信号和车辆信号计算最终得分(s203)。
84.作为示例,用于记录车辆图像的装置100可以通过对与生物信号项目对应的心率、心电图、gsr、体温、声音、面部表情和压力以及与车辆信号项目对应的车辆是否已经偏离路线、车速和/或方向盘角度中的至少一个的每个项目应用权重,计算单个得分。
85.作为示例,用于记录车辆图像的装置100可以通过计算的单个得分来计算最终得分。
86.作为示例,用于记录车辆图像的装置100可以以对单个得分求和的方案或计算单个得分的权重和的方案来计算最终得分。
87.获得单个得分和最终得分的示例将在图3中详细描述。
88.在基于生物信号和车辆信号计算最终得分之后,用于记录车辆图像的装置100可以确定最终得分是否等于或大于阈值得分(s204)。
89.作为示例,阈值得分可以是通过实验预先确定并存储在存储器中的得分值,并且可以是可以更新为新值的得分。
90.作为示例,用于记录车辆图像的装置100可以确定实时计算的最终得分是否等于或大于阈值得分,以确定最终得分变得等于或大于阈值得分的事件时间点。
91.在该过程中,根据实施例,用于记录车辆图像的装置100可以被设计成确定最终得分是否超过阈值得分,而不限于单词“等于或大于”。
92.当最终得分并非等于或大于阈值得分时,用于记录车辆图像的装置100可以不将图像存储在非易失性存储器中(s205)。
93.作为示例,用于记录车辆图像的装置100可以不将图像存储在非易失性存储器中,而是可以将图像存储在易失性存储器中。当易失性存储器的容量由于图像被记录而不足时,装置100可以删除存储在易失性存储器中的最旧部分的图像,并且将新图像存储在易失性存储器中。
94.当最终得分等于或大于阈值得分时,用于记录车辆图像的装置100可以确定最终得分是否是仅通过车辆信号计算的得分(s206)。
95.作为示例,当通过将分别对应于生物信号和车辆信号的项目的单个得分相加来计算最终得分时,用于记录车辆图像的装置100可以通过仅将对应于车辆信号的得分相加来确定最终得分是否等于或大于阈值得分,因为对应于生物信号的单个得分没有被计算或者计算为0。
96.当最终得分是仅通过车辆信号计算的得分时,用于记录车辆图像的装置100可以不将图像存储在非易失性存储器中(s205)。
97.作为示例,当通过将分别对应于生物信号和车辆信号的项目的单个得分相加来计算最终得分时,用于记录车辆图像的装置100可以将生物信号的项目优先于车辆信号的项目。当对应于生物信号项目的单个得分没有被计算或者计算为0时,并且当通过仅将对应于车辆信号的得分相加而获得的最终得分等于或大于阈值得分时,装置100可以不将图像存储在非易失性存储器中。
98.当最终得分不是仅通过车辆信号计算的得分时,用于记录车辆图像的装置100可以将分别对应于事件时间点之前和之后的特定时间的部分存储在非易失性存储器中(s207和s208)。
99.作为示例,用于记录车辆图像的装置100可以将最终得分变得等于或大于阈值得分的时间点确定为事件时间点,并将分别对应于事件时间点之前和之后的特定时间的部分存储在非易失性存储器中。
100.作为示例,用于记录车辆图像的装置100可以通过已经通过实验确定并存储在存储器中的特定时间值,将分别对应于事件时间点之前和之后的特定时间的部分存储在非易失性存储器140中。
101.作为示例,用于记录车辆图像的装置100可以将分别与存储在易失性存储器中的图像的事件时间点之前和之后的特定时间对应的部分移动或复制到非易失性存储器140。
102.图3是以表格的形式示出根据本发明实施例的用于记录车辆图像的装置基于每个项目计算单个得分的过程的图。
103.根据图3的表格,生物信号的项目可以包括心率、gsr、体温、声音、面部表情和压力。
104.虽然未示出,但是生物信号的项目可以包括心电图。
105.车辆信号的项目可以包括车辆是否已经偏离路线、车速和方向盘角度。
106.作为示例,用于记录车辆图像的装置100可以基于在每个项目的预定时间内对应于项目的变化来计算项目的单个得分,该项目包括心率、心电图、gsr、体温、声音、面部表情、压力、车辆是否已经偏离路线、车速和/或方向盘角度中的至少一个。
107.作为示例,用于记录车辆图像的装置100可以基于生物信号项目中的心率在最近5秒内的变化量来计算单个得分。
108.作为示例,当心率在最近5秒内增加等于或大于30bpm时,用于记录车辆图像的装置100可以将心率的单个得分计算为30分。
109.作为示例,当心率在最近5秒内增加20至30bpm之间的范围时,用于记录车辆图像的装置100可以将心率的单个得分计算为20分。
110.作为示例,当心率在最近5秒内增加10至20bpm之间的范围时,用于记录车辆图像的装置100可以将心率的单个得分计算为10分。
111.作为示例,用于记录车辆图像的装置100可以基于生物信号项目中的gsr在最近5秒内的变化量来计算单个得分。
112.作为示例,当gsr在最近5秒内有增加的变化时,用于记录车辆图像的装置100可以将gsr的单个得分计算为15分。
113.作为示例,用于记录车辆图像的装置100可以基于生物信号项目中的体温在最近5秒内的变化量来计算单个得分。
114.作为示例,当体温在5秒内升高等于或大于1℃时,用于记录车辆图像的装置100可以将体温的单个得分计算为10分。
115.作为示例,当在最近5秒内体温增加0.5℃和1℃的范围时,用于记录车辆图像的装置100可以将体温的单个得分计算为5分。
116.作为示例,用于记录车辆图像的装置100可以基于生物信号项目中的声音在最近3
秒内的变化量来计算单个得分。
117.作为示例,当声音音量的分贝db在最近3秒内增加时,用于记录车辆图像的装置100可以将声音的单个得分计算为10分。
118.作为示例,当确定在最近3秒内通过声音提及特定单词时,用于记录车辆图像的装置100可以将声音的单个得分计算为10分。
119.作为示例,用于记录车辆图像的装置100可以通过识别用户声音、处理自然语言和识别单词的技术,确定可以表示惊讶、烦恼、兴奋、愤怒等的声音语调和预设词,例如“哦,我的天!”、“真意外!”、其他脏话等,并在识别对应的单词时分配得分。
120.作为示例,用于记录车辆图像的装置100可以基于生物信号项目中的面部表情在最近3秒内的变化来计算单个得分。
121.作为示例,当最近3秒内的面部表情被确定为对应于诸如惊讶、愤怒、烦恼等特定情绪的面部表情时,用于记录车辆图像的装置100可以将该面部表情的单个得分计算为10分。
122.将在图6中详细描述识别面部表情的过程。
123.作为示例,用于记录车辆图像的装置100可以基于生物信号项目中的压力在最近5秒内的变化来计算单个得分。
124.作为示例,当在最近5秒内压力水平存在变化时,用于记录车辆图像的装置100可以将压力的单个得分计算为5分。
125.作为示例,用于记录车辆图像的装置100可以基于车辆信号项目中的车辆是否已经偏离路线在最近1秒内的变化来计算单个得分。
126.作为示例,当在最近1秒内感测到路线偏离时,用于记录车辆图像的装置100可以将车辆是否已经偏离路线的单个得分计算为5分。
127.作为示例,用于记录车辆图像的装置100可以基于车辆信号项目中的车速在最近1秒内的变化量来计算单个得分。
128.作为示例,当车速在最近1秒内降低了等于或大于30km/h时,用于记录车辆图像的装置100可以将车速的单个得分计算为20分。
129.作为示例,当车速在最近1秒内降低了20至30km/h之间的范围时,用于记录车辆图像的装置100可以将车速的单个得分计算为15分。
130.作为示例,当车速在最近1秒内降低了10至20km/h之间的范围时,用于记录车辆图像的装置100可以将车速的单个得分计算为10分。
131.作为示例,用于记录车辆图像的装置100可以基于车辆信号项目中的方向盘角度在最近1秒内的变化量来计算单个得分。
132.作为示例,当方向盘角度在最近1秒内减小了等于或大于30
°
时,用于记录车辆图像的装置100可以将方向盘角度的单个得分计算为15分。
133.作为示例,当方向盘角度在最近1秒内减小了20
°
至30
°
之间的范围时,用于记录车辆图像的装置100可以将方向盘角度的单个得分计算为10分。
134.作为示例,当方向盘角度在最近1秒内减小了10
°
至20
°
之间的范围时,用于记录车辆图像的装置100可以将方向盘角度的单个得分计算为5分。
135.虽然未示出,但是用于记录车辆图像的装置100可以基于生物信号项目中的心电
图在最近特定时间内的变化来计算单个得分。
136.作为示例,当心电图在最近5秒内有变化时,用于记录车辆图像的装置100可以将心电图的单个得分计算为20分。
137.用于记录车辆图像的装置100可以通过将所有计算出的单个得分相加来计算最终得分。
138.作为示例,用于记录车辆图像的装置100可以确定计算的最终得分超过设置为20分的阈值得分的事件时间点。
139.作为示例,即使当计算的最终得分超过阈值得分时,用于记录车辆图像的装置100也可以在仅通过车辆信号的项目求和来获得最终得分时,不通过优先化生物信号来将最终得分超过阈值得分的时间点确定为事件时间点。
140.例如,当对应于心率的单个得分为10分,对应于面部表情的单个得分为5分,对应于车速的得分为10分,总计为25分时,用于记录车辆图像的装置100可以将最终得分超过阈值得分的时间点确定为事件时间点。当对应于车辆是否已经偏离路线的得分为5分,对应于车速的得分为15分,对应于方向盘角度的得分为5分时,用于记录车辆图像的装置100可以不将最终得分超过阈值得分的时间点确定为事件时间点。
141.在图3的描述中示出的单个得分和阈值得分的特定时间和特定条件下计算的权重值是示例性数值,并且不限于指定值。实际上,权重值和阈值得分可以设置为通过实验确定的其他值,或者可以设计为稍后更新。
142.此外,根据实施例,用于确定事件时间点的条件不限于在超过阈值得分的条件下的单词“超过(exceeding)”,还包括超过或等于或大于阈值得分的条件。
143.将详细描述用于设置分配给生物信号和车辆信号的项目的权重和得分的分配条件的标准。
144.由自主神经系统产生的心率和gsr可能是生物体的五官感觉最快速出现的反应。也就是说,分别对应于皮肤电导和外周血管反应的gsr和心率可以敏感地表达驾驶情况,而对应于皮肤温度的体温可以部分地反映驾驶情况。
145.然而,为了使gsr传感器感应到变化,汗水必须从手中流出,并且驾驶员必须握住接触式传感器所在的方向盘或类似物。另一方面,心率显示出由人体的五官感觉刺激产生的即时反应,并且能够在不通过雷达/ppg/ir传感器等接触的情况下被测量。
146.考虑到这些点,心率项目得分的权重与其他项目的权重相比可以相对较大。
147.例如,分配给心率的权重可以包括分配给生物信号项目的权重中最大权重。
148.此外,因为声音和面部表情可能由于除紧急情况之外的原因(电话呼叫、与乘客座位上的乘客交谈等)而改变,所以声音和面部表情的得分的权重与其他项目的权重相比可以相对较小,使得声音和面部表情的单个得分可以被分配用于辅助其他项目的得分。
149.此外,因为压力的响应性不如心率,并且可能存在具有慢性压力的驾驶员,所以可以设置条件,使得当压力水平改变时可以分配压力的得分。此外,压力得分的权重可以被设置为生物信号项目的权重中的最低权重。
150.当车速迅速降低时,可以预期车辆前方会有紧急情况,因此与其他项目的权重相比,车速得分的权重可以被设置得相对较高。
151.在驾驶员想要变道、左转或右转的情况下,可能存在对方向盘的操纵,因此与其他
项目的权重相比,方向盘角度的得分的权重可以被设置得相对较低。
152.图4是示出通过根据本发明实施例的用于记录车辆图像的装置的传感器装置获取的生物信号和车辆信号的项目的图。
153.根据图4,传感器装置410可以获取生物信号411,生物信号411包括心率、心电图、体温、gsr、声音和面部表情。
154.虽然未示出,但是生物信号411可以包括压力。
155.作为示例,传感器装置410可以包括ecg电极、雷达和/或ir相机中的至少一个,并且通过ecg电极、雷达和/或ir相机中的至少一个来获取驾驶员的心率。
156.作为示例,ecg电极设置在方向盘上以获取驾驶员的心率。
157.作为示例,传感器装置410可以包括ir相机和/或skt传感器中的至少一个,并且通过ir相机和/或skt传感器中的至少一个来获取驾驶员的体温。
158.作为示例,传感器装置410可以包括ecg电极和/或静电传感器中的至少一个,并且可以通过ecg电极和/或静电传感器中的至少一个来获取驾驶员的心电图、nn间隔的标准偏差(sdnn)和/或心跳间间隔(ibi)中的至少一个。
159.作为示例,ecg电极可以设置在方向盘上,以获取驾驶员的心电图、sdnn和/或ibi中的至少一个。
160.作为示例,传感器装置410可以包括麦克风,并且可以通过麦克风获取驾驶员的声音。
161.作为示例,传感器装置410可以包括gsr传感器,并且通过gsr传感器获取驾驶员的gsr。
162.作为示例,gsr传感器可以设置在方向盘上以获取驾驶员的gsr。
163.作为示例,传感器装置410可以包括相机,并且通过相机获取驾驶员的面部表情。
164.虽然未示出,但是作为示例,传感器装置410可以包括可佩戴传感器,并且通过该可佩戴传感器获取驾驶员的压力水平。
165.传感器装置410可以获取车辆信号412,该车辆信号412包括车辆是否已经偏离路线、车速和方向盘角度。
166.作为示例,传感器装置410可以包括lkas,并且通过lkas获取车辆是否已经偏离路线。
167.作为示例,传感器装置410可以包括车速传感器和/或仪表盘中的至少一个,并且通过车速传感器和/或仪表盘中的至少一个获取车速。
168.作为示例,传感器装置410可以包括sas,并且通过sas获取方向盘角度。
169.图5是示出通过根据本发明实施例的用于记录车辆图像的装置确定事件时间点的过程的图。
170.用于记录车辆图像的装置100可以确定计算的最终得分超过阈值得分的事件时间点,并且将与事件时间点之前和之后的特定时间对应的部分确定为存储在非易失性存储器中的一些部分。
171.用于记录车辆图像的装置100可以实时计算最终得分。
172.参考图5,用于记录车辆图像的装置100可以基于当前时间点检测在过去1秒内车辆是否已经偏离路线以及车速和方向盘角度的变化。
173.作为示例,用于记录车辆图像的装置100可以基于当前时间点检测在过去3秒内的gsr和声音的变化。
174.作为示例,用于记录车辆图像的装置100可以基于当前时间点检测在过去5秒内的心率、体温和压力的变化。
175.用于记录车辆图像的装置100可以通过对由车辆是否已经偏离路线、车速、方向盘角度、gsr、声音、心率、体温和压力的变化计算的单个得分求和来计算最终得分,并将最终得分超过阈值得分的时间点确定为事件时间点。
176.作为示例,用于记录车辆图像的装置100可以在非易失性存储器中存储事件时间点之前和之后10秒部分总共20秒部分的图像。
177.图6是示出通过根据本发明实施例的用于记录车辆图像的装置识别面部表情的过程的图。
178.用于记录车辆图像的装置100可以通过识别面部表情和确定情绪的技术来识别驾驶员的面部表情。
179.作为示例,识别面部表情和确定情绪的技术可以通过机器学习来实现。
180.作为示例,用于记录车辆图像的装置100可以通过相机获取驾驶员的面部图像,以感测驾驶员的面部表情。
181.作为示例,用于记录车辆图像的装置100可以识别在获取的图像中哪个部分是面部。
182.此外,用于记录车辆图像的装置100可以确定在获取的图像中被识别为面部的部分中的眉毛、嘴角、皱眉纹等,以基于眉毛的运动、嘴角是否降低以及驾驶员皱眉时是否产生皱眉纹来识别用户的面部表情。
183.参考图6,用于记录车辆图像的装置100可以识别诸如悲伤、厌恶等的面部表情。
184.作为示例,当在预定时间内识别的面部表情被确定为诸如惊讶、愤怒、烦恼、兴奋等的特定面部表情时,用于记录车辆图像的装置100可以计算与该面部表情对应的单个得分。
185.图7是示出根据本发明另一实施例的用于记录车辆图像的方法的流程图。
186.参考图7,一种用于记录车辆图像的方法可以包括获取车辆周围区域的图像(s710),获取包括驾驶员的心率、心电图、皮肤电反应(gsr)、体温、声音、面部表情和压力中的至少一个的生物信号(s720),以及确定基于生物信号获取的图像的要存储在非易失性存储器中的一些部分,并将一些部分的图像存储在非易失性存储器中(s730)。
187.获取车辆周围区域的图像(s710)可以通过图像获取装置110来执行。
188.可以通过ecg电极、静电传感器、雷达、ir相机、体温计、skt传感器、麦克风、gsr传感器和/或相机中的至少一个来执行生物信号的获取,该生物信号包括驾驶员的心率、心电图、皮肤电反应(gsr)、体温、声音、面部表情和压力中的至少一个(s720)。
189.确定基于生物信号获取的图像的要存储在非易失性存储器中的一些部分,并将一些部分的图像存储在非易失性存储器中(s730)可以包括通过对与生物信号项目对应的心率、心电图、gsr、体温、声音、面部表情和压力的一个或多个项目中的每个应用权重来计算单个得分,通过计算的单个得分计算最终得分,确定计算的最终得分超过阈值得分的事件时间点,并将分别与事件时间点之前和之后的特定时间对应的部分确定为存储在非易失性
存储器中的一些部分。
190.以上描述仅是对本发明的技术思想的说明,在不脱离本发明的基本特征的情况下,本领域技术人员可以进行各种修改和变化。
191.因此,本发明中公开的实施例并非旨在限制本发明的技术思想,而是为了说明本发明,并且本发明的技术思想的范围不受实施例的限制。本发明的范围应当被解释为由所附权利要求的范围覆盖,并且落入权利要求范围内的所有技术思想应当被解释为包括在本发明的范围内。
192.根据本发明实施例的用于记录车辆图像的装置和方法的效果将被描述如下。
193.根据本发明实施例中的至少一个,可以提供用于记录车辆图像的装置和方法,其可以使用生物信号确定要存储在不删除图像的空间中的内置相机的记录图像的图像部分,并且防止删除必要的图像。
194.此外,根据本发明实施例中的至少一个,可以提供用于记录车辆图像的装置和方法,其即使当车辆没有通过g传感器感测到事故的发生时,也在使用生物信号或车辆信号确定需要图像存储的部分的过程中提供高可靠性。
195.此外,根据本发明实施例中的至少一个,可以提供用于记录车辆图像的装置和方法,其即使当驾驶员在需要图像存储时由于恐慌不能按下开关而未能存储图像时,也通过使用生物信号或车辆信号自行确定需要图像存储的部分,有助于驾驶员的便利。
196.此外,根据本发明实施例中的至少一个,可以提供用于记录车辆图像的装置和方法,其使用生物信号或车辆信号自行确定需要图像存储的部分,并且将图像存储在不删除图像的空间中,从而允许利用图像查找事故原因并作为参考。
197.此外,可以提供通过本文件直接或间接确定的各种效果。
198.在上文中,虽然已经参考示例性实施例和附图描述了本发明,但是本发明不限于此,而是可以由本发明所属领域的技术人员进行各种修改和改变,而不脱离在所附权利要求中要求保护的本发明的精神和范围。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献