车辆以及车辆的控制方法与流程

1.本公开涉及车辆以及车辆的控制方法。


背景技术：

2.如宠物等那样的无法通过语言与人交流的生物体无法将自己的精神状态以及健康状态通过语言传递给他人。因此，这样的生物体需要监护人的保护。
3.例如专利文献1所公开的技术对宠物的面部图像进行摄影，根据摄影到的面部图像来判断宠物的健康状态。然后，当判断为宠物的健康状态存在异常时，对带着宠物的主人提示警告。由此，作为宠物的监护人的主人能够掌握宠物的健康状态存在异常这一情况，根据需要进行应对。
4.现有技术文献
5.专利文献
6.专利文献1：日本特开2009-165416号公报


技术实现要素：

7.在专利文献1所公开的技术中，在主人不在宠物的附近的情况下，主人无法掌握宠物的精神状态。
8.例如在如宠物那样的需要监护人的保护的生物体的监护人不在生物体的附近的情况下使生物体的精神状态稳定的技术存在改善的余地。
9.本公开的目的在于改善在需要监护人的保护的生物体的监护人不在生物体的附近的情况下使生物体的精神状态稳定的技术。
10.本公开提供一种车辆，具备：
11.摄像机，能够对车内进行摄影；
12.输出装置，能够输出图像以及声音；
13.香气输出装置，能够输出香气；以及
14.控制装置，
15.所述控制装置根据所述摄像机摄影到的图像，判定是否仅宠物或者婴幼儿乘坐，
16.当判定为仅宠物或者婴幼儿乘坐时，执行输出图像、声音以及香气中的至少任意一个的焦虑降低动作。
17.本公开提供一种车辆的控制方法，所述车辆具备：
18.摄像机，能够对车内进行摄影；
19.输出装置，能够输出图像以及声音；以及
20.香气输出装置，能够输出香气，
21.其中，所述控制方法包括：
22.根据所述摄像机摄影到的图像，判定是否仅宠物或者婴幼儿乘坐；以及
23.当判定为仅宠物或者婴幼儿乘坐时，执行输出图像、声音以及香气中的至少任意
一个的焦虑降低动作。
24.根据本公开，能够改善在需要监护人的保护的生物体的监护人不在生物体的附近的情况下使生物体的精神状态稳定的技术。
附图说明
25.图1是示出本公开的实施方式的车辆控制系统的结构的图。
26.图2是示出本公开的实施方式的车辆的结构的框图。
27.图3是示出本公开的实施方式的终端装置的结构的框图。
28.图4是示出本公开的实施方式的车辆的动作的流程图。
29.符号说明
30.1：车辆控制系统；10：车辆；20：终端装置；30：网络；101：通信装置；102：存储装置；103：控制装置；104：摄像机；105：温度传感器；106：输出装置；107：香气输出装置；108：空调装置；109：报告装置；201：通信部；202：存储部；203：输入部；204：输出部；205：控制部。
具体实施方式
31.以下，参照附图说明本公开的实施方式。
32.图1是示出本公开的实施方式的车辆控制系统1的结构的图。参照图1说明本公开的实施方式的车辆控制系统1的结构以及概要。
33.车辆控制系统1具备车辆10和终端装置20。车辆10与终端装置20经由网络30能够通信地连接。网络30可以是包括移动体通信网以及因特网等的网络。
34.在图1中，将车辆10以及终端装置20分别各示出了1台，但车辆10以及终端装置20也可以分别为两台以上。
35.车辆10例如是汽油车、柴油车、hv(hybrid vehicle，混合动力汽车)、phv(plug－in hybrid vehicle，插电式混合动力车)、ev(electric vehicle，电动汽车)、fcv(fuel cell vehicle，燃料电池汽车)等任意种类的汽车。车辆10也可以按照任意的等级使驾驶自动化。自动化的等级例如是sae(society of automotive engineers，汽车工程师学会)的等级划分下的等级1至等级5中的任意等级。车辆10也可以是maas(mobility as a service，出行即服务)专用车辆。车辆10能够经由网络30而与终端装置20进行通信。
36.车辆10判定在车辆10的内部是否仅作为需要监护人的保护的生物体的宠物或者婴幼儿乘坐。车辆10当判定为仅宠物或者婴幼儿乘坐时，执行用于降低宠物或者婴幼儿的焦虑的焦虑降低动作。焦虑降低动作是输出图像、声音以及香气中的至少任意一个的动作。宠物或者婴幼儿当处于监护人未同乘于车辆10的状况时可能感到焦虑，但车辆10通过执行焦虑降低动作，能够降低宠物或者婴幼儿感到的焦虑。
37.终端装置20是宠物或者婴幼儿的监护人拥有的装置。监护人可以是车辆10的驾驶员，也可以是驾驶员以外的人员。宠物或者婴幼儿的监护人是谁能够在车辆10中预先设定。
38.终端装置20例如可以是智能手机或者平板等。终端装置20能够经由网络30而与车辆10进行通信。
39.参照图2说明本公开的实施方式的车辆10的结构。
40.车辆10具备通信装置101、存储装置102、控制装置103、摄像机104、温度传感器
105、输出装置106、香气输出装置107、空调装置108以及报告装置109。通信装置101、存储装置102、控制装置103、摄像机104、温度传感器105、输出装置106、香气输出装置107、空调装置108以及报告装置109例如能够经由can(controller area network，控制器局域网)等车载网络或者专用线相互通信地连接。
41.通信装置101包括与网络30连接的通信模块。例如，通信装置101也可以包括与lte(long term evolution。长期演进)、4g(4th generation，第四代)、5g(5th generation，第五代)等移动体通信标准对应的通信模块。在一个实施方式中，车辆10经由通信装置101连接于网络30。通信装置101经由网络30发送以及接收各种信息。通信装置101能够经由网络30而与终端装置20进行通信。
42.存储装置102例如是半导体存储器、磁存储器、光存储器等，但不限定于这些。存储装置102例如也可以作为主存储装置、辅助存储装置或者高速缓存存储器发挥功能。存储装置102存储用于车辆10的动作的任意的信息。例如，存储装置102也可以存储系统程序、应用程序、由通信装置101接收到的各种信息等。存储于存储装置102的信息例如也可以是能够用经由通信装置101从网络30接收的信息进行更新。
43.控制装置103包括至少1个处理器、至少1个专用电路或者它们的组合。处理器是cpu(central processing unit，中央处理单元)或者gpu(graphics processing unit)等通用处理器或者专用于特定的处理的专用处理器。专用电路例如是fpga(field－programmable gate array，现场可编程门阵列)或者asic(application specific integrated circuit，专用集成电路)。控制装置103一边控制车辆10的各部分，一边执行与车辆10的动作有关的处理。
44.摄像机104能够对车辆10的内部进行摄影。摄像机104可以是专用的摄像机，也可以是内置于如行车记录仪那样的其它设备的摄像机。摄像机104对乘坐于车辆10的宠物以及人进行摄影。摄像机104摄影的图像可以是动态图像，也可以是静态图像。
45.温度传感器105能够检测乘坐于车辆10的宠物以及人的体温。温度传感器105例如可以包括红外线温度传感器或者热像仪。温度传感器105可以还能够检测车辆10的内部的温度。
46.输出装置106能够输出图像以及声音。输出装置106包括输出图像的显示器。输出装置106包括输出声音的扬声器。输出装置106根据由控制装置103进行的控制，输出各种图像以及声音。
47.香气输出装置107能够输出香气。香气输出装置107根据由控制装置103进行的控制，输出各种香气。香气输出装置107例如可以具备几种香气的储料器。香气输出装置107例如可以通过风扇将香气输出到外部。
48.空调装置108能够吹送热风或者冷风。空调装置108具有通过吹送热风或者冷风从而调整车辆10的车内的温度的空调器功能。
49.报告装置109能够通过声音将警告报告给车辆10的周边。报告装置109包括能够对车辆10的周边输出声音的扬声器。
50.参照图3说明本公开的实施方式的终端装置20的结构。
51.终端装置20具备通信部201、存储部202、输入部203、输出部204以及控制部205。
52.通信部201包括与网络30连接的通信模块。例如，通信部201也可以包括与lte、4g、
5g等移动体通信标准对应的通信模块。在一个实施方式中，终端装置20经由通信部201连接于网络30。通信部201经由网络30发送以及接收各种信息。通信部201能够经由网络30而与车辆10进行通信。
53.存储部202例如是半导体存储器、磁存储器、光存储器等，但不限定于这些。存储部202例如也可以作为主存储装置、辅助存储装置或者高速缓存存储器发挥功能。存储部202存储用于终端装置20的动作的任意的信息。例如，存储部202也可以存储系统程序、应用程序、由通信部201接收到的各种信息等。存储于存储部202的信息例如也可以能够用经由通信部201从网络30接收的信息进行更新。存储部202的一部分也可以设置于终端装置20的外部。在该情况下，设置于外部的存储部202的一部分可以经由任意的接口而与终端装置20连接。
54.输入部203包括检测用户输入而获取基于用户的操作的输入信息的1个以上的输入用接口。例如，输入部203包括物理键、静电电容键、与输出部204的显示器一体地设置的触摸屏、受理声音输入的麦克风等，但不限定于此。
55.输出部204包括输出信息来通知用户的1个以上的输出用接口。例如，输出部204包括通过图像来输出信息的显示器、通过声音来输出信息的扬声器等，但不限定于此。
56.控制部205包括至少1个处理器、至少1个专用电路或者它们的组合。处理器是cpu或者gpu等通用处理器或者专用于特定的处理的专用处理器。专用电路例如是fpga或者asic。控制部205一边控制终端装置20的各部分，一边执行与终端装置20的动作有关的处理。
57.(车辆控制系统的动作)
58.参照图1～图3等，说明图1所示的车辆控制系统1的动作。
59.车辆10的摄像机104对车辆10的内部始终进行摄影。控制装置103获取摄像机104摄影到的图像。控制装置103进行从摄像机104获取到的图像的图像解析。控制装置103通过进行从摄像机104获取到的图像的图像解析，从而判定在车辆10的内部是否乘坐着人。另外，控制装置103通过进行从摄像机104获取到的图像的图像解析，从而判定在车辆10的内部是否乘坐着宠物。
60.控制装置103在判定为在车辆10的内部乘坐着人的情况下，通过图像解析，判定所乘坐的人是否为婴幼儿。控制装置103例如可以根据图像中映现的人的大小，判定所乘坐的人是否为婴幼儿。另外，控制装置103例如可以根据图像中映现的人是否坐在儿童座位，判定所乘坐的人是否为婴幼儿。
61.控制装置103在判定为在车辆10的内部乘坐着人的情况下，当判定为人坐在驾驶座时，将坐在驾驶座的人判定为是车辆10的驾驶员。
62.控制装置103始终进行从摄像机104获取到的图像的图像解析。当从在图像中映现驾驶员的状态转移到在图像中未映现驾驶员的状态时，控制装置103判定为驾驶员从车辆10下车。
63.控制装置103当判定为驾驶员从车辆10下车时，判定是否仅宠物或者婴幼儿乘坐于车辆10。此时，控制装置34如果判定为驾驶员以外的非婴幼儿的人乘坐于车辆10，则不判定为“仅宠物或者婴幼儿乘坐于车辆10”。例如，在判定为在副驾驶座乘坐着大人的情况下，控制装置34不判定为“仅宠物或者婴幼儿乘坐于车辆10”。
64.控制装置103当判定为仅宠物或者婴幼儿乘坐于车辆10时，执行用于降低宠物或者婴幼儿感到的焦虑的焦虑降低动作。在此，焦虑降低动作是在车辆10的内部输出图像、声音以及香气中的至少任意一个的动作。
65.这样，在仅宠物或者婴幼儿乘坐于车辆10的情况下，控制装置103执行焦虑降低动作，从而车辆10能够降低宠物或者婴幼儿感到的焦虑。
66.控制装置103在使图像或者声音输出的情况下，控制输出装置106输出图像或者声音。控制装置103在使香气输出的情况下，控制香气输出装置107输出香气。
67.在执行焦虑降低动作时输出装置106输出的图像是能够降低宠物或者婴幼儿的焦虑的任意的图像。输出装置106输出的图像可以是动态图像，也可以是静态图像。输出装置106例如可以输出监护人的笑脸的图像、玩具的图像、动画等。输出装置106输出的图像的数据存储于存储装置102。
68.在执行焦虑降低动作时输出装置106输出的声音是能够降低宠物或者婴幼儿的焦虑的任意的声音。输出装置106例如可以输出监护人的声音、歌曲、音乐等。输出装置106输出的声音的数据保存于存储装置102。
69.在执行焦虑降低动作时香气输出装置107输出的香气是能够降低宠物或者婴幼儿的焦虑的任意的香气。香气输出装置107例如可以输出监护人的香气、植物的香气、食物的香气等。
70.控制装置103在执行焦虑降低动作时，可以连续地执行焦虑降低动作，也可以断续地执行。在连续地执行的情况以及断续地执行的情况中的任一情况下，控制装置103都可以随着时间的经过而切换要输出的图像、声音以及香气的内容。控制装置103可以按照预定的时间间隔切换要输出的图像、声音以及香气的内容，也可以随机地切换。
71.控制装置103可以仅输出图像、声音以及香气中的任意一个，也可以输出多个组合。
72.摄像机104在控制装置103执行焦虑降低动作的期间，也对车辆10的内部进行摄影。控制装置103进行在焦虑降低动作的执行过程中从摄像机104获取到的图像的图像解析。控制装置103通过进行在焦虑降低动作的执行过程中从摄像机104获取到的图像的图像解析，从而判定作为宠物或者婴幼儿感到的焦虑的指标的焦虑度。控制装置103例如可以通过对宠物或者婴幼儿的表情进行解析，从而判定焦虑度。
73.控制装置103可以在断续地执行焦虑降低动作的情况下，根据判定出的焦虑度，调整断续地执行焦虑降低动作时的时间间隔。控制装置103例如可以焦虑度越大越缩短断续地执行焦虑降低动作时的时间间隔。
74.控制装置103可以根据判定出的焦虑度，变更在执行焦虑降低动作时输出的图像、声音或者香气的种类。控制装置103例如可以以随着焦虑度变大而输出降低焦虑的效果大的图像、声音或者香气的方式，变更图像、声音或者香气的种类。
75.控制装置103当执行焦虑降低动作时，根据在执行焦虑降低动作之前摄像机104摄影到的图像和在执行焦虑降低动作之后摄像机104摄影到的图像，判定宠物或者婴幼儿感到的焦虑的降低效果。控制装置103例如可以通过计算根据在执行焦虑降低动作之前摄像机104摄影到的图像而判定出的焦虑度与根据在执行焦虑降低动作之后摄像机104摄影到的图像而判定出的焦虑度的差分，从而判定焦虑的降低效果。
76.控制装置103当判定出焦虑的降低效果时，将此时执行的焦虑降低动作与焦虑的降低效果关联起来存储于存储装置102。控制装置103可以根据这样关联起来存储而积蓄的、焦虑降低动作和焦虑的降低效果的数据，对焦虑降低动作与焦虑的降低效果的关联进行机器学习。
77.温度传感器105检测宠物或者婴幼儿的体温。控制装置103从温度传感器105获取温度传感器105检测到的宠物或者婴幼儿的体温。
78.控制装置103根据从温度传感器105获取到的宠物或者婴幼儿的体温，调整空调装置108的动作。控制装置103例如以随着宠物或者婴幼儿的体温变高使空调装置108的制冷的强度变强的方式，调整空调装置108的动作。
79.控制装置103通过进行在焦虑降低动作的执行过程中从摄像机104获取到的图像的图像解析，从而判定宠物或者婴幼儿是否产生异常状态。控制装置103例如在焦虑度为预定的阈值以上的情况下，判定为宠物或者婴幼儿产生异常状态。
80.控制装置103当判定为宠物或者婴幼儿产生异常状态时，经由通信装置101将警告发送到宠物或者婴幼儿的监护人的终端装置20。由此，持有接收到警告的终端装置20的监护人能够认识到宠物或者婴幼儿产生异常状态，返回到车辆10保护宠物或者婴幼儿。
81.控制装置103也可以当判定为宠物或者婴幼儿产生异常状态时，使报告装置109报告警告。报告装置109能够将警告报告给车辆10的周边。因此，即使宠物或者婴幼儿的监护人不在车辆10的附近的情况下，也能够使处于车辆10的周边的人注意到宠物或者婴幼儿的异常，保护宠物或者婴幼儿。
82.报告装置109报告的警告也可以包括表示允许损坏车辆10的消息。由于包括这样的消息，从而处于车辆10的附近而注意到宠物或者婴幼儿的异常的人能够不迟疑地损坏车辆10的车窗等，保护宠物或者婴幼儿。
83.这样，在判定为宠物或者婴幼儿产生异常状态的情况下，控制装置103使报告装置109报告警告，从而车辆10即使在监护人不在宠物或者婴幼儿的附近的情况下，也能够提高宠物或者婴幼儿的安全性。
84.参照图4所示的流程图说明车辆10的动作。
85.在步骤s101中，车辆10的控制装置103判定驾驶员是否从车辆10下车。当判定为驾驶员未从车辆10下车时(步骤s101的否)，控制装置103重复步骤s101的动作。当判定为驾驶员从车辆10下车时(步骤s101的是)，控制装置103进入到步骤s102。
86.在步骤s102中，控制装置103判定是否仅宠物或者婴幼儿乘坐于车辆10。当判定为宠物或者婴幼儿以外的人也乘坐于车辆10时(步骤s102的否)，控制装置103重复进行步骤s102的动作。当判定为仅宠物或者婴幼儿乘坐于车辆10时(步骤s102的是)，控制装置103进入到步骤s103。
87.在步骤s103中，控制装置103执行焦虑降低动作。
88.如上所述，在本实施方式的车辆10中，控制装置103根据摄像机104摄影到的图像，判定是否仅宠物或者婴幼儿乘坐。控制装置103当判定为仅宠物或者婴幼儿乘坐时，执行输出图像、声音以及香气中的至少任意一个的焦虑降低动作。由此，即使在仅宠物或者婴幼儿乘坐于车辆10，监护人不在宠物或者婴幼儿的附近的情况下，也能够降低宠物或者婴幼儿的焦虑，使宠物或者婴幼儿的精神状态稳定。因而，本实施方式的车辆10能够改善在如宠物
或者婴幼儿那样的需要监护人的保护的生物体的监护人不在生物体的附近的情况下使生物体的精神状态稳定的技术。
89.本公开并不限定于上述实施方式。例如，可以将框图所记载的多个框进行合并，或者也可以对1个框进行分割。也可以不依照记述而以时间序列执行流程图所记载的多个步骤，而根据执行各步骤的装置的处理能力，或者根据需要，并行地或者按照不同的顺序执行。除此之外，能够进行不脱离本公开的要旨的范围内的变更。
90.例如，还能够构成为使计算机等通用的电子设备作为上述实施方式的车辆10的控制装置103发挥功能。具体而言，能够将记述有实现实施方式的车辆10的控制装置103等的各功能的处理内容的程序保存于电子设备的存储器，由电子设备的处理器读出该程序而执行。因而，一个实施方式的公开也能够作为处理器能够执行的程序而实现。
91.例如，在上述实施方式中，作为需要监护人的保护的生物体，将宠物以及婴幼儿举为例子而进行了说明，但需要监护人的保护的生物体不限于此。例如，需要监护人的保护的生物体包括老年人、痴呆症患者等。