信息处理方法、非临时性计算机可读取介质、车载装置、车辆、信息处理装置以及系统与流程

1.本公开涉及信息处理方法、程序、车载装置、车辆、信息处理装置以及系统。


背景技术：

2.已知如下的技术：将在车辆的行驶过程中拍摄的图像发送给数据中心等，在数据中心中保存图像(例如参照专利文献1)。
3.现有技术文献
4.专利文献
5.专利文献1：日本特开2019-101806号公报


技术实现要素：

6.在发送在车辆的行驶过程中拍摄的全部图像时，对通信施加负荷。另外，在发送在车辆的行驶过程中拍摄的全部图像时，需要在数据中心等中保存大量的图像数据。
7.在发送在车辆的行驶过程中拍摄的图像的技术中存在改善的余地。
8.本公开的目的在于改善发送在车辆的行驶过程中拍摄的图像的技术。
9.本公开所涉及的信息处理方法是车辆中的信息处理方法，包括：
10.拍摄所述车辆的前方并保存；
11.取得所述车辆的速度的信息；以及
12.在判定为所述车辆在预定区间行驶过程中有阈值以上的速度变化时，将在包括进行该判定时的预定期间拍摄的图像发送给信息处理装置。
13.本公开所涉及的程序使搭载于车辆的车载装置执行包括如下步骤的动作：
14.拍摄所述车辆的前方并保存；
15.取得所述车辆的速度的信息；以及
16.在判定为所述车辆在预定区间行驶过程中有阈值以上的速度变化时，将在包括进行该判定时的预定期间拍摄的图像发送给信息处理装置。
17.本公开所涉及的信息处理方法是能够与车辆通信的信息处理装置中的信息处理方法，包括：
18.在从所述车辆接收到拍摄所述车辆的前方而得到的图像时，对在所述图像中是否包括道路标识进行图像解析。
19.本公开所涉及的程序使能够与车辆通信的信息处理装置执行包括如下步骤的动作：
20.在从所述车辆接收到拍摄所述车辆的前方而得到的图像时，对在所述图像中是否包括道路标识进行图像解析。
21.本公开所涉及的车载装置具备：
22.存储部，保存搭载于车辆的拍摄装置拍摄的所述车辆的前方的图像；
23.接收部，接收所述车辆的速度的信息；以及
24.控制部，判定所述车辆在预定区间行驶过程中是否有阈值以上的速度变化，
25.所述控制部在判定为有所述阈值以上的速度变化时，将在包括进行该判定时的预定期间拍摄的图像发送给信息处理装置。
26.本公开所涉及的信息处理装置具备：
27.通信部，能够与车辆通信；以及
28.控制部，在经由所述通信部从所述车辆取得拍摄所述车辆的前方而得到的图像时，对在所述图像中是否包括道路标识进行图像解析。
29.根据本公开，能够改善发送在车辆的行驶过程中拍摄的图像的技术。
附图说明
30.图1是示出本公开的实施方式所涉及的信息处理系统的结构的图。
31.图2是示出本公开的实施方式所涉及的车辆的结构的框图。
32.图3是示出本公开的实施方式所涉及的信息处理装置的结构的框图。
33.图4是示出动态标识的一个例子的图。
34.图5是示出本公开的实施方式所涉及的信息处理系统的动作的流程图。
35.图6是示出本公开的实施方式所涉及的信息处理系统的动作的流程图。
36.(符号说明)
37.1：信息处理系统；10：车辆；20：信息处理装置；30：网络；101：通信装置；102：拍摄装置；103：车载装置；104：ecu(electronic control unit，电子控制单元)；105：位置信息取得装置；106：存储部；107：控制部；108：接收部；201：通信部；202：存储部；203：输入部；204：输出部；205：控制部。
具体实施方式
38.以下，参照附图，说明本公开的实施方式。
39.图1是示出本公开的实施方式所涉及的信息处理系统1的结构的图。参照图1，说明本公开的实施方式所涉及的信息处理系统1的结构以及概要。
40.信息处理系统1具备车辆10和信息处理装置20。车辆10和信息处理装置20经由网络30能够通信地连接。网络30可以是包括移动体通信网以及因特网等的网络。
41.在图1中，将车辆10以及信息处理装置20分别各示出1台，但车辆10以及信息处理装置20也可以分别是2台以上。
42.车辆10例如是汽油车、柴油车、hv(hybrid vehicle，混合动力汽车)、phv(plug-in hybrid vehicle，插电式混合动力汽车)、ev(electric vehicle，电动汽车)或者fcv(fuel cell vehicle，燃料电池车)等任意的种类的汽车。车辆10在本实施方式中由驾驶员驾驶，但也可以以任意的等级使驾驶自动化。自动化的等级例如是sae(society of automotive engineers，美国汽车工程师学会)的分级中的等级1至等级5中的任意等级。车辆10也可以是maas(mobility as a service，出行即服务)专用车辆。
43.车辆10在行驶过程中不断地拍摄车辆10的前方。车辆10以前方的道路标识出现的方式拍摄车辆10的前方。车辆10并非将拍摄的图像全部发送给信息处理装置20，而仅在满
足预定的条件时将拍摄的图像发送给信息处理装置20。
44.作为预定的条件，车辆10正在在预定区间行驶并且有预定的阈值以上的速度变化时，将拍摄的图像发送给信息处理装置20。在此，“预定区间”是指，设置有动态标识的区间。另外，“动态标识”是指，显示内容可变的道路标识。在动态标识是限制速度的显示可变的道路标识的情况下，例如，在限制速度的显示从80km/h变化为50km/h时，驾驶员踩刹车，所以车辆10大幅减速。在这样的情况下，车辆10将在包括判定为有预定的阈值以上的速度变化时的预定期间拍摄的图像发送给信息处理装置20。由此，车辆10能够将包括显示内容变化的动态标识的图像发送给信息处理装置20。
45.信息处理装置20例如是构成为作为服务器发挥功能的专用的计算机。信息处理装置20也可以是通用的pc(personal computer，个人电脑)。信息处理装置20能够与车辆10经由网络30进行通信。
46.信息处理装置20从车辆10接收车辆10在行驶过程中拍摄的图像。信息处理装置20接收的图像是在满足预定的条件时车辆10发送的图像。
47.信息处理装置20在从车辆10接收到图像时，进行接收到的图像的图像解析。信息处理装置20通过图像解析，判定在接收到的图像中包含的动态标识的显示内容是否变化。在动态标识的显示内容变化的情况下，信息处理装置20可以将动态标识的显示内容变化的情况经由网络30配送给多个车辆10。多个车辆10包括发送来图像的车辆10和其他车辆10。
48.参照图2，说明本公开的实施方式所涉及的车辆10的结构。
49.车辆10具备通信装置101、拍摄装置102、车载装置103、多个ecu(electronic control unit，电子控制单元)104以及位置信息取得装置105。通信装置101、拍摄装置102、车载装置103、多个ecu104以及位置信息取得装置105经由例如can(controller area network，控制器局域网)等车载网络或者专用线能够相互通信地连接。
50.通信装置101包括与网络30连接的通信模块。例如，通信装置101也可以包括与lte(long term evolution，长期演进)、4g(4th generation，第四代)以及5g(5th generation第五代)等移动体通信规格对应的通信模块。车辆10经由通信装置101与网络30连接。通信装置101经由网络30发送以及接收各种信息。通信装置101能够经由网络30与信息处理装置20通信。
51.拍摄装置102例如可以是照相机。拍摄装置102能够拍摄车辆10的前方。拍摄装置102以能够拍摄处于车辆10的前方的道路标识的方式设置于车辆10。拍摄装置102在车辆10行驶的过程中不断地拍摄车辆10的前方。在图2中示出1台拍摄装置102，但也可以在车辆10上设置有多个拍摄装置102。
52.车载装置103具备存储部106、控制部107以及接收部108。车载装置103例如可以是导航装置。或者，车载装置103例如可以是包括导航功能以及音响功能的多媒体装置。
53.存储部106例如是半导体存储器、磁存储器或者光存储器等，但不限定于这些。存储部106例如也可以作为主存储装置、辅助存储装置或者高速缓冲存储器发挥功能。存储部106存储在车载装置103的动作中使用的任意的信息。例如，存储部106也可以存储系统程序、应用程序以及由通信装置101接收的各种信息等。存储于存储部106的信息例如也可以能够用经由通信装置101从网络30接收的信息更新。存储部106的一部分也可以设置于车载装置103的外部。在该情况下，设置于外部的存储部106的一部分可以经由任意的接口与车
载装置103连接。
54.存储部106保存拍摄装置102拍摄的车辆10的前方的图像。存储部106可以将拍摄装置102拍摄的车辆10的前方的图像保存预定的时间量。例如，在将拍摄装置102拍摄的图像保存在30分的期间拍摄的量的情况下，存储部106在从拍摄装置102取得超过30分的量的图像时，删除最久的图像并保存新的图像。
55.控制部107包括至少1个处理器、至少1个专用电路或者它们的组合。处理器是cpu(central processing unit，中央处理单元)或者gpu(graphics processing unit，图形处理单元)等通用处理器或者特化为特定的处理的专用处理器。专用电路例如是fpga(field-programmable gate array，现场可编程门阵列)或者asic(application specific integrated circuit，专用集成电路)。控制部107控制车载装置103的各部并且执行与车载装置103的动作有关的处理。
56.接收部108从多个ecu104接收与车辆10有关的各种车辆信息。
57.多个ecu104的各ecu104从搭载于车辆10的各种传感器收集与车辆10有关的各种车辆信息。ecu104将收集到的车辆信息发送给接收部108。
58.ecu104收集的车辆信息例如是速度、加速度、位置、前灯的状态、自动驾驶状态以及与车辆10行驶的道路有关的信息等。
59.位置信息取得装置105包括与任意的卫星测位系统对应的1个以上的接收机。例如，位置信息取得装置105也可以包括gps(global positioning system，全球定位系统)接收机。位置信息取得装置105取得车辆10的位置的测定值作为位置信息。位置信息包括例如住址、纬度、经度以及高度等。
60.参照图3，说明本公开的实施方式所涉及的信息处理装置20的结构。
61.信息处理装置20具备通信部201、存储部202、输入部203、输出部204以及控制部205。
62.通信部201包括与网络30连接的通信模块。例如，通信部201也可以包括与lan(local area network，局域网)对应的通信模块。信息处理装置20经由通信部201与网络30连接。通信部201经由网络30发送以及接收各种信息。通信部201能够经由网络30与车辆10通信。
63.存储部202例如是半导体存储器、磁存储器或者光存储器等，但不限定于这些。存储部202例如也可以作为主存储装置、辅助存储装置或者高速缓冲存储器发挥功能。存储部202存储在信息处理装置20的动作中使用的任意的信息。例如，存储部202也可以存储系统程序、应用程序以及由通信部201接收的各种信息等。存储于存储部202的信息例如也可以能够用经由通信部201从网络30接收的信息更新。存储部202的一部分也可以设置于信息处理装置20的外部。在该情况下，设置于外部的存储部202的一部分可以经由任意的接口与信息处理装置20连接。
64.输入部203包括检测用户输入，取得基于用户的操作的输入信息的1个以上的输入用接口。例如，输入部203包括物理键、静电电容键、与输出部204的显示器一体地设置的触摸屏幕或者受理声音输入的麦克风等，但不限定于此。
65.输出部204包括输出信息而通知给用户的1个以上的输出用接口。例如，输出部204包括用影像输出信息的显示器或者用声音输出信息的扬声器等，但不限定于此。
66.控制部205包括至少1个处理器、至少1个专用电路或者它们的组合。处理器是cpu或者gpu等通用处理器或者特化为特定的处理的专用处理器。专用电路例如是fpga或者asic。控制部205控制信息处理装置20的各部并且执行与信息处理装置20的动作有关的处理。
67.(信息处理系统的动作)
68.参照图1～图3，说明图1所示的信息处理系统1的动作。
69.车辆10的拍摄装置102在车辆10的行驶过程中不断地拍摄车辆10的前方。拍摄装置102拍摄的图像既可以是静止图像，也可以是运动图像。在是静止图像的情况下，拍摄装置102以预定的时间间隔连续地拍摄静止图像。
70.车载装置103的存储部106保存在车辆10的行驶过程中拍摄装置102拍摄的、车辆10的前方的图像。
71.接收部108在车辆10的行驶过程中从收集与车辆10行驶的道路有关的信息的ecu104不断地接收与车辆10行驶的道路有关的信息。接收部108将从ecu104接收到的、与车辆10行驶的道路有关的信息输出给控制部107。控制部107从接收部108取得与车辆10行驶的道路有关的信息。
72.接收部108在车辆10的行驶过程中从收集车辆10的速度的信息的ecu104不断地接收车辆10的速度的信息。接收部108将从ecu104接收到的、车辆10的速度的信息输出给控制部107。控制部107从接收部108取得车辆10的速度的信息。
73.控制部107根据从接收部108取得的、与车辆10行驶的道路有关的信息，判定车辆10是否是在预定区间行驶过程中。预定区间如上所述是设置有动态标识的区间。
74.图4示出动态标识的一个例子。图4是限制速度的显示可变的动态标识的例子。图4的(a)示出在动态标识中限制速度显示为50km/h的状态。图4的(b)示出在动态标识中限制速度显示为80km/h的状态。
75.控制部107在判定为车辆10是在预定区间行驶过程中时，根据从接收部108取得的、车辆10的速度的信息，判定车辆10的速度变化是否为预定的阈值以上。预定的阈值可以是预先设定的值，例如可以保存于存储部106。预定的阈值例如可以是30km/h。
76.控制部107在判定为车辆10的速度变化是预定的阈值以上时，将在包括进行该判定时的预定期间由拍摄装置102拍摄的图像经由通信装置101发送给信息处理装置20。预定期间可以是预先设定的任意的期间。
77.预定期间例如可以是判定为速度变化是预定的阈值以上时的前后10秒钟。在该情况下，控制部107将在判定为速度变化是预定的阈值以上时以前的10秒钟拍摄的图像和在判定为速度变化是预定的阈值以上时以后的10秒钟拍摄的图像经由通信装置101发送给信息处理装置20。
78.控制部107也可以在发送在包括判定为速度变化是预定的阈值以上时的预定期间由拍摄装置102拍摄的图像时，一并地将在该预定期间取得的车辆10的速度的信息经由通信装置101发送给信息处理装置20。
79.信息处理装置20的通信部201接收车辆10发送的图像。存储部202保存通信部201接收到的图像。
80.控制部205关于从车辆10取得的图像，进行图像解析。控制部205对在从车辆10取
得的图像中是否包括道路标识进行图像解析。
81.在图像解析的结果判定为在从车辆10取得的图像中包括道路标识的情况下，控制部205对包含于道路标识的数字进行图像解析。
82.在包含于道路标识的数字在预定期间拍摄的图像中变化的情况下，控制部205判定为在显示限制速度的动态标识中限制速度变化。
83.控制部205在判定为在动态标识中显示的限制速度变化时，可以将限制速度变化的情况经由网络30配送给多个车辆10。多个车辆10包括发送来图像的车辆10和其他车辆10。由此，能够与网络30通信的车辆10能够实时地取得在动态标识中显示的限制速度变化这样的信息。
84.在本实施方式中，控制部107在满足车辆10是在预定区间行驶过程中并且车辆10的速度变化是预定的阈值以上这样的条件时，将在包括满足该条件时的预定期间拍摄的图像发送给信息处理装置20。存储部106也可以保存记述有这样的条件的条件记述文件。在该情况下，控制部107参照在保存于存储部106的条件记述文件中记述的条件，在判定为满足该条件时，将在包括进行该判定时的预定期间拍摄的图像发送给信息处理装置20。此外，在控制部107具有存储区域的情况下，条件记述文件也可以保存于控制部107具有的存储区域。
85.参照图5以及图6所示的流程图，说明信息处理系统1的动作。图5是示出车辆10的动作的流程图。图6是示出信息处理装置20的动作的流程图。
86.最初，参照图5，说明车辆10的动作。
87.在步骤s101中，车辆10的拍摄装置102在车辆10行驶过程中不断地拍摄车辆10的前方。
88.在步骤s102中，车载装置103的存储部106保存在车辆10的行驶过程中拍摄装置102不断地拍摄的、车辆10的前方的图像。
89.在步骤s103中，车载装置103的控制部107判定车辆10是否是在预定区间行驶过程中。在判定为车辆10并非在预定区间行驶过程中的情况、即在步骤s103中判定为“否”的情况下，控制部107反复步骤s103的处理。在判定为车辆10是在预定区间行驶过程中的情况、即在步骤s103中判定为“是”的情况下，控制部107进入到步骤s104。
90.在步骤s104中，控制部107判定车辆10的速度变化是否为预定的阈值以上。在判定为车辆10的速度变化小于预定的阈值的情况、即在步骤s104中判定为“否”的情况下，控制部107返回到步骤s103。在判定为车辆10的速度变化是预定的阈值以上的情况、即在步骤s104中判定为“是”的情况下，控制部107进入到步骤s105。
91.在步骤s105中，控制部107将在包括判定为速度变化是预定的阈值以上时的预定期间由拍摄装置102拍摄的图像经由通信装置101发送给信息处理装置20。
92.接下来，参照图6，说明信息处理装置20的动作。
93.在步骤s201中，信息处理装置20的通信部201接收在图5的步骤s105中车辆10发送的图像。
94.在步骤s202中，信息处理装置20的存储部202保存通信部201接收到的图像。
95.在步骤s203中，信息处理装置20的控制部205关于从车辆10接收到的图像，进行图像解析。控制部205可以在图像解析的结果判定为在动态标识中显示的限制速度变化的情
况下，将限制速度变化的情况经由网络30配送给多个车辆10。
96.如上所述，在本实施方式所涉及的信息处理方法中，车辆10在判定为在预定区间行驶过程中有阈值以上的速度变化时，将在包括进行该判定时的预定期间拍摄的图像发送给信息处理装置20。这样，在本实施方式所涉及的信息处理方法中，车辆10并非将在行驶过程中拍摄的全部图像发送给信息处理装置20，而仅在满足预定的条件时将拍摄的图像发送给信息处理装置20。由此，本实施方式所涉及的信息处理方法能够降低车辆10与信息处理装置20之间的通信负荷。另外，本实施方式所涉及的信息处理方法能够降低信息处理装置20的存储部202为了保存由车辆10拍摄的图像而所需的容量。因此，本实施方式所涉及的信息处理方法能够改善发送在车辆10的行驶过程中拍摄的图像的技术。
97.本公开不限定于上述实施方式。例如，既可以将在框图中记载的多个块合并或者也可以分割1个块。也可以代替依照记述时序地执行流程图中记载的多个步骤，而根据执行各步骤的装置的处理能力或者根据需要，并行或者以不同的顺序执行。另外，能够在不脱离本公开的要旨的范围内变更。
98.例如，在上述实施方式中在车辆10中执行的一部分的处理动作也可以在信息处理装置20中执行。另外，在上述实施方式中在信息处理装置20中执行的一部分的处理动作也可以在车辆10中执行。
99.例如，还能够构成为使智能手机或者计算机等通用的电子设备作为上述实施方式所涉及的信息处理装置20发挥功能。具体而言，还考虑将记述有实现实施方式所涉及的信息处理装置20等的各功能的处理内容的程序储存到电子设备的存储器，通过电子设备的处理器读出并执行该程序。因此，一个实施方式所涉及的公开还能够实现为处理器能够执行的程序。