一种车辆用隔窗对话方法、装置和车辆与流程

1.本技术涉及车辆隔窗对话技术领域，具体涉及一种车辆用隔窗对话方法、车辆用隔窗对话装置以及车辆。


背景技术：

2.在车辆行驶的过程中，存在许多需要车内人员与车外人员进行交流的场景，例如在车辆缴费时需要与收费人员进行交流(包括缴纳停车费、高速费用等)，在特定情况下需要与车外人员进行沟通(例如搭车、问路、询问价格等)，目前车内人员如果想要与车外人员进行交流通常采用开启车窗的方式，以实现车内人员和车外人员对话交流，这种方式存在一些不适宜开窗对话的危险情况，例如车辆与车辆之间或车辆与行人之间发生冲突的情况或夜间女驾驶员独自驾驶需要问路的情况，均不适合采用开启车窗对话的方式。


技术实现要素：

3.本发明的目的在于提供一种车辆用隔窗对话方法来至少解决上述的一个技术问题。
4.本发明提供了下述方案：
5.根据本发明的一个方面，提供一种车辆用隔窗对话方法，所述车辆用隔窗对话方法包括：
6.获取位于车辆外的人员的基本信息；
7.获取车辆内的人员的基本信息；
8.根据所述车辆外的人员的基本信息和/或车辆内的人员的基本信息，判断是否需要生成对话通道交互信号，若是，则
9.生成对话通道交互信号并将对话通道交互信号传递给车辆内的隔窗交互组件，以使车辆外的人员以及车辆内的人员能够通过所述隔窗交互组件进行交互。
10.可选地，所述对话通道交互信号包括外内通道信号以及内外通道信号；
11.所述生成对话通道交互信号并将对话通道交互信号传递给车辆内的隔窗交互组件，以使车辆外的人员以及车辆内的人员能够通过所述隔窗交互组件进行交互包括：
12.当所述对话通道交互信号为外内通道信号时，所述车辆内的人员能够通过隔窗交互组件获取到车辆外的人员的语音信息；和/或，
13.当所述对话通道交互信号为内外通道信号时，所述车辆外的人员能够通过隔窗交互组件获取到车辆内的人员的语音信息。
14.可选地，所述车辆外的人员的基本信息包括：
15.车辆外的人员的语音信息、车辆外的人员的位置信息和车辆外的人员的视线方向信息；
16.车辆内的人员的基本信息包括：
17.车辆内的人员的语音信息、车辆内的人员的视线方向信息。
18.可选地，所述根据所述车辆外的人员的基本信息和/或车辆内的人员的基本信息，判断是否需要生成对话通道交互信号包括：
19.判断所述车辆外的人员的位置信息是否在预设范围内，若是，则
20.判断所述车辆外的人员的视线方向是否朝向车辆内的人员，若是，则判断需要生成对话通道交互信号；
21.所述生成对话通道交互信号并将对话通道交互信号传递给车辆内的隔窗交互组件，以使车辆外的人员以及车辆内的人员能够通过所述隔窗交互组件进行交互包括：
22.生成外内通道信号，从而使车辆内的人员能够通过隔窗交互组件获取到车辆外的人员的语音信息。
23.可选地，所述根据所述车辆外的人员的基本信息和/或车辆内的人员的基本信息生成对话通道交互信号包括：
24.判断所述车辆内的人员的视线方向是否朝向所述车辆外的人员的位置，若是，则判断需要生成对话通道交互信号；
25.所述生成对话通道交互信号并将对话通道交互信号传递给车辆内的隔窗交互组件，以使车辆外的人员以及车辆内的人员能够通过所述隔窗交互组件进行交互包括：
26.生成内外通道信号，从而使车辆外的人员能够通过隔窗交互组件获取到车辆内的人员的语音信息。
27.可选地，所述车辆用隔窗对话方法进一步包括：
28.获取车辆速度信息；
29.根据所述车辆外的人员的基本信息和/或车辆内的人员的基本信息生成对话通道交互信号进一步包括：
30.根据所述车辆速度信息判断车辆是否运动，若否，则
31.判断所述车辆内的人员的视线方向是否朝向所述车辆外的人员的位置。
32.可选地，在所述判断所述车辆外的人员的视线方向是否朝向车辆内的人员之后，所述根据所述车辆外的人员的基本信息和/或车辆内的人员的基本信息，判断是否需要生成对话通道交互信号进一步包括：
33.获取预设危险语数据库，所述预设危险语数据库包括至少一个预设词组；
34.识别获取到的车辆外的人员的语音信息，从而获取文本信息；
35.对获取到的文本信息进行切词，从而获取文本词；
36.将所述文本词分别与各个预设词组进行相似度计算，从而获取相似度值；
37.判断是否有一个相似度值大于阈值，若是，则
38.判断不需要生成对话通道交互信号并存储所述车辆外的人员的语音信息。
39.可选地，在判断不需要生成对话通道交互信号并存储所述车辆外的人员的语音信息之后，所述车辆用隔窗对话方法进一步包括：
40.生成车门落锁信号，并将车门落锁信号传递给车锁控制机构，以使车锁控制机构根据所述车门落锁信号进行锁车操作。
41.本技术还提供了一种车辆用隔窗对话装置，包括：
42.车辆外人员基本信息获取模块，所述车辆外人员基本信息获取模块用于获取车辆外人员的基本信息；
43.车辆内人员基本信息获取模块，所述车辆内人员基本信息获取模块用于获取车辆内人员的基本信息；
44.对话通道交互信号判断模块，所述对话通道交互信号判断模块根据所述车辆外的人员的基本信息和/或车辆内的人员的基本信息，判断是否需要生成对话通道交互信号。
45.对话通道交互信号生成模块，所述对话通道交互信号生成模块用于根据在对话通道交互信号判断模块判断为是时生成对话通道交互信号。
46.本技术还提供了一种车辆用隔窗对话系统，包括：
47.车辆用隔窗对话装置；
48.视线识别仪，所述视线识别仪设置在所述车辆上，所述视线识别仪与所述车辆用隔窗对话装置连接，所述视线识别仪用于拍摄车辆内的人员图像以及车辆外的人员图像，并根据获取到的所述车辆内的人员图像获取车辆内的人员的视线方向信息，根据获取到的所述车辆外的人员图像获取车辆外的人员的视线方向信息，将获取到的车辆内的人员的视线方向信息以及车辆外的人员的视线方向信息传递给所述车辆用隔窗对话装置；
49.位置探测装置，所述位置探测装置安装在车辆上并与所述车辆用隔窗对话装置连接，所述位置探测装置用于探测车辆外的人员的位置信息并将探测到的车辆外的人员的位置信息传递给所述车辆用隔窗对话装置；
50.隔窗交互组件，所述隔窗交互组件与所述车辆用隔窗装置连接，所述隔窗交互组件包括车内麦克风、车外麦克风、车内喇叭以及车外喇叭；当所述车辆用隔窗装置为所述隔窗交互组件发送外内通道信号时，所述车外麦克风以及车内喇叭配合工作，以使车辆内的人员能够通过隔窗交互组件获取到车辆外的人员的语音信息；当所述车辆用隔窗装置为所述隔窗交互组件发送内外通道信号时，所述车内麦克风以及车外喇叭配合工作，车辆外的人员能够通过隔窗交互组件获取到车辆内的人员的语音信息。
51.本技术的车辆用隔窗对话方法具有以下的优点：
52.在不开启车窗的情况下，无需驾驶员手动控制，通过识别车内人员和车外人员的视线方向信息，自动开启隔窗对话装置，采用这种方式，可以使得车内人员不用直接与车外人员近距离当面接触，而实现车内人员与车外人员对话交流；在一些特定情况下可以保障车内人员的人身安全，例如，在车辆与车辆之间或车辆与行人之间发生冲突时，或夜间女驾驶员独自驾驶需要问路时，均可以通过这种方式进行隔窗交流，以防某些危险情况发生。
附图说明
53.为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
54.图1是本技术一实施例的车辆用隔窗对话方法的流程示意图；
55.图2是本技术另一实施例的车辆用隔窗对话方法示意图；
56.图3是本技术另一实施例的车辆用隔窗对话方法示意图；
57.图4是本技术另一实施例的车辆用隔窗对话系统结构示意图；
58.图5是电子设备的系统架构图；
59.图6是本技术另一实施例的车辆用隔窗对话方法示意图。
具体实施方式
60.下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
61.图1是本技术一实施例的车辆用隔窗对话方法的流程示意图。
62.如图1所示的车辆用隔窗对话方法包括：
63.步骤1：获取位于车辆外的人员的基本信息；
64.步骤2：获取车辆内的人员的基本信息；
65.步骤3：根据所述车辆外的人员的基本信息和/或车辆内的人员的基本信息，判断是否需要生成对话通道交互信号；
66.步骤4：生成对话通道交互信号并将对话通道交互信号传递给车辆内的隔窗交互组件，以使车辆外的人员以及车辆内的人员能够通过所述隔窗交互组件进行交互。
67.本技术的车辆用隔窗对话方法具有以下的优点：
68.在不开启车窗的情况下，无需驾驶员手动控制，通过识别车内人员和车外人员的视线方向信息，自动开启隔窗对话装置，采用这种方式，可以使得车内人员不用直接与车外人员近距离当面接触，而实现车内人员与车外人员对话交流；在一些特定情况下可以保障车内人员的人身安全，例如，在车辆与车辆之间或车辆与行人之间发生冲突时，或夜间女驾驶员独自驾驶需要问路时均可以采用这种方式进行隔窗交流，防止某些危险情况发生。
69.在本实施例中，对话通道交互信号包括外内通道信号以及内外通道信号；
70.当对话通道交互信号为外内通道信号时，车辆内的人员能够通过隔窗交互组件获取到车辆外的人员的语音信息；和/或，
71.当对话通道交互信号为内外通道信号时，车辆外的人员能够通过隔窗交互组件获取到车辆内的人员的语音信息。
72.举例来说，如果仅仅是车辆外的人员有动机与车辆内的人员沟通，则可以只生成外内通道信号；若是车辆内的人员有动机与车辆外的人员沟通，则可以只生成内外通道信号。
73.在本实施例中，车辆外的人员的基本信息包括：
74.车辆外的人员的语音信息、车辆外的人员的位置信息和车辆外的人员的视线方向信息。
75.在本实施例中，车辆外的人员的语音信息包括通过本技术的方法传递给车辆内的人员的语音，也可以包括本技术通过拾音装置拾取到的其他语音信息。
76.车辆内的人员的基本信息包括：
77.车辆内的人员的语音信息、车辆内的人员的视线方向信息。
78.在本实施例中，车辆内的人员的语音信息包括通过本技术的方法传递给车辆外的人员的语音，也可以包括本技术通过拾音装置拾取到的其他语音信息。
79.在本实施例中，根据车辆外的人员的基本信息和/或车辆内的人员的基本信息，判断是否需要生成对话通道交互信号包括：
80.判断车辆外的人员的位置信息是否在预设范围内，若是，则
81.判断车辆外的人员的视线方向是否朝向车辆内的人员，若是，则判断需要生成对话通道交互信号；
82.生成外内通道交互信号，并将外内通道交互信号传递给车辆内的隔窗交互组件，从而使车辆内的人员能够通过隔窗交互组件获取到车辆外的人员的语音信息。
83.在本实施例中，根据车辆外的人员的基本信息和/或车辆内的人员的基本信息生成对话通道交互信号包括：
84.判断车辆内的人员的视线方向是否朝向车辆外的人员的位置，若是，则判断需要生成对话通道交互信号；
85.生成内外通道交互信号，并将内外通道交互信号传递给车辆内的隔窗交互组件，从而使车辆外的人员能够通过隔窗交互组件获取到车辆内的人员的语音信息。
86.在本实施例中，根据车辆外的人员的基本信息和/或车辆内的人员的基本信息生成对话通道交互信号进一步包括：
87.获取车辆速度信息；
88.根据车辆速度信息判断车辆是否运动，若否，则
89.判断车辆内的人员的视线方向是否朝向车辆外的人员的位置。
90.在本实施例中，在判断车辆外的人员的视线方向是否朝向车辆内的人员之后，根据车辆外的人员的基本信息和/或车辆内的人员的基本信息，判断是否需要生成对话通道交互信号进一步包括：
91.获取预设危险语数据库，预设危险语数据库包括至少一个预设词组；
92.识别获取到的车辆外的人员的语音信息，从而获取文本信息；
93.对获取到的文本信息进行切词，从而获取文本词；
94.将文本词分别与各个预设词组进行相似度计算，从而获取相似度值；
95.判断是否有一个相似度值大于阈值，若是，则
96.判断不需要生成对话通道交互信号并存储车辆外的人员的语音信息。
97.在本实施例中，在判断不需要生成对话通道交互信号并存储所述车辆外的人员的语音信息之后，车辆用隔窗对话方法进一步包括：
98.生成车门落锁信号，并将车门落锁信号传递给车锁控制机构，以使车锁控制机构根据车门落锁信号进行锁车操作。
99.本实施例还提供了一种车辆用隔窗对话装置，包括：
100.车辆外人员基本信息获取模块用于获取车辆外人员的基本信息；
101.车辆内人员基本信息获取模块用于获取车辆内人员的基本信息；
102.对话通道交互信号判断模块用于根据车辆外的人员的基本信息和/或车辆内的人员的基本信息，判断是否需要生成对话通道交互信号。
103.对话通道交互信号生成模块用于根据在对话通道交互信号判断模块判断为是时生成对话通道交互信号。
104.值得注意的是，虽然本系统只披露了车辆外人员基本信息获取模块、车辆内人员基本信息获取模块、对话通道交互信号判断模块、对话通道交互信号生成模块等基本功能模块，但并不意味着本装置仅仅局限于上述基本功能模块，相对，本发明所要表达的意思
是，在上述基本功能模块的基础之上，本领域技术人员可以结合现有技术任意添加一个或多个功能模块，形成无穷多个实施例或技术方案，也就是说本系统是开放式的而非封闭式的，不能因为本实施例仅披露了个别基本功能模块，就认为本发明权利要求的保护范围局限于上述公开的基本功能模块。
105.下面以举例的方式对本技术进行进一步详细阐述，可以理解的是，该举例并不构成对本技术的任何限制。
106.参照图2，图2示出了本技术另一实施例的车辆用隔窗对话方法示意图，具体可以包括如下步骤：
107.步骤1：获取车外人员语音信息，具体而言，在本实施例中，通过声源定位的方式来获取车外人员位置信息，参照图2，从图2中可以看出，人员可能会出现在车辆的不同位置，而本技术主要考虑的是车辆前方的人员与车内人员的交互，本实施例通过安装在车辆外的麦克风阵列的多个麦克风同时采集车外人员的语音信息，利用多个麦克风之间的信号相位差，获得车外人员的声源信号的发出位置；
108.步骤2：判断车外人员的声源位置信息是否在预设距离范围内，所述预设距离范围包括声源需要距离车辆3米之内，角度需要在 15
°‑
165
°
之间；
109.步骤3：根据预设范围内人员的语音信息和位置信息，通过车内摄像头捕捉车外人员的图像信息，在图像信息中提取车外人员的视线方向信息；
110.步骤4：基于视线识别技术，获取车外人员的视点，判断该视点沿着视线方向延伸至预设范围的位置是否与车内人员的位置在同一范围内，若是，则确定车外人员的视线观看方向朝向车内人员；
111.步骤5：若车外人员的视线观看方向朝向车内人员，则判断需要生成外内通道信号，从而使车辆内的人员能够获取到车辆外的人员的语音信息。
112.在另一实施例中，本技术的车辆用隔窗对话方法还包括：
113.步骤1：获取车外人员的语音信息后，将该语音信息生成文本信息，对文本信息进行切词处理，获取文本词，例如，车外人员的语音信息为“你是不是找x”，将该文本信息切词为“你”、“是不是”、“找”、“x”四个文本词，其中，“x”是不文明用语；
114.步骤2：判断文本词中是否包含与预设危险语数据库中的预设词相似度大于阈值的词语，若是，则不生成对话通道交互信号，预设危险语数据库中的预设词包括不文明用语或其他敏感词语；上述举例文本词中的“x”与预设危险语数据库中的预设词相似度超过阈值，对比结果为敏感词，则判断不生成对话通道交互信号，并存储车外人员的语音信息，以备后续需要时留有证据；
115.步骤3：当判断车外人员的语音信息包含有危险语时，则认为车外人员存在过激行为，可能会对车内人员造成人身伤害，为防止危险情况发生，生成车门落锁信号，并发送给车锁控制机构，控制车辆进行锁车操作以保障车内人员安全；
116.可以理解的是，该锁车操作可以被车内人员取消。
117.参照图3，图3示出了本技术另一实施例的车辆用隔窗对话方法示意图，具体可以包括如下步骤：
118.步骤1：通过车内摄像头获取车内人员的视线方向信息；
119.步骤2：基于视线识别技术，获取车内人员的视点，判断该视点沿着视线方向延伸
至预设范围的位置是否与车外发出语音信息的人员位置在同一范围内，若是，则确定车内人员的视线观看方向朝向车外发出语音信息的人员位置；举例来说，参见图6，假设车内人员视线与车身垂直线之间的夹角为α，车外人员和车内人员连线与车身垂直线之间的夹角为β，如果-5
°
(可以是其他值) 《β-α《-5
°
(可以是其他值)，则代表车内用户视线朝向车外用户。步骤3：若车内人员的视线观看方向朝向车外发出语音信息的人员位置，则认为车内人员有向车辆外的人员进行语音对话的意向，生成内外通道信号，从而使车辆外的人员能够通过隔窗交互组件获取到车辆内的人员的语音信息。
120.参照图4，图4示出了本技术另一实施例的车辆用隔窗对话系统的结构示意图，具体可以包括：
121.在本实施例中，隔窗对话装置接收到内外通道信号后，为实现车内人员对车外人员说话，且车外人员能够听到车内人员的语音信息，隔窗对话装置控制车内麦克风采集车内人员的语音信息，并将所采集的语音信息进行音频降噪、回声消除、人声增强等处理，再发送给车外扬声器，车外扬声器控制音量大小，采用合适的音量播放车内人员的语音信息，使车外人员能够清晰的听到车内人员讲话的内容，完成车内语音信息的车外播放；
122.在本实施例中，隔窗对话装置接收到外内通道信号后，为实现车外人员对车内人员说话，且车内人员能够听到车外人员的语音信息，隔窗对话装置控制车外麦克风采集车外人员的语音信息，并将所采集的语音信息进行音频降噪、回声消除、人声增强等处理，再发送给车内扬声器，车内扬声器控制音量大小，采用合适的音量播放车外人员的语音信息，使得车内人员能够清晰的听到车外人员的讲话内容，完成车外语音信息的车内播放。
123.参见图5，本技术还提供了一种电子设备，包括：处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器中存储有计算机程序，当计算机程序被处理器执行时，使得处理器执行车辆用隔窗对话方法的步骤。
124.本技术还提供了一种计算机可读存储介质，其存储有可由电子设备执行的计算机程序，当计算机程序在电子设备上运行时，使得电子设备执行车辆用隔窗对话方法的步骤。
125.上述电子设备提到的通信总线可以是外设部件互连标准(peripheralcomponent interconnect，pci)总线或扩展工业标准结构(extended industrystandard architecture，eisa)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
126.电子设备包括硬件层，运行在硬件层之上的操作系统层，以及运行在操作系统上的应用层。该硬件层包括中央处理器(cpu，central processing unit)、内存管理单元(mmu，memory management unit)和内存等硬件。该操作系统可以是任意一种或多种通过进程(process)实现电子设备控制的计算机操作系统，例如，linux操作系统、unix操作系统、android操作系统、ios操作系统或 windows操作系统等。并且在本发明实施例中该电子设备可以是智能手机、平板电脑等手持设备，也可以是桌面计算机、便携式计算机等电子设备，本发明实施例中并未特别限定。
127.本发明实施例中的电子设备控制的执行主体可以是电子设备，或者是电子设备中能够调用程序并执行程序的功能模块。电子设备可以获取到存储介质对应的固件，存储介质对应的固件由供应商提供，不同存储介质对应的固件可以相同可以不同，在此不做限定。电子设备获取到存储介质对应的固件后，可以将该存储介质对应的固件写入存储介质中，
具体地是往该存储介质中烧入该存储介质对应固件。将固件烧入存储介质的过程可以采用现有技术实现，在本发明实施例中不做赘述。
128.电子设备还可以获取到存储介质对应的重置命令，存储介质对应的重置命令由供应商提供，不同存储介质对应的重置命令可以相同可以不同，在此不做限定。
129.此时电子设备的存储介质为写入了对应的固件的存储介质，电子设备可以在写入了对应的固件的存储介质中响应该存储介质对应的重置命令，从而电子设备根据存储介质对应的重置命令，对该写入对应的固件的存储介质进行重置。根据重置命令对存储介质进行重置的过程可以现有技术实现，在本发明实施例中不做赘述。
130.为了描述的方便，描述以上装置时以功能分为各种单元、模块分别描述。当然在实施本技术时可以把各单元、模块的功能在同一个或多个软件和/或硬件中实现。
131.本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语(包括技术术语和科学术语)，具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语，应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非被特定定义，否则不会用理想化或过于正式的含义来解释。
132.对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
133.通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本技术各个实施方式或者实施方式的某些部分所述的方法。
134.本发明在公开了与一种车辆用隔窗对话方法和系统对应的电子设备和存储介质的基础之上，还公开一种车辆用隔窗对话系统的车辆，具体包括：
135.电子设备，用于实现车辆用隔窗对话方法；
136.处理器，处理器运行程序，当程序运行时从电子设备输出的数据执行的车辆用隔窗对话方法的步骤；
137.存储介质，用于存储程序，程序在运行时对于从电子设备输出的数据执行车辆用隔窗对话方法的步骤。
138.最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。