迎宾方法、电子设备及介质与流程

1.本发明涉及车辆领域，具体而言，涉及一种迎宾方法、电子设备及介质。


背景技术：

2.随着经济社会的发展，汽车数量也是与日俱增，人们对汽车的品质要求也越来越高，各种智能设备逐步加入到汽车座舱中，以丰富用户的用车体验。带有迎宾功能的汽车也越来越多，当用户打开车门进入车内时，车载系统会播报一段欢迎语，但通常这段欢迎语是固定的，不具有个性化。
3.有鉴于此，特提出本发明。


技术实现要素：

4.本发明的目的在于提供一种迎宾方法、电子设备及介质，以实现生成个性化的欢迎语和虚拟助手朝向、提高人机交互的趣味性、丰富用户的用车体验、智能化程度高的效果。
5.为了实现上述目的，本发明采用以下技术方案：
6.第一方面，本发明提供了一种迎宾方法，适用于车机，包括：
7.根据车内图像，确定人脸位置，以及人数和/或性别；
8.根据所述人数和/或性别，生成欢迎语；
9.根据所述人脸位置，确定虚拟助手朝向；
10.按所述虚拟助手朝向调整虚拟助手，播报所述欢迎语。
11.第二方面，本发明提供了一种电子设备，包括：
12.至少一个处理器，以及与至少一个所述处理器通信连接的存储器；
13.其中，所述存储器存储有可被至少一个所述处理器执行的指令，所述指令被至少一个所述处理器执行，以使至少一个所述处理器能够执行上述的方法。
14.第三方面，本发明提供了一种介质，所述介质上存储有计算机指令，所述计算机指令用于使所述计算机执行上述的方法。
15.与现有技术相比，本发明的有益效果为：
16.本发明提供的迎宾方法首先根据车内图像，确定人脸位置，以及人数和/或性别，简单便捷；再根据所述人数和/或性别，生成欢迎语，该欢迎语与现有的固定式的欢迎语不同，更具个性化；根据所述人脸位置，确定虚拟助手朝向，改变了现有的固定朝向的虚拟助手，便于用户观看清楚虚拟助手及其动作表情，以及与虚拟助手互动，提高了人机交互的趣味性；最后按所述虚拟助手朝向调整虚拟助手，播报所述欢迎语，提高用户体验，智能化程度更高。
附图说明
17.为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体
实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
18.图1是实施例1提供的迎宾方法的流程图；
19.图2是实施例2提供的迎宾方法的流程图；
20.图3是实施例3提供的迎宾方法的流程图；
21.图4是实施例4提供的电子设备的结构示意图。
具体实施方式
22.以下结合附图对本技术的示范性实施例做出说明，其中包括本技术实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本技术的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
23.实施例1
24.图1是本实施例提供的一种迎宾方法的流程图，本实施例适用于在车辆乘员上车之后进行迎宾。该方法可以由迎宾装置来执行，该装置可以由软件和/或硬件构成，并一般集成在电子设备中。
25.参见图1，上述迎宾方法适用于车机，包括以下步骤：
26.s110、根据车内图像，确定人脸位置，以及人数和/或性别。
27.车内图像是指车厢内的图像，包括车内人员的图像和车辆座椅的图像。车内图像可由摄像头采集得到。
28.优选地，所述根据车内图像，确定人脸位置，以及人数和/或性别包括：
29.根据车内图像，确定人脸图像、人脸位置和人数；
30.根据人脸图像，确定性别。
31.本优选方式首先根据车内图像确定人脸图像、人脸位置和人数，再根据人脸图像确定性别，具体地，可将人脸图像输入到性别识别模型中，从而判断出人脸图像对应的性别。应当理解的是，上述人脸图像包括主驾驶位人脸图像和其他座位人脸图像，其中其他座位是指车厢内除主驾驶位之外的座位。
32.s120、根据所述人数和/或性别，生成欢迎语。
33.可选地，所述根据所述人数和/或性别，生成欢迎语包括：
34.将所述人数和/或性别，与第一预设信息匹配；
35.根据匹配结果，生成欢迎语；
36.其中，所述第一预设信息为预设欢迎语与预设人数、性别的对应关系。
37.上述优选实施方式先将人数和/或性别，与第一预设信息匹配，再根据匹配结果生成欢迎语，简单可靠。其中第一预设信息是出厂前已经预设在电子设备中的，也可以是用户在后续使用过程中结合实际情况自行修正的。
38.示例性地，若车内人员信息中人数为1人，则生成欢迎语例如“欢迎您乘车”；若车内人员信息中人数为2人，则生成欢迎语例如“欢迎您们乘车”或“欢迎各位乘车”；若车内人员为女性，则生成欢迎语例如“美女，欢迎乘车”；若车内人员为男性，则生成欢迎语例如“帅
哥，欢迎乘车”；若车内人员为女性，且为2人，则生成欢迎语例如“各位美女，欢迎乘车”。
39.s130、根据所述人脸位置，确定虚拟助手朝向。
40.其中，虚拟助手是指车机上显示的或三维(立体)投影仪投影后显示的虚拟人物，该虚拟人物可用于迎宾、与用户交互等。
41.优选地，所述根据所述人脸位置，确定虚拟助手朝向包括：
42.根据所述人脸位置，确定所述人脸位置与虚拟助手位置的相对关系；
43.根据所述相对关系，确定虚拟助手朝向。
44.示例性地，假设车机位于中控台的中央，若人脸位置位于虚拟助手位置的右前方，则虚拟助手朝向右前方；若人脸位置位于虚拟助手位置的左右两侧，则虚拟助手朝向正前方。其中以虚拟助手面向车厢内为前方，以上右前方和正前方均以该前方为基础。
45.需要说明的是，本实施例中s120、s130的顺序仅为示例，实际上二者的先后顺序可以任意调换，或者同时发生。
46.s140、按所述虚拟助手朝向调整虚拟助手，播报所述欢迎语。
47.本步骤按照s130确定的虚拟助手朝向来调整虚拟助手，并播报s120生成的欢迎语，完成迎宾。
48.上述迎宾方法首先根据车内图像，确定人脸位置，以及人数和/或性别，简单便捷；再根据所述人数和/或性别，生成欢迎语，该欢迎语与现有的固定式的欢迎语不同，更具个性化；根据所述人脸位置，确定虚拟助手朝向，改变了现有的固定朝向的虚拟助手，便于用户观看清楚虚拟助手及其动作表情，以及与虚拟助手互动，提高了人机交互的趣味性；最后按所述虚拟助手朝向调整虚拟助手，播报所述欢迎语，提高用户体验，智能化程度更高。
49.进一步地，在所述根据车内图像，确定人脸位置，以及人数和/或性别之前，还包括：
50.获取车门开启后的车内视频流；
51.在车门关闭后，从所述车内视频流中抽取当前时间戳的视频帧，确定车内图像。
52.如上所述，本实施例中的车内图像是根据车门开启后的车内视频流得到的。其中，当前时间戳是指准备进行迎宾的时间戳。
53.实施例2
54.参见图2，本实施例提供了另一种迎宾方法，适用于车机，包括：
55.s210、根据车内图像，确定人脸位置，以及人数和/或性别。
56.s220、根据车内图像，确定主驾驶位人脸图像。
57.具体地，所述根据车内图像，确定主驾驶位人脸图像包括：
58.根据车内图像，定位主驾驶位；根据主驾驶位，确定主驾驶位人脸图像。
59.示例性地，若车厢内前排和后排各有一个摄像头，则前排摄像头采集的图像中右侧的驾驶位为主驾驶位，该主驾驶位上的人脸图像即为主驾驶位人脸图像。
60.需要说明的是，本实施例中s210、s220的顺序仅为示例，实际上二者的先后顺序可以任意调换，或者同时发生。
61.s230、根据所述人数和/或性别，生成欢迎语。
62.s240、根据所述人脸位置，确定虚拟助手朝向。
63.s250、根据所述主驾驶位人脸图像，生成虚拟助手形象。
64.优选地，所述根据主驾驶位人脸图像，生成虚拟助手形象包括：
65.将主驾驶位人脸图像中的人脸数据或形象特征输入到预先设定的模型中，由所述模型生成虚拟助手形象；
66.其中，所述人脸数据包括头发颜色、头发长度、额头宽度、额头高度、眉毛长度、眼睛大小、鼻子大小、嘴巴大小、脸庞宽度、下巴长度和耳朵大小；所述形象特征包括头发、额头、眉毛、眼睛、鼻子、嘴巴、脸庞、下巴和耳朵。
67.当将主驾驶位人脸图像中的人脸数据输入到预先设定的模型中时，以上数据经模型的计算和融合，从而自动生成虚拟助手形象。当将主驾驶位人脸图像中的形象特征输入到预先设定的模型中时，不同的特征在该模型中直接进行组合，从而生成虚拟助手形象。其中，预先设定的模型可采用本领域可实现的对于虚拟人物形象设计模型中的任意一种，本实施例对此不做特别限制。
68.需要说明的是，本实施例中s230、s240、s250的顺序仅为示例，实际上三者的先后顺序可以任意调换，或者同时发生。
69.s260、按所述虚拟助手朝向调整虚拟助手，播报所述欢迎语。
70.以上s210、s230、s240、s260与实施例1中的相关步骤相同，此处不再赘述。
71.本实施例通过根据车内图像，确定主驾驶位人脸图像以及根据所述主驾驶位人脸图像，生成虚拟助手形象，可以形成更具个性化的虚拟助手形象。
72.实施例3
73.参见图3，本实施例提供了另一种迎宾方法，适用于车机，包括：
74.s310、根据车内图像，确定人脸位置，以及人数和/或性别。
75.s320、根据车内图像，确定主驾驶位人脸图像。
76.s330、根据车内音频，确定人物关系。
77.其中，车内音频是指车厢内的音频，包括车内人员的语音。车内音频可由麦克风采集得到。
78.可选地，根据车内音频与预设的音频、人物关系的对应关系，以及车内音频的声纹，确定人物关系。
79.示例性地，若车内音频中有车内人员的对话，可从对话和声纹中判断出人物关系(将实际采集到的对话，与预设的对话、人物关系的对应关系进行对比，再结合声纹判断得出)，例如车内音频若有以下语句“爸爸，我们要去哪儿”，且发出以上语句的声纹为男性声纹，从中可判断出人物关系为父子关系。
80.根据车内音频，也可以在一定程度上判断出人数和性别，只是准确性相对图像的要低。
81.优选地，所述根据车内音频，确定人物关系包括：
82.根据车内音频，提取称呼词；
83.根据称呼词，确定人物关系。
84.其中，称呼词又称为称谓词，是指人物之间的相互称呼。
85.以上提供了一种确定人物关系的优选方式，首先根据车内音频提取称呼词，再根据称呼词确定人物关系，无需预先设定前述的“预设的对话、人物关系的对应关系”，也能避免该对应关系中预设对话设置不全面的问题。以上称呼词例如为“爸爸”、“妈妈”、“爷爷”、“奶奶”、“儿子”、“女儿”、“老公”、“老婆”、“领导”、“组长”、“经理”、“老师”、“医生”、“律师”等。
86.示例性地，若车内音频为“老公，我们去**广场吧”，则据此提取出关键词“老公”，确定人物关系为夫妻关系；若此时车内音频还包括“妈妈，我不想去**广场，我想去游乐园”，则据此进一步提取出关键词“妈妈”，确定车内人员的人物关系为一家人。
87.s340、根据所述人物关系，以及所述人数和/或性别，生成欢迎语。
88.优选地，所述根据所述人物关系，以及所述人数和/或性别，生成欢迎语包括：
89.将所述人物关系，以及所述人数和/或性别，与第二预设信息匹配；
90.根据匹配结果，生成欢迎语；
91.其中，所述第二预设信息为预设欢迎语与预设人物关系、人数、性别的对应关系。
92.上述优选实施方式先将人物关系，以及所述人数和/或性别，与第二预设信息匹配，再根据匹配结果生成欢迎语，简单可靠。其中第二预设信息是出厂前已经预设在电子设备中的，也可以是用户在后续使用过程中结合实际情况自行修正的。
93.示例性地，若车内人员信息中人数、性别和人物关系分别为2人、女和母女关系，则生成欢迎语例如“母亲的心灵是子女的课堂，预祝出行顺利”。
94.s350、根据所述人脸位置，确定虚拟助手朝向。
95.s360、根据所述主驾驶位人脸图像，生成虚拟助手形象。
96.s370、按所述虚拟助手朝向调整虚拟助手，播报所述欢迎语。
97.以上s310、s320、s350、s360、s370与实施例2中的相关步骤相同，此处不再赘述。
98.本实施例通过车内音频确定人物关系以及结合人物关系生成欢迎语，欢迎语更生动、更具个性化和准确性。
99.进一步地，在所述根据车内图像，确定人脸位置，以及人数和/或性别之前，还包括：
100.获取车门开启后的车内音频流；
101.在车门关闭后，根据所述车内音频流，确定从车门开启到当前时间戳的车内音频。
102.如上所述，本实施例中的车内音频是根据车门开启后的车内音频流得到的。其中，当前时间戳是指准备进行迎宾的时间戳。
103.上述迎宾方法可采用以下迎宾装置执行，该迎宾装置包括：
104.人脸位置、人数、性别确定模块，用于根据车内图像，确定人脸位置，以及人数和/或性别；
105.欢迎语生成模块，用于根据所述人数和/或性别，生成欢迎语；
106.虚拟助手朝向确定模块，用于根据所述人脸位置，确定虚拟助手朝向；
107.执行模块，用于按所述虚拟助手朝向调整虚拟助手，播报所述欢迎语。
108.进一步地，所述人脸位置、人数、性别确定模块还用于：根据车内图像，确定人脸图像、人脸位置和人数；根据人脸图像，确定性别。
109.进一步地，所述虚拟助手朝向确定模块还用于：根据所述人脸位置，确定所述人脸位置与虚拟助手位置的相对关系；根据所述相对关系，确定虚拟助手朝向。
110.进一步地，所述装置还包括：虚拟助手形象生成模块，用于根据车内图像，确定主驾驶位人脸图像；根据所述主驾驶位人脸图像，生成虚拟助手形象。
111.该迎宾装置用于执行上述迎宾方法，因而至少具有与上述方法相对应的功能模块和有益效果。
112.实施例4
113.如图4所示，本实施例提供了一种电子设备，包括：
114.至少一个处理器；以及
115.与至少一个所述处理器通信连接的存储器；其中，
116.所述存储器存储有可被至少一个所述处理器执行的指令，所述指令被至少一个所述处理器执行，以使至少一个所述处理器能够执行上述的方法。该电子设备中的至少一个处理器能够执行上述方法，因而至少具有与上述方法相同的优势。
117.可选地，该电子设备中还包括用于连接各部件的接口，包括高速接口和低速接口。各个部件利用不同的总线互相连接，并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器可以对在电子设备内执行的指令进行处理，包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如，耦合至接口的显示设备)上显示gui(graphical user interface，图形用户界面)的图形信息的指令。在其它实施方式中，若需要，可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样，可以连接多个电子设备，各个设备提供部分必要的操作(例如，作为服务器阵列、一组刀片式服务器、或者多处理器系统)。图4中以一个处理器201为例。
118.存储器202作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的迎宾方法对应的程序指令/模块(例如，迎宾装置中的人脸位置、人数、性别确定模块、欢迎语生成模块、虚拟助手朝向确定模块和执行模块)。处理器201通过运行存储在存储器202中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述的迎宾方法。
119.存储器202可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器202可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器202可进一步包括相对于处理器201远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
120.该电子设备还可以包括：输入装置203和输出装置204。处理器201、存储器202、输入装置203和输出装置204可以通过总线或者其他方式连接，图4中以通过总线连接为例。
121.输入装置203可接收输入的数字或字符信息，输出装置204可以包括显示设备、辅助照明装置(例如，led)和触觉反馈装置(例如，振动电机)等。该显示设备可以包括但不限于，液晶显示器(lcd)、发光二极管(led)显示器和等离子体显示器。在一些实施方式中，显示设备可以是触摸屏。
122.实施例5
123.本实施例提供了一种介质，所述介质上存储有计算机指令，所述计算机指令用于使所述计算机执行上述的方法。该介质上的计算机指令用于使计算机执行上述方法，因而至少具有与上述方法相同的优势。
124.本发明中的介质，可以采用一个或多个计算机可读的介质的任意组合。介质可以
是计算机可读信号介质或者计算机可读存储介质。介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
125.计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
126.计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、电线、光缆、rf(radio frequency，射频)等等，或者上述的任意合适的组合。
127.可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，程序设计语言包括面向对象的程序设计语言—诸如java、smalltalk、c ，还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(lan)或广域网(wan)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
128.应该理解的是，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本技术中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本技术公开的技术方案所期望的结果，本文在此不进行限制。
129.上述具体实施方式，并不构成对本技术保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本技术的精神和原则之内所作的修改、等同替换和改进等，均应包含在本技术保护范围之内。