一种基于人脸识别的家庭成员通联方法和系统与流程

本申请涉及人脸识别技术及通联管理领域，尤其涉及一种基于人脸识别的家庭成员通联方法和系统。

背景技术：

家庭成员中一般有像老人、小孩或其他需要帮助的成员，这类成员在通联过程中，往往不是很方便，例如老人视力不好、手脚不灵便，往往不方便快速准确地进行通联终端的操作。但是，这些家庭成员的通联需求并没有因为其操作能力的限制而减小，尤其是在突发疾病、意外事故等紧急时刻，第一时间需要立刻联系上家庭成员。目前常用的方式是通过语音拨号的方式进行，但是，一方面，由于老人、小孩等需要帮助的家庭成员语言功能的不完善，语音拨号的准确性很难保证；另一方面，遇到诸如自然灾害、刑事犯罪、突发疾病等情况下，这些家庭成员也很难发出声音进行语音拨号。

因此，需要拓展一种更为便捷的家庭成员通联方法以解决上述问题。

技术实现要素：

有鉴于此，本申请的目的在于提出一种基于人脸识别的家庭成员通联方法和系统，提高家庭成员的通信效率，解决目前有些特殊家庭成员在紧急时刻无法正常联系家庭成员的技术问题。

基于上述目的，本申请提出了一种基于人脸识别的家庭成员通联方法，包括：

在通联终端中设置人脸识别装置和语音识别装置，所述语音识别装置预存了至少一种触发人脸识别过程的用户口令模板；

在所述语音识别装置捕抓到至少两次与所述用户口令模板中任一口令模板相似度小于指定阈值的声音后，启动所述人脸识别装置；

所述人脸识别装置通过旋转进行人脸图像捕抓，识别出所述用户的表情特征，形成用户状态特征集；

在所述旋转的过程中进行对所述用户周围的环境进行采集，识别出所述用户周围的环境特征，形成环境特征集；

将所述用户的表情特征集和所述环境特征集导入深度学习网络，预测出所述用户需要通联的家庭成员，并启动通联过程。

在一些实施例中，所述方法还包括：

如果所述人体识别算法判断不符合所述标准动作序列，则向所述用户发出错误指令，并提供更换动作建议；

如果针对同一用户，所述人体识别算法判断不符合所述标准动作序列的次数超过指定阈值次数，则向管理员发送告警。

在一些实施例中，所述方法还包括：

如果所述家庭成员的通联设备无法接通，所述用户的通联设备从所述深度学习的结果中选取下一排名的家庭成员进行通联。

在一些实施例中，所述语音识别装置预存了至少一种触发人脸识别过程的用户口令模板，包括：

在所述语音识别装置中设置白名单用户口令模板，当所述语音识别装置捕抓到所述白名单用户口令模板中的语音后，立即启动所述人脸识别过程；

在所述语音识别装置中设置黑名单用户口令模板，当所述语音识别装置捕抓到所述黑名单用户口令模板中的语音后，进行忽略处理。

在一些实施例中，在所述语音识别装置捕抓到至少两次与所述用户口令模板中任一口令模板相似度小于指定阈值的声音后，启动所述人脸识别装置，包括：

在所述语音识别装置第一次捕抓到第一声音后，通过计算所述第一声音与所述口令模板中对应口令的相似度后，得到第一比较结果；

在指定时间间隔内，如果所述语音识别装置捕抓到第二声音后，通过计算所述第二声音与所述口令模板中对应口令的相似度后，得到第二比较结果；

如果所述第一比较结果和所述第二比较结果均落入预设相似度区间，则启动所述人脸识别装置。

在一些实施例中，所述人脸识别装置通过旋转进行人脸图像捕抓，识别出所述用户的表情特征，形成用户状态特征集，包括：

所述人脸识别装置通过所述语音识别装置捕获的声音方向，调整所述人脸识别装置的图像采集方向，获取所述用户的表情特征；

所述人脸识别装置通过所述用户的表情特征和肢体状态，得到所述用户的情感特征、身体状态特征，构成所述用户状态特征集。

在一些实施例中，在所述旋转的过程中进行对所述用户周围的环境进行采集，识别出所述用户周围的环境特征，形成环境特征集，包括：

所述人脸识别装置以所述用户为圆心，调整所述人脸识别装置的图像采集方向，获取所述用户周围的环境信息；

所述人脸识别装置通过所述用户周围的环境信息，得到所述用户的周围人群、地理状态特征，构成所述用户环境特征集。

在一些实施例中，所述用户环境特征集中的每一个元素通过以下公式计算：

其中，j为离散距离级数，i为环境类型级数，fi()为第i类环境的环境特征值，p为所述周围人群的特征值，g为所述地理状态的特征值。

基于上述目的，本申请还提出了一种基于人脸识别的家庭成员通联系统，包括：

构建模块，用于在通联终端中设置人脸识别装置和语音识别装置，所述语音识别装置预存了至少一种触发人脸识别过程的用户口令模板；

触发模块，用于在所述语音识别装置捕抓到至少两次与所述用户口令模板中任一口令模板相似度小于指定阈值的声音后，启动所述人脸识别装置；

人脸识别模块，用于所述人脸识别装置通过旋转进行人脸图像捕抓，识别出所述用户的表情特征，形成用户状态特征集；

环境识别模块，用于在所述旋转的过程中进行对所述用户周围的环境进行采集，识别出所述用户周围的环境特征，形成环境特征集；

通联模块，用于将所述用户的表情特征集和所述环境特征集导入深度学习网络，预测出所述用户需要通联的家庭成员，并启动通联过程。

在一些实施例中，所述系统还包括：

递延模块，用于如果所述家庭成员的通联设备无法接通，所述用户的通联设备从所述深度学习的结果中选取下一排名的家庭成员进行通联。

在一些实施例中，所述构建模块，包括：

白名单单元，用于在所述语音识别装置中设置白名单用户口令模板，当所述语音识别装置捕抓到所述白名单用户口令模板中的语音后，立即启动所述人脸识别过程；

黑名单单元，用于在所述语音识别装置中设置黑名单用户口令模板，当所述语音识别装置捕抓到所述黑名单用户口令模板中的语音后，进行忽略处理。

总的来说，本申请的优势及给用户带来的体验在于：能够通过人脸识别技术智能地对进入社区人员进行识别，判断是否能够进入社区，从而有效地避免了社区仍然需要通过人工识别出入证的方式判断的现象，减小了人力财务成本，同时还有效地避免了人员的接触，安全健康。

附图说明

在附图中，除非另外规定，否则贯穿多个附图相同的附图标记表示相同或相似的部件或元素。这些附图不一定是按照比例绘制的。应该理解，这些附图仅描绘了根据本发明公开的一些实施方式，而不应将其视为是对本发明范围的限制。

图1示出根据本发明实施例的基于人脸识别的家庭成员通联方法的流程图。

图2示出根据本发明实施例的基于人脸识别的家庭成员通联方法的流程图。

图3示出根据本发明实施例的基于人脸识别的家庭成员通联系统的构成图。

图4示出根据本发明实施例的基于人脸识别的家庭成员通联系统的构成图。

图5示出根据本发明实施例的构建模块的构成图。

具体实施方式

下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅用于解释相关发明，而非对该发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关发明相关的部分。

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。

图1示出根据本发明实施例的基于人脸识别的家庭成员通联方法的流程图。如图1所示，该基于人脸识别的家庭成员通联方法包括：

步骤s11、在通联终端中设置人脸识别装置和语音识别装置，所述语音识别装置预存了至少一种触发人脸识别过程的用户口令模板。

具体来说，通联终端可以是指具有通信功能的电子设备，例如手机、电话、电脑等。人脸识别装置和语音识别装置可以作为通联终端的一部分，嵌入式地植入通联终端中，从而使得整个设备便携轻巧。

在一种实施方式中，所述语音识别装置预存了至少一种触发人脸识别过程的用户口令模板，包括：

在所述语音识别装置中设置白名单用户口令模板，当所述语音识别装置捕抓到所述白名单用户口令模板中的语音后，立即启动所述人脸识别过程；

在所述语音识别装置中设置黑名单用户口令模板，当所述语音识别装置捕抓到所述黑名单用户口令模板中的语音后，进行忽略处理。

具体来说，用户可以通过至少一种口令模板触发人脸识别过程。例如，当用户呼叫“给爸爸打电话”，或者呼叫“给妈妈打电话”，都可以触发人脸识别过程。

步骤s12、在所述语音识别装置捕抓到至少两次与所述用户口令模板中任一口令模板相似度小于指定阈值的声音后，启动所述人脸识别装置。

具体来说，由于用户在日常交谈或会话过程中，可能会不小心命中用户口令模板中的口令，因此，可以考虑当听到两次或两次以上与口令模板中相似的语音后，才启动人脸识别装置。

在一种实施方式中，在所述语音识别装置捕抓到至少两次与所述用户口令模板中任一口令模板相似度小于指定阈值的声音后，启动所述人脸识别装置，包括：

在所述语音识别装置第一次捕抓到第一声音后，通过计算所述第一声音与所述口令模板中对应口令的相似度后，得到第一比较结果；

在指定时间间隔内，如果所述语音识别装置捕抓到第二声音后，通过计算所述第二声音与所述口令模板中对应口令的相似度后，得到第二比较结果；

如果所述第一比较结果和所述第二比较结果均落入预设相似度区间，则启动所述人脸识别装置。

步骤s13、所述人脸识别装置通过旋转进行人脸图像捕抓，识别出所述用户的表情特征，形成用户状态特征集。

在一种实施方式中，所述人脸识别装置通过旋转进行人脸图像捕抓，识别出所述用户的表情特征，形成用户状态特征集，包括：

所述人脸识别装置通过所述语音识别装置捕获的声音方向，调整所述人脸识别装置的图像采集方向，获取所述用户的表情特征；

所述人脸识别装置通过所述用户的表情特征和肢体状态，得到所述用户的情感特征、身体状态特征，构成所述用户状态特征集。

具体来说，人脸识别装置的采集角度可能影响采集的效果，因此，有必要选装人脸识别装置，从而实现最佳的采集效果。

步骤s14、在所述旋转的过程中进行对所述用户周围的环境进行采集，识别出所述用户周围的环境特征，形成环境特征集。

在一种实施方式中，在所述旋转的过程中进行对所述用户周围的环境进行采集，识别出所述用户周围的环境特征，形成环境特征集，包括：

所述人脸识别装置以所述用户为圆心，调整所述人脸识别装置的图像采集方向，获取所述用户周围的环境信息；

所述人脸识别装置通过所述用户周围的环境信息，得到所述用户的周围人群、地理状态特征，构成所述用户环境特征集。

具体来说，人脸识别装置还需要采集用户周围的环境信息，从而确定用户所处的环境特征。例如，如果发现儿童周围存在利刃、犯罪分子等特征，则可以确定儿童的所处环境特征。

在一种实施方式中，所述用户环境特征集中的每一个元素通过以下公式计算：

其中，j为离散距离级数，i为环境类型级数，fi()为第i类环境的环境特征值，p为所述周围人群的特征值，g为所述地理状态的特征值。

步骤s15、将所述用户的表情特征集和所述环境特征集导入深度学习网络，预测出所述用户需要通联的家庭成员，并启动通联过程。

具体来说，启动通联过程是指开始与通联对象的通信。例如，如果预测出与“爸爸”进行通联，则可以拨通“爸爸”的电话。

图2示出根据本发明实施例的基于人脸识别的家庭成员通联方法的流程图。如图2所示，该基于人脸识别的家庭成员通联方法还包括：

步骤s16、如果所述家庭成员的通联设备无法接通，所述用户的通联设备从所述深度学习的结果中选取下一排名的家庭成员进行通联。

具体来说，很有可能在某些时候通联对象无法正常接通，但在紧急的时刻，需要立即与相应的联系对象建立联系，因此，可以立即与下一通联对象进行联系，从而防止第一联系人无法联系，耽误事情解决的问题。

图3示出根据本发明实施例的基于人脸识别的家庭成员通联系统的构成图。如图3所示，该基于人脸识别的家庭成员通联系统整体可以分为：

构建模块31，用于在通联终端中设置人脸识别装置和语音识别装置，所述语音识别装置预存了至少一种触发人脸识别过程的用户口令模板；

触发模块32，用于在所述语音识别装置捕抓到至少两次与所述用户口令模板中任一口令模板相似度小于指定阈值的声音后，启动所述人脸识别装置；

人脸识别模块33，用于所述人脸识别装置通过旋转进行人脸图像捕抓，识别出所述用户的表情特征，形成用户状态特征集；

环境识别模块34，用于在所述旋转的过程中进行对所述用户周围的环境进行采集，识别出所述用户周围的环境特征，形成环境特征集；

通联模块35，用于将所述用户的表情特征集和所述环境特征集导入深度学习网络，预测出所述用户需要通联的家庭成员，并启动通联过程。

图4根据本发明实施例的基于人脸识别的家庭成员通联系统的构成图。如图4所示，该基于人脸识别的家庭成员通联系统整体还包括：

递延模块36，用于如果所述家庭成员的通联设备无法接通，所述用户的通联设备从所述深度学习的结果中选取下一排名的家庭成员进行通联。

图5示出根据本发明实施例的构建模块的构成图。如图5所示，该基于人脸识别的家庭成员通联系统的构建模块31包括：

白名单单元311，用于在所述语音识别装置中设置白名单用户口令模板，当所述语音识别装置捕抓到所述白名单用户口令模板中的语音后，立即启动所述人脸识别过程；

黑名单单元312，用于在所述语音识别装置中设置黑名单用户口令模板，当所述语音识别装置捕抓到所述黑名单用户口令模板中的语音后，进行忽略处理。

本申请实施例各系统中的各模块的功能可以参见上述方法中的对应描述，在此不再赘述。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(ram)，只读存储器(rom)，可擦除可编辑只读存储器(eprom或闪速存储器)，光纤装置，以及便携式只读存储器(cdrom)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(pga)，现场可编程门阵列(fpga)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本发明各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读存储介质中。所述存储介质可以是只读存储器，磁盘或光盘等。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到其各种变化或替换，这些都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。