一种人员进出检测方法、装置、设备及介质与流程

1.本发明实施例涉及智能家居技术领域，特别涉及一种人员进出检测方法、装置、设备及介质。


背景技术：

2.门口人进出检测是许多智能家居场景的重要前提基础，通过进出人数的检测，可以获知房间中的人数，进而联动智能设备，如有人时开灯，无人时关灯。
3.在实现本技术过程中，发明人发现现有技术中至少存在如下问题：
4.目前主流常用的门口进出检测方式是基于pir热释电红外配合摄像头的检测方式，而采用光学摄像头的方式，隐私保护性不好，并且，双目相机或rgbd相机的价格较昂贵，再者，如果是多人进出时，如并肩行走，会出现漏检，人头锁定的方法精度不够。


技术实现要素：

5.本发明实施例的目的是提供一种人员进出检测方法、装置、设备及介质，采用低成本的红外热成像技术，有效保护人员隐私，获取人员轨迹，并通过轨迹检测人员进出，检测精度高。
6.第一方面，本发明实施例提供了一种人员进出检测方法，所述方法包括：
7.获取待检测的人员进出区域的若干热图像；其中，每一所述热图像包括若干像素点和与若干所述像素点一一对应的温度值；
8.根据所述像素点和与所述像素点一一对应的温度值，确定所述热图像中的目标人员以及所述目标人员在热图像上的位置信息；
9.根据所述位置信息，确定目标人员的质心位置信息；
10.根据所述质心位置信息，获取目标人员在所述人员进出区域的轨迹信息；
11.根据所述目标人员区域在所述人员进出区域的轨迹信息，得到人员进出检测结果。
12.在一些实施例中，所述根据所述像素点和与所述像素点一一对应的温度值，确定所述热图像中的目标人员以及所述目标人员在热图像上的位置信息，包括：
13.计算温度分割阈值；
14.将所述温度值大于所述温度分割阈值对应的像素值设为前景像素值；
15.根据所述前景像素值，获取目标人员区域；
16.提取所述目标人员区域的几何形状信息；
17.根据所述几何形状信息，确定所述目标人员区域在所述热图像上的位置信息。
18.在一些实施例中，所述计算温度分割阈值，包括：
19.计算所述像素点对应的温度值的上四分位数及四分位数间距；
20.根据所述上四分位数及四分位数间距，计算出所述温度分割阈值。
21.在一些实施例中，所述根据所述质心位置信息，获取目标人员在所述人员进出区
域的轨迹信息，包括：
22.获取热源目标集合，所述热源目标集合包括至少两个已存在的目标人员区域的质心位置信息；
23.计算所述热源目标集合中每一个已存在的目标人员区域与待确认的目标人员区域之间的质心距离；
24.根据所述质心距离，更新已存在的目标人员区域，得到更新后的目标人员区域，以更新所述热源目标集合；
25.根据所述已存在的目标人员区域及更新后的目标人员区域，获得所述已存在的目标人员区域对应的轨迹信息。
26.在一些实施例中，所述根据所述质心距离，更新已存在的目标人员区域，得到更新后的目标人员区域，以更新所述热源目标集合，包括：
27.在所述质心距离中选取与所述已存在的目标人员区域最为接近的待确定的目标人员区域作为更新后的目标人员区域；
28.判断所述待确定的目标人员区域中是否存在多余的新目标；
29.若所述待确定的目标人员区域中存在多余的新目标，则基于所述新目标及所述更新后的目标人员区域，更新所述热源目标集合。
30.在一些实施例中，所述更新所述热源目标集合，包括：
31.在所述更新后的热源目标集合中，若所述已存在的目标人员区域没有更新质心坐标，则注销没有更新质心坐标的已存在的目标人员区域。
32.在一些实施例中，所述人员进出区域包括预设进入分界线和预设离开分界线；所述根据所述目标人员区域在所述人员进出区域的轨迹信息，得到人员进出检测结果，包括：
33.遍历所述热源目标集合中的每一个目标人员区域；
34.在每一个所述目标人员区域上绑定进入布尔变量及离开布尔变量；
35.识别所述目标人员区域的轨迹信息是否跨越所述预设进入分界线；
36.若所述目标人员区域的轨迹信息跨越所述预设进入分界线，则识别所述目标人员区域的轨迹信息是否跨越所述预设离开分界线；
37.若所述目标人员区域的轨迹信息跨越所述预设离开分界线，则记录所述目标人员区域的离开布尔变量，以确定所述目标人员区域为离开状态。
38.在一些实施例中，在所述在每一个所述目标人员区域上绑定进入布尔变量及离开布尔变量之后，所述方法还包括：
39.识别所述目标人员区域的轨迹信息是否跨越所述预设离开分界线；
40.若所述目标人员区域的轨迹信息跨越所述预设离开分界线，则识别所述目标人员区域的轨迹信息是否跨越所述预设进入分界线；
41.若识别所述目标人员区域的轨迹信息跨越所述预设进入分界线，则记录所述目标人员区域的进入布尔变量，以确定所述目标人员区域为进入状态。
42.在一些实施例中，所述方法还包括：
43.若所述像素点中存在个别像素错误的像素值，则计算正常像素值的平均值，所述正常像素值为像素错误的像素值的邻域的正常像素值；
44.将所述平均值填充所述像素错误的像素值。
45.第二方面，本发明实施例提供了一种人员进出检测装置，所述装置包括：
46.热图像获取模块，用于获取待检测的人员进出区域的若干热图像；其中，每一所述热图像包括若干像素点和与若干所述像素点一一对应的温度值；
47.目标确定模块，用于根据所述像素点和与所述像素点一一对应的温度值，确定所述热图像中的目标人员以及所述目标人员在热图像上的位置信息；
48.质心确定模块，用于根据所述位置信息，确定目标人员的质心位置信息；
49.轨迹获取模块，用于根据所述质心位置信息，获取目标人员在所述人员进出区域的轨迹信息；
50.进出检测模块，用于根据所述目标人员区域在所述人员进出区域的轨迹信息，得到人员进出检测结果。
51.第三方面，本发明实施例提供了一种人员进出检测设备，所述人员进出检测设备包括：
52.至少一个处理器，以及
53.存储器，所述存储器与所述至少一个处理器通信连接，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述的方法。
54.第四方面，本发明实施例提供了一种非易失性计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，当所述计算机可执行指令被人员进出检测设备执行时，使所述人员进出检测设备执行如上所述的方法。
55.本发明实施例的人员进出检测方法、装置和人员进出检测设备，采用低成本的红外热成像方式，获取待检测的人员进出区域的若干热图像；其中，每一所述热图像包括若干像素点和与若干所述像素点一一对应的温度值；然后，根据所述像素点和与所述像素点一一对应的温度值，确定所述热图像中的目标人员以及所述目标人员在热图像上的位置信息，从而在热图像中确定人体；根据所述位置信息，确定目标人员的质心位置信息，根据所述质心位置信息，获取目标人员在所述人员进出区域的轨迹信息，以获得人体的轨迹；根据所述目标人员区域在所述人员进出区域的轨迹信息，得到人员进出检测结果，以识别人员的进出状态。采用红外热成像的方式对人员进出进行检测，可以有效保护人员隐私安全，且通过目标人员区域在人员进出区域的轨迹信息，得到人员进出检测结果，检测精度高，具有低成本、隐私性好、检测精度高的优点，适合在家居场景使用。
附图说明
56.一个或多个实施例通过与之对应的附图中的图片进行示例性说明，这些示例性说明并不构成对实施例的限定，附图中具有相同参考数字标号的元件表示为类似的元件，除非有特别申明，附图中的图不构成比例限制。
57.图1是本发明人员进出检测方法的一个实施例的场景示意图；
58.图2是本发明人员进出检测方法的一个实施例的流程示意图；
59.图3是本发明人员进出检测方法的一个实施例的热力图；
60.图4是本发明人员进出检测方法的一个实施例的属性信息示意图；
61.图5是本发明人员进出检测方法的一个实施例的热源目标集合的示意图；
62.图6是本发明人员进出检测方法的又一个实施例的热源目标集合的示意图；
63.图7是本发明人员进出检测方法的一个实施例的轨迹图；
64.图8是本发明人员进出检测装置的一个实施例的结构示意图；
65.图9是本发明人员进出检测设备的一个实施例中控制器的硬件结构示意图。
具体实施方式
66.为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
67.本发明实施例提供的人员进出检测方法和装置可以应用于人员进出检测设备。
68.可以理解的是，人员进出检测设备中，设置有控制器，作为主控中心，采用低成本的红外热成像技术，有效保护人员隐私，获取人员轨迹，并通过轨迹检测人员进出，检测精度高。
69.并且，该人员进出检测设备中，还设有红外热成像采集模块，如具有低成本、低分辨率特点的红外线阵列传感器发射红外线，配合红外热成像摄像头，将红外热成像采集模块设置在私密性较高的家居场景内，将红外热成像采集模块安装在门口往屋内方向距离门框一段距离的房顶上，如距离门框30cm，红外热成像采集模块的热图像采集范围如图1所示，热图像采集范围包括预设进入分界线和预设离开分界线之间的区域。可以理解的是，热图像采集范围为人员进出区域。
70.在该人员进出检测设备中，还设有detector探测器、tracker轨迹追踪器以及counter计数器。其中，detector探测器用于根据所述像素点和与所述像素点一一对应的温度值，确定所述热图像中的目标人员区域以及所述目标人员区域在热图像上的位置信息；根据所述位置信息，确定所述目标人员区域的质心位置信息；tracker轨迹追踪器用于根据所述质心位置信息，获取所述目标人员区域在所述人员进出区域的轨迹信息；counter计数器用于根据所述目标人员区域在所述人员进出区域的轨迹信息，得到人员进出检测结果。
71.请参阅图2，图2为本发明实施例提供的人员进出检测方法的流程示意图，所述方法可以由人员进出检测设备中的控制器13执行，如图2所示，所述方法包括步骤s201
‑
s205。
72.s201：获取待检测的人员进出区域的若干热图像；其中，每一所述热图像包括若干像素点和与若干所述像素点一一对应的温度值。
73.具体的，预先在在门口往屋内方向距离门框一段距离的房顶上安装红外热成像采集模块，红外热成像采集模块用于采集红外热成像数据，红外热成像数据可以是红外热成像视频和/或红外热成像图片，并且，红外热成像数据为待检测的如图1所示的人员进出区域的若干热图像。以红外热成像视频为例，红外线阵列传感器的采集帧率为8时，即采样率为8hz，则每秒钟的红外热成像视频中包含8张图片；每张图片包含32*24个像素点，每个像素点的值为图片对应位置的温度值。当获取单帧红外热成像数据时，每次会从红外热成像设备中获取一帧数据，数据的长度为32*24＝768，这768个数据为红外热成像摄像头照射范围内的区域温度值分布，单帧数据记录为数组a[m][n]，其中，m＝24，n＝32。
[0074]
在获取待检测的人员进出区域的若干热图像时，获取到每一热图像包括的若干像
素点和与若干所述像素点一一对应的温度值，通过对若干热图像进行分析，可以知道热图像上热量的分布范围以及具体的温度值大小信息。
[0075]
在其中一些实施例中，在获取若干热图像后，需要对若干热图像进行预处理，以便于后续对人体的目标人员区域与背景分离开来，所述方法还包括：
[0076]
若所述像素点中存在个别像素错误的像素值，则计算正常像素值的平均值，所述正常像素值为像素错误的像素值的邻域的正常像素值；
[0077]
将所述平均值填充所述像素错误的像素值。
[0078]
具体地，由于红外热成像采集模块自身问题，可能会存在个别像素值错误的现象，如出现非数字，或者异常大的像素值，基于温度的平滑变化假设，需要对热图像进行预处理，即若所述像素点中存在个别像素错误的像素值，则计算正常像素值的平均值，并且所述正常像素值为像素错误的像素值的邻域的正常像素值，即在个别像素错误的像素值的周围邻域存在正常像素值，则计算正常像素值的平均值，用于填充像素错误的像素值，以使像素点和与像素点对应的温度值呈现平滑变化的状态。
[0079]
s202:根据所述像素点和与所述像素点一一对应的温度值，确定所述热图像中的目标人员以及所述目标人员在热图像上的位置信息。
[0080]
在对热图像进行预处理后，将预处理后的热图像输入detector探测器中，以确定人体对应的目标人员区域。
[0081]
由于人体的温度通常会高于周围环境温度，在其中一些实施例中，根据所述像素点和与所述像素点一一对应的温度值，确定所述热图像中的目标人员以及所述目标人员在热图像上的位置信息，可以包括：
[0082]
计算温度分割阈值；
[0083]
将所述温度值大于所述温度分割阈值对应的像素值设为前景像素值；
[0084]
根据所述前景像素值，获取目标人员区域；
[0085]
提取所述目标人员区域的几何形状信息；
[0086]
根据所述几何形状信息，确定所述目标人员区域在所述热图像上的位置信息。
[0087]
具体地，先计算温度分割阈值，温度分割阈值可以是35℃，然后，将温度值大于温度分割阈值对应的像素值设为前景像素值，即确定为人体对应的像素值，进一步地，在得到多个前景像素值以后，可将多个前景像素值进行连通域分析，得到目标人员区域，从而将人体与周围环境分离开来。
[0088]
由于人体对应的目标人员区域具有体积小、温度高的特点，可以将目标人员区域作为异常值来处理，那么，计算温度分割阈值实质上是异常值检测算法。可以利用箱型图的四分位距iqr对异常值进行检测，以提供一个识别异常值的标准。在其中一些实施例中，计算温度分割阈值，可以包括：
[0089]
计算所述像素点对应的温度值的上四分位数及四分位数间距；
[0090]
根据所述上四分位数及四分位数间距，计算出所述温度分割阈值。
[0091]
具体地，异常值(温度分割阈值)定义为大于qu 1.5iqr的值。因此，计算所述像素点对应的温度值的上四分位数qu及四分位数间距iqr，然后，根据所述上四分位数及四分位数间距，计算出所述温度分割阈值，具体将上四分位数qu及四分位数间距iqr输入异常值计算公式，计算出所述温度分割阈值。异常值计算公式为如下公式一：
[0092]
t＝qu 1.5iqr
ꢀꢀꢀ
公式一；
[0093]
其中，qu表示上四分位数，iqr表示四分位数间距，且四分位数间距iqr为上四分位数qu与下四分位数ql之差。
[0094]
在得到温度分割阈值后，将所述温度值大于所述温度分割阈值对应的像素值设为前景像素值，如将温度值大于35℃的像素值设为前景像素值，或者是如图3b所示，将除了前景像素值以外的像素值设为某个像素值如设为0，从而将除了前景像素值以外的区域设为黑色；然后，根据所述前景像素值，获取目标人员区域，具体可以将前景像素值进行连通域处理，得到目标人员区域，从而将目标人员区域从热图像中的背景凸显出来。如图3所示，3a为预处理后的热图像，3b为确定目标人员区域后的热力图。
[0095]
在得到目标人员区域后，提取所述目标人员区域的几何形状信息；根据所述几何形状信息，确定所述目标人员区域在所述热图像上的位置信息。
[0096]
s203:根据所述位置信息，确定目标人员的质心位置信息。
[0097]
s204：根据所述质心位置信息，获取目标人员在所述人员进出区域的轨迹信息。
[0098]
在其中一些实施例中，根据所述质心位置信息，获取目标人员在所述人员进出区域的轨迹信息，可以包括：
[0099]
获取热源目标集合，所述热源目标集合包括至少两个已存在的目标人员区域的质心位置信息；
[0100]
计算所述热源目标集合中每一个已存在的目标人员区域与待确认的目标人员区域之间的质心距离；
[0101]
根据所述质心距离，更新已存在的目标人员区域，得到更新后的目标人员区域，以更新所述热源目标集合；
[0102]
根据所述已存在的目标人员区域及更新后的目标人员区域，获得所述已存在的目标人员区域对应的轨迹信息。
[0103]
具体地，如图4所示，提取目标人员区域的几何形状信息，该几何形状信息为如图4中的边界矩形框bounding boxes，用于框选目标人员区域，在得到几何形状信息(边界矩形框bounding boxes)后，根据几何形状信息(边界矩形框bounding boxes)，确定目标人员区域的质心位置信息，为矩形框的质心坐标位置centroids。在图4中，当前帧的热图像上有两个目标人员区域，分别为id
‑
1和id
‑
2，将这两个目标人员区域id
‑
1和id
‑
2注册记录到热源目标集合existing_targets中。
[0104]
在提取目标人员区域的质心位置信息后，将质心位置信息输入到tracker轨迹追踪器中，tracker轨迹追踪器用于实时更新目标人员区域的轨迹信息，并且，轨迹信息的本质是目标人员区域的质心位置信息(x，y)坐标的历史值集合。目标追踪的策略采用最近质心算法，首先，初始化热源目标集合existing_targets为空。因此，在图4中，在当前帧的红外热成像数据中，将这两个目标人员区域id
‑
1和id
‑
2注册记录到热源目标集合existing_targets中，在下一帧的红外热成像数据中，同样通过detector探测器中，输出对应的目标人员区域的质心位置信息(x，y)。因此，通过热成像检测人员进出时，不会出现漏检现象，而传统的基于pir热释电红外配合摄像头的检测方式，如待检测人员并肩行走进入人员进出区域，则会出现漏检现象。
[0105]
如图5所示，id
‑
3、id
‑
4是热源目标集合中的已存在的目标人员区域，id
‑
5、id
‑
6、
id
‑
7是当前帧经过detector探测器输出的新的目标人员区域的质心位置。
[0106]
接着，计算所述热源目标集合中每一个已存在的目标人员区域与待确认的目标人员区域之间的质心距离，质心距离可以采用欧式距离的方式计算，即计算id
‑
3分别与id
‑
5、id
‑
6、id
‑
7的质心距离，id
‑
4与id
‑
5、id
‑
6、id
‑
7的质心距离。然后，根据所述质心距离，更新已存在的目标人员区域，得到更新后的目标人员区域，以更新所述热源目标集合。
[0107]
在其中一些实施例中，根据所述质心距离，更新已存在的目标人员区域，得到更新后的目标人员区域，以更新所述热源目标集合，可以包括：
[0108]
在所述质心距离中选取与所述已存在的目标人员区域最为接近的待确定的目标人员区域作为更新后的目标人员区域；
[0109]
判断所述待确定的目标人员区域中是否存在多余的新目标；
[0110]
若所述待确定的目标人员区域中存在多余的新目标，则基于所述新目标及所述更新后的目标人员区域，更新所述热源目标集合。
[0111]
具体地，在计算id
‑
3分别与id
‑
5、id
‑
6、id
‑
7的质心距离，id
‑
4与id
‑
5、id
‑
6、id
‑
7的质心距离后，在质心距离中选取与已存在的目标人员区域最为接近的待确定的目标人员区域作为更新后的目标人员区域，即在id
‑
3分别与id
‑
5、id
‑
6、id
‑
7的质心距离，id
‑
4与id
‑
5、id
‑
6、id
‑
7的质心距离中选取与id
‑
3或id
‑
4最接近的待确定目标人员区域，如图5，比如id
‑
3与id
‑
6之间的距离最为接近，id
‑
4与id
‑
7之间的距离最为接近，那么，将id
‑
6和id
‑
7作为更新后的目标人员区域的质心位置，且id
‑
3和id
‑
4为旧目标。很明显，当在一个热源目标集合中的已存在的目标人员区域的数量与待确定的目标人员区域的数量不对应时，如图5中，在5个目标中，有2个是已存在的目标，有3个是待确定的新目标，那么必定会有一个多余的新目标id
‑
5。因此，需要判断待确定的目标人员区域(id
‑
5、id
‑
6、id
‑
7)中是否存在多余的新目标，若是，则基于新目标(id
‑
5)及所述更新后的目标人员区域(id
‑
6、id
‑
7)，更新所述热源目标集合，得到更新后的热源目标集合其中，更新后的热源目标集合至少包括(id
‑
5、id
‑
6、id
‑
7)。
[0112]
举例而言，如图6所示，id
‑
1，id
‑
2都是existing_targets热源目标集合中的旧目标(已存在的目标人员区域)，箭头表示旧目标(目标人员区域)的移动。id
‑
3是新增出现的目标(待确定的目标人员区域)，会对id
‑
3进行注册添加到existing_targets热源目标集合中。
[0113]
在其中一些实施例中，更新所述热源目标集合，可以包括：
[0114]
在所述更新后的热源目标集合中，若所述已存在的目标人员区域没有更新质心坐标，则注销没有更新质心坐标的已存在的目标人员区域。
[0115]
具体地，如果连续5帧红外热成像数据对应的热源目标集合的已存在的目标人员区域没有更新其质心坐标，则注销该没有更新质心坐标的已存在的目标人员区域，将该没有更新质心坐标的已存在的目标人员区域从热源目标集合中移除掉。
[0116]
在不断的更新热源目标集合后，根据根据所述已存在的目标人员区域及更新后的目标人员区域，获得所述已存在的目标人员区域对应的轨迹信息。
[0117]
如图7所示，为两个目标人员区域的质心位置对应的轨迹信息，采用质心位置信息的追踪方式，使得识别精度更高。
[0118]
s205：根据所述目标人员区域在所述人员进出区域的轨迹信息，得到人员进出检
测结果。
[0119]
具体地，人员进出区域包括预设进入分界线和预设离开分界线；可以根据人员跨越预设进入分界线及预设离开分界线的先后次序来判断进出，如果先跨过预设进入分界线in line，再跨过预设离开分界线out line的话，则认为人员是出去的状态，如果是先跨过预设离开分界线out line，再跨过预设进入分界线in line的话，则认为人员是进入的状态。
[0120]
在其中一些实施例中，所述人员进出区域包括预设进入分界线和预设离开分界线；根据所述目标人员区域在所述人员进出区域的轨迹信息，得到人员进出检测结果，可以包括：
[0121]
遍历所述热源目标集合中的每一个目标人员区域；
[0122]
在每一个所述目标人员区域上绑定进入布尔变量及离开布尔变量；
[0123]
识别所述目标人员区域的轨迹信息是否跨越所述预设进入分界线；
[0124]
若所述目标人员区域的轨迹信息跨越所述预设进入分界线，则识别所述目标人员区域的轨迹信息是否跨越所述预设离开分界线；
[0125]
若所述目标人员区域的轨迹信息跨越所述预设离开分界线，则记录所述目标人员区域的离开布尔变量，以确定所述目标人员区域为离开状态。
[0126]
具体地，由于热源目标集合为多个目标人员区域的质心位置产生的轨迹信息，在获得热源目标集合后，遍历所述热源目标集合中的每一个目标人员区域，并且，每个新目标在注册到热源目标集合中时，会在新目标上绑定进入布尔变量in_pass及离开布尔变量out_pass，用于标识是否越线。识别所述目标人员区域的轨迹信息是否跨越所述预设进入分界线，若所述目标人员区域的轨迹信息跨越所述预设进入分界线，则识别所述目标人员区域的轨迹信息是否跨越所述预设离开分界线，若所述目标人员区域的轨迹信息跨越所述预设离开分界线，则记录所述目标人员区域的离开布尔变量out_pass，以确定所述目标人员区域为离开状态，即确定人员是先跨越预设进入分界线，再跨越预设离开分界线，从而识别到人员离开。
[0127]
对应地，为了判断人员的进入状态，识别所述目标人员区域的轨迹信息是否跨越所述预设离开分界线；若所述目标人员区域的轨迹信息跨越所述预设离开分界线，则识别所述目标人员区域的轨迹信息是否跨越所述预设进入分界线；若识别所述目标人员区域的轨迹信息跨越所述预设进入分界线，则记录所述目标人员区域的进入布尔变量，以确定所述目标人员区域为进入状态，即确定人员是先跨越预设离开分界线，再跨越预设进入分界线，则识别到人员进入。
[0128]
本技术的实施例，采用低成本的红外热成像方式，获取待检测的人员进出区域的若干热图像；其中，每一所述热图像包括若干像素点和与若干所述像素点一一对应的温度值；然后，根据所述像素点和与所述像素点一一对应的温度值，确定所述热图像中的目标人员以及所述目标人员在热图像上的位置信息，从而在红外热成像数据中确定人体；根据所述位置信息，确定目标人员的质心位置信息，根据所述质心位置信息，获取目标人员在所述人员进出区域的轨迹信息，以获得人体的轨迹；根据所述目标人员区域在所述人员进出区域的轨迹信息，得到人员进出检测结果，以识别人员的进出状态。采用红外热成像的方式对人员进出进行检测，可以有效保护人员隐私安全，且通过目标人员区域在人员进出区域的
轨迹信息，得到人员进出检测结果，检测精度高，具有低成本、隐私性好、检测精度高的优点，适合在家居场景使用。
[0129]
相应的，如图8所示，本发明实施例还提供了一种人员进出检测装置，可以用于人员进出检测设备，人员进出检测装置800包括：
[0130]
热图像获取模块801，用于获取待检测的人员进出区域的若干热图像；其中，每一所述热图像包括若干像素点和与若干所述像素点一一对应的温度值；
[0131]
目标确定模块802，用于根据所述像素点和与所述像素点一一对应的温度值，确定所述热图像中的目标人员以及所述目标人员在热图像上的位置信息；
[0132]
质心确定模块803，用于根据所述位置信息，确定目标人员的质心位置信息；
[0133]
轨迹获取模块804，用于根据所述质心位置信息，获取目标人员在所述人员进出区域的轨迹信息；
[0134]
进出检测模块805，用于根据所述目标人员区域在所述人员进出区域的轨迹信息，得到人员进出检测结果。
[0135]
本发明实施例，采用低成本的红外热成像方式，获取待检测的人员进出区域的若干热图像；其中，每一所述热图像包括若干像素点和与若干所述像素点一一对应的温度值；然后，根据所述像素点和与所述像素点一一对应的温度值，确定所述热图像中的目标人员以及所述目标人员在热图像上的位置信息，从而在红外热成像数据中确定人体；根据所述位置信息，确定目标人员的质心位置信息，根据所述质心位置信息，获取目标人员在所述人员进出区域的轨迹信息，以获得人体的轨迹；根据所述目标人员区域在所述人员进出区域的轨迹信息，得到人员进出检测结果，以识别人员的进出状态。采用红外热成像的方式对人员进出进行检测，可以有效保护人员隐私安全，且通过目标人员区域在人员进出区域的轨迹信息，得到人员进出检测结果，检测精度高，具有低成本、隐私性好、检测精度高的优点，适合在家居场景使用。
[0136]
在其他实施例中，目标确定模块802，还用于：
[0137]
计算温度分割阈值；
[0138]
将所述温度值大于所述温度分割阈值对应的像素值设为前景像素值；
[0139]
根据所述前景像素值，获取目标人员区域；
[0140]
提取所述目标人员区域的几何形状信息；
[0141]
根据所述几何形状信息，确定所述目标人员区域在所述热图像上的位置信息。
[0142]
在其他实施例中，目标确定模块802，还用于：
[0143]
计算所述像素点对应的温度值的上四分位数及四分位数间距；
[0144]
根据所述上四分位数及四分位数间距，计算出所述温度分割阈值。
[0145]
在其中一些实施例中，轨迹获取模块804，还用于：
[0146]
获取热源目标集合，所述热源目标集合包括至少两个已存在的目标人员区域的质心位置信息；
[0147]
计算所述热源目标集合中每一个已存在的目标人员区域与待确认的目标人员区域之间的质心距离；
[0148]
根据所述质心距离，更新已存在的目标人员区域，得到更新后的目标人员区域，以更新所述热源目标集合；
[0149]
根据所述已存在的目标人员区域及更新后的目标人员区域，获得所述已存在的目标人员区域对应的轨迹信息。
[0150]
在其中一些实施例中，轨迹获取模块804，还用于：
[0151]
在所述质心距离中选取与所述已存在的目标人员区域最为接近的待确定的目标人员区域作为更新后的目标人员区域；
[0152]
判断所述待确定的目标人员区域中是否存在多余的新目标；
[0153]
若所述待确定的目标人员区域中存在多余的新目标，则基于所述新目标及所述更新后的目标人员区域，更新所述热源目标集合。
[0154]
在其中一些实施例中，轨迹获取模块804，还用于：
[0155]
在所述更新后的热源目标集合中，若所述已存在的目标人员区域没有更新质心坐标，则注销没有更新质心坐标的已存在的目标人员区域。
[0156]
在其中一些实施例中，进出检测模块805，还用于：
[0157]
遍历所述热源目标集合中的每一个目标人员区域；
[0158]
在每一个所述目标人员区域上绑定进入布尔变量及离开布尔变量；
[0159]
识别所述目标人员区域的轨迹信息是否跨越所述预设进入分界线；
[0160]
若所述目标人员区域的轨迹信息跨越所述预设进入分界线，则识别所述目标人员区域的轨迹信息是否跨越所述预设离开分界线；
[0161]
若所述目标人员区域的轨迹信息跨越所述预设离开分界线，则记录所述目标人员区域的离开布尔变量，以确定所述目标人员区域为离开状态。
[0162]
在其中一些实施例中，进出检测模块805，还用于：
[0163]
识别所述目标人员区域的轨迹信息是否跨越所述预设离开分界线；
[0164]
若所述目标人员区域的轨迹信息跨越所述预设离开分界线，则识别所述目标人员区域的轨迹信息是否跨越所述预设进入分界线；
[0165]
若识别所述目标人员区域的轨迹信息跨越所述预设进入分界线，则记录所述目标人员区域的进入布尔变量，以确定所述目标人员区域为进入状态。
[0166]
在其中一些实施例中，装置800还包括填充模块806，还用于：
[0167]
若所述像素点中存在个别像素错误的像素值，则计算正常像素值的平均值，所述正常像素值为像素错误的像素值的邻域的正常像素值；
[0168]
将所述平均值填充所述像素错误的像素值。
[0169]
需要说明的是，上述装置可执行本技术实施例所提供的方法，具备执行方法相应的功能模块和有益效果。未在装置实施例中详尽描述的技术细节，可参见本技术实施例所提供的方法。
[0170]
图9为人员进出检测设备的一个实施例中控制器的硬件结构示意图，如图9所示，控制器13包括：
[0171]
一个或多个处理器131、存储器132。图9中以一个处理器131、一个存储器132为例。
[0172]
处理器131、存储器132可以通过总线或者其他方式连接，图9中以通过总线连接为例。
[0173]
存储器132作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本技术实施例中的人员进出检测方法对应的
程序指令/模块(例如，附图8所示的热图像获取模块801、目标确定模块802、质心确定模块803、轨迹获取模块804、进出检测模块805、填充模块806)。处理器131通过运行存储在存储器132中的非易失性软件程序、指令以及模块，从而执行控制器的各种功能应用以及数据处理，即实现上述方法实施例的人员进出检测方法。
[0174]
存储器132可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据人员进出检测装置的使用所创建的数据等。此外，存储器132可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中，存储器132可选包括相对于处理器131远程设置的存储器，这些远程存储器可以通过网络连接至人员进出检测设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
[0175]
所述一个或者多个模块存储在所述存储器132中，当被所述一个或者多个处理器131执行时，执行上述任意方法实施例中的人员进出检测方法，例如，执行以上描述的图2中的方法步骤s201至步骤s205；实现图8中的模块801
‑
806的功能。
[0176]
上述产品可执行本技术实施例所提供的方法，具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本技术实施例所提供的方法。
[0177]
本技术实施例提供了一种非易失性计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行，例如图9中的一个处理器131，可使得上述一个或多个处理器可执行上述任意方法实施例中的人员进出检测方法，例如，执行以上描述的图2中的方法步骤s201至步骤s205；实现图8中的模块801
‑
806的功能。
[0178]
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
[0179]
通过以上的实施例的描述，本领域普通技术人员可以清楚地了解到各实施例可借助软件加通用硬件平台的方式来实现，当然也可以通过硬件。本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(read
‑
only memory,rom)或随机存储记忆体(randomaccessmemory,ram)等。
[0180]
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；在本发明的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，步骤可以以任意顺序实现，并存在如上所述的本发明的不同方面的许多其它变化，为了简明，它们没有在细节中提供；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。