局部增强的人体经络识别方法和装置、设备及存储介质与流程

1.本技术涉及人体经络识别技术领域，尤其涉及一种局部增强的人体经络识别方法和装置、设备及存储介质。


背景技术：

2.在中医经络调理过程中，需要准确的选取穴位。通常，中医的经络取穴方法有四种：骨度分寸法、体表标志法、指寸定位法和简便取穴法。这四种方法均需要操作者具有一定的中医经络理论知识，并且还需要对人体各部位位置、尺寸具有一定的掌握才能实施。这就使得中医经络调理具有一定的局限性。
3.随着深度学习技术的发展，其应用领域越来越广泛。由此，可以通过深度学习中所建立的用于模拟人脑进行数据分析和识别的神经网络来实现经络穴位的选取。在相关技术中，基于深度学习进行人体经络识别时，通常识别出的是整个人体的经络穴位，对于局部区域处的经络穴位的识别精度不够高。


技术实现要素：

4.有鉴于此，本技术提出了一种局部增强的人体经络识别方法，可以有效提高局部区域处的经络穴位的识别精度。
5.根据本技术的一方面，提供了一种局部增强的人体经络识别方法，包括：
6.对采集到的人体图像进行关键点识别，得到所述人体图像的关键点数据；
7.由所述关键点数据中提取出人体局部区域的初始关键点；
8.基于识别出的人体局部区域的初始关键点，由所述人体图像中截取对应的局部区域，得到局部样本；
9.将所述局部样本输入至局部模型中，由所述局部模型对所述局部样本进行关键点识别，得到局部关键点。
10.在一种可能的实现方式中，所述人体局部区域包括人体头部区域、人体脚部区域和人体手部区域中的至少一种。
11.在一种可能的实现方式中，由所述关键点数据中提取出人体局部区域的初始关键点时，根据预先构建的标准局部关键点数据库进行提取。
12.在一种可能的实现方式中，基于识别出的人体局部区域的初始关键点，由所述人体图像中截取对应的局部区域，得到局部样本，包括：
13.由人体局部区域的初始关键点中选取出各局部区域的中心关键点；
14.根据所选取出的各所述局部区域的中心关键点，对所述人体图像进行局部区域的截取，得到所述局部样本。
15.在一种可能的实现方式中，对采集到的人体图像进行关键点识别时，基于预先构建的目标识别网络模型进行。
16.根据本技术的另一方面，还提供了一种局部增强的人体经络识别装置，包括关键
点识别模块、关键点提取模块、局部区域截取模块和局部关键点获取模块；
17.所述关键点识别模块，被配置为对采集到的人体图像进行关键点识别，得到所述人体图像的关键点数据；
18.所述关键点提取模块，被配置为由所述关键点数据中提取出人体局部区域的初始关键点；
19.所述局部区域截取模块，被配置为基于识别出的人体局部区域的初始关键点，由所述人体图像中截取对应的局部区域，得到局部样本；
20.所述局部关键点获取模块，被配置为将所述局部样本输入至局部模型中，由所述局部模型对所述局部样本进行关键点识别，得到局部关键点。
21.在一种可能的实现方式中，所述关键点提取模块，被配置为由所述关键点数据中提取出人体局部区域的初始关键点时，根据预先构建的标准局部关键点数据库进行提取。
22.在一种可能的实现方式中，所述局部区域截取模块包括中心关键点选取子模块和区域截取子模块；
23.所述中心关键点选取子模块，被配置为由人体局部区域的初始关键点中选取出各局部区域的中心关键点；
24.所述区域截取子模块，被配置为根据所选取出的各所述局部区域的中心关键点，对所述人体图像进行局部区域的截取，得到所述局部样本。
25.根据本技术的另一方面，还提供了一种局部增强的人体经络识别设备，包括：
26.处理器；
27.用于存储处理器可执行指令的存储器；
28.其中，所述处理器被配置为执行所述可执行指令时实现前面任一所述的方法。
29.根据本技术的另一方面，还提供了一种非易失性计算机可读存储介质，其上存储有计算机程序指令，所述计算机程序指令被处理器执行时实现前面任一所述的方法。
30.通过对采集到的人体图像进行关键点识别，得到人体图像中整体经络的关键点数据之后，再由整体经络的关键点数据中提取出人体局部区域的初始关键点，基于所提取出的人体局部区域的初始关键点由人体图像截取对应的局部区域，然后再对所截取的局部区域再次进行关键点识别，得到最终的局部关键点，这就实现了对初次识别出的人体局部区域部位的关键点的补充和修正，最终保证了所识别出的人体经络的穴位点在各个部位处的准确度和完整性。
31.根据下面参考附图对示例性实施例的详细说明，本技术的其它特征及方面将变得清楚。
附图说明
32.包含在说明书中并且构成说明书的一部分的附图与说明书一起示出了本技术的示例性实施例、特征和方面，并且用于解释本技术的原理。
33.图1示出本技术实施例的局部增强的人体经络识别方法的流程图；
34.图2示出本技术实施例的局部增强的人体经络识别装置的结构框图；
35.图3示出本技术实施例的局部增强的人体经络识别设备的结构框图。
具体实施方式
36.以下将参考附图详细说明本技术的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面，但是除非特别指出，不必按比例绘制附图。
37.在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
38.另外，为了更好的说明本技术，在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解，没有某些具体细节，本技术同样可以实施。在一些实例中，对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述，以便于凸显本技术的主旨。
39.图1示出根据本技术一实施例的局部增强的人体经络识别方法的流程图。如图1所示，该方法包括：步骤s100，对采集到的人体图像进行关键点识别，得到人体图像的关键点数据。此处，需要说明的是，在对人体图像进行关键点识别时，所识别出的关键点为人体经络中的各穴位点。在得到人体图像的关键点数据后，再通过步骤s200，由关键点数据中提取出人体局部区域的初始关键点。其中，在本技术实施例的方法中，人体局部区域主要指的是人体头部区域、人体手部区域和人体脚部区域等。也就是说，在上述步骤s100中识别得到的关键点数据为人体整体经络的各穴位点，由于受到在采集人体整体图像时，对于局部区域部位在进行关键点识别时通常会出现关键点识别不清楚或遗漏的情况。因此，在通过步骤s100识别出人体整体经络的穴位点之后，再通过步骤s200，由关键点数据中提取出人体局部区域的初始关键点，进而再通过步骤s300，基于识别出的人体局部区域的初始关键点，由人体图像中截取对应的局部区域，得到局部样本。即，根据识别出的人体局部区域的初始关键点由人体图像中截取对应的局部区域，并以识别出初始关键点的局部区域作为局部样本，然后再通过步骤s400，将局部样本输入至局部模型中，由局部模型对局部样板进行关键点识别，得到局部关键点。
40.由此，本技术实施例的方法，在通过对采集到的人体图像进行关键点识别，得到人体图像中整体经络的关键点数据之后，再由整体经络的关键点数据中提取出人体局部区域的初始关键点，基于所提取出的人体局部区域的初始关键点由人体图像截取对应的局部区域，然后再对所截取的局部区域再次进行关键点识别，得到最终的局部关键点，这就实现了对初次识别出的人体局部区域部位的关键点的补充和修正，最终保证了所识别出的人体经络的穴位点在各个部位处的准确度和完整性。
41.其中，根据前面所述，人体局部区域可以包括人体头部区域、人体手部区域和人体脚部区域中的至少一种。这是因为在人体的头部、手部和脚部等部位经络穴位点较为集中，并且相较于其他部位来说，经络穴位点更多，因此需要对局部区域处的经络穴位点进行着重识别。
42.在本技术实施例的方法中，通过由初次识别出的关键点数据中提取出人体局部区域的初始关键点，再根据提取出的人体局部区域的初始关键点由人体图像中截取出对应的局部区域，然后直接将该局部区域作为局部样本进行局部区域关键点的再次识别，既保证了识别出的局部关键点与初次识别出的其他部位的关键点在人体姿势上的一致性，同时还避免了多张人体图像的采集的操作。
43.进一步地，在本技术实施例的方法中，由关键点数据中提取出人体局部区域的初
始关键点时，可以根据预先构建的标准局部关键点数据库进行提取。即，通过预先构建标准局部关键点数据库，该数据库中存储的关键点数据均为由人体经络图中所筛选出来的人体各局部区域部位处所包含的全部的经络穴位点。通过将识别出的关键点数据与标准局部关键点数据库中的经络穴位点进行比对，即可由关键点数据中提取出人体局部区域处的各关键点。
44.此外，在一种可能的实现方式中，基于识别出的初始局部关键点，由人体图像中截取对应的局部区域，得到局部样本时，可以通过以下方式来实现。
45.首先，由初始局部关键点中选取出各局部区域的中心关键点，然后再根据所选取出的各局部区域的中心关键点，对人体图像进行局部区域的截取，得到局部样本。
46.此处，需要说明的是，所选取出的各局部区域的中心关键点指的是位于局部区域中心位置处的经络穴位点。在选取出局部区域的中心关键点之后，再根据中心关键点对人体图像进行局部区域的截取，从而得到局部样本。
47.在一种可能的实现方式中，根据选取出的中间关键点进行局部区域的截取时，可以采用预先设置的裁剪框进行。即，以所选取出的中心关键点为裁剪框的中心，然后按照裁剪框的形状由人体图像中截取对应的区域即为局部区域。其中，裁剪框的形状和尺寸可以根据不同的局部区域进行不同的设置。
48.如：对于人体头部区域，可以采用圆形框，对于人体手部区域和脚部区域则可以采用矩形框。同时，对于裁剪框的尺寸的设置同样可以通过对人体各局部区域进行采样统计来确定。
49.在一种可能的实现方式中，人体头部区域可以采用圆形框，人体手部和脚部区域采用矩形框。同时，人体头部的裁剪框的半径大小的取值范围可以为：450像素，如人体头部的裁剪框也是选用矩形框的话，其尺寸大小则为：450像素*450像素；人体手部裁剪框的尺寸大小的取值范围可以为：450像素*450像素，人体脚部裁剪框的尺寸大小的取值范围可以为：450像素*450像素。
50.对应的，在根据所选取出的各局部区域的中心关键点，对人体图像进行局部区域的截取时，具体包括：根据所选取出的中心关键点，调取对应的局部区域裁剪框，然后以中心关键点作为局部区域裁剪框的中心在人体图像中进行局部区域的裁剪。
51.在裁剪得到局部区域后，即可将局部区域的图像作为局部样本，将局部样本输入至局部模型中，由局部模型对局部样本进行关键点识别，得到局部区域处最终的局部关键点。
52.此处，应当指出的是，对局部样本进行关键点识别的局部模型可以采用本领域常规的目标识别网络模型来实现，此处不对其进行具体限定。
53.此外，在一种可能的实现方式中，对局部样本进行关键点识别时所使用的局部模型可以根据不同的局部区域对应调用不同的局部模型进行识别。即，对于人体头部区域，对应调用头部区域的局部模型进行头部区域处关键点(即，经络穴位点)的识别。对于人体手部区域，对应调用手部区域局部模型进行手部区域处的关键点的识别。对于人体脚部区域，则对应调用脚部区域的局部模型进行脚部区域处的关键点的识别。
54.其中，不同区域处的局部模型与局部区域可以通过设置唯一的区域标识进行对应。从而在根据中心关键点截取对应的局部区域得到局部样本后，可以根据当前的中心关
键点进行对应的局部区域的标识的标记，然后再根据所标记的局部区域调用对应的局部模型进行局部关键点的再次识别。
55.同时，还需要指出的是，在本技术实施例的方法中，对采集到的人体图像进行关键点识别时，同样可以采用预先构建的目标识别网络模型来实现。并且，所构建的用于对人体图像进行关键点识别的目标识别网络模型同样也可以采用本领域常规的神经网络来实现。此处也不对其进行赘述。
56.相应的，基于前面任一所述的局部增强的人体经络识别方法，本技术还提供了一种局部增强的人体经络识别装置。由于本技术提供的局部增强的人体经络识别装置的工作原理与本技术的局部增强的人体经络识别方法的原理相同或相似，因此重复之处不再赘述。
57.参阅图2，本技术提供的局部增强的人体经络识别装置100，包括关键点识别模块110、关键点提取模块120、局部区域截取模块130和局部关键点获取模块140。其中，关键点识别模块110，被配置为对采集到的人体图像进行关键点识别，得到人体图像的关键点数据。关键点提取模块120，被配置为由关键点数据中提取出人体局部区域的初始关键点。局部区域截取模块130，被配置为基于识别出的人体局部区域的初始关键点，由人体图像中截取对应的局部区域，得到局部样本。局部关键点获取模块140，被配置为将局部样本输入至局部模型中，由局部模型对局部样本进行关键点识别，得到局部关键点。
58.在一种可能的实现方式中，关键点提取模块120，被配置为由关键点数据中提取出人体局部区域的初始关键点时，根据预先构建的标准局部关键点数据库进行提取。
59.在一种可能的实现方式中，局部区域截取模块130包括中心关键点选取子模块和区域截取子模块(图中未示出)。其中，中心关键点选取子模块，被配置为由人体局部区域的初始关键点中选取出各局部区域的中心关键点。区域截取子模块，被配置为根据所选取出的各局部区域的中心关键点，对人体图像进行局部区域的截取，得到局部样本。
60.更进一步地，根据本技术的另一方面，还提供了一种局部增强的人体经络识别设备200。参阅图3，本技术实施例的局部增强的人体经络识别设备200包括处理器210以及用于存储处理器210可执行指令的存储器220。其中，处理器210被配置为执行可执行指令时实现前面任一所述的局部增强的人体经络识别方法。
61.此处，应当指出的是，处理器210的个数可以为一个或多个。同时，在本技术实施例的局部增强的人体经络识别设备200中，还可以包括输入装置230和输出装置240。其中，处理器210、存储器220、输入装置230和输出装置240之间可以通过总线连接，也可以通过其他方式连接，此处不进行具体限定。
62.存储器220作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序和各种模块，如：本技术实施例的局部增强的人体经络识别方法所对应的程序或模块。处理器210通过运行存储在存储器220中的软件程序或模块，从而执行局部增强的人体经络识别设备200的各种功能应用及数据处理。
63.输入装置230可用于接收输入的数字或信号。其中，信号可以为产生与设备/终端/服务器的用户设置以及功能控制有关的键信号。输出装置240可以包括显示屏等显示设备。
64.根据本技术的另一方面，还提供了一种非易失性计算机可读存储介质，其上存储有计算机程序指令，计算机程序指令被处理器210执行时实现前面任一所述的局部增强的
人体经络识别方法。
65.以上已经描述了本技术的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场中的技术的改进，或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。