基于神经网络模型的竹种智能识别方法和系统与流程

1.本发明涉及物种识别技术领域，尤其涉及一种基于神经网络模型的竹种智能识别方法。


背景技术：

2.形态学是植物分类的基础。经典形态学分类是以生殖器官，如花、果实、种子和以植物体营养器官，如根、茎、叶形态和结构特征作为分类依据。竹类植物以无性繁殖为主，只有在生长条件发生重大改变或者自身的某些原因才会导致开花，且开花周期长，花期短。因此，实践中主要依靠竹鞭、竹笋、竹竿、竹叶等营养器官形态学特征作为分类和识别的依据。随着学科的交叉，更有学者利用解剖特征、化学组成和分子生物技术等方法对竹种进行分类，但这些方法采样过程中均须借助于形态学分类方法，不能取代形态分类学，而是作为后者的一个重要补充，与其他生物学科一起，共同促进竹类植物分类学的进一步发展。
3.竹子由于种类差异和生长环境的影响，同种之间形态可能存在着很大的差异，不同种之间也可能有着较大的相似性，分类和种系鉴定相较于其它植物难度更大，不仅需要依靠经验丰富的专业人员，费时费力，还存在主观性、模糊性与效率低等问题。


技术实现要素：

4.本发明的目的是提供一种基于神经网络模型的竹种智能识别方法，部分实施例能够用以解决现有技术中主观性、模糊性与效率低的缺陷，实现竹种的机器视觉识别。
5.本发明提供的一种基于神经网络模型的竹种智能识别方法，所述识别方法包括：
6.获取待测竹种图像；
7.基于神经网络模型对所述待测竹种图像进行识别，获取所述待测竹种图像的竹种识别结果；
8.其中，所述神经网络模型通过训练集数据完成训练，所述训练集数据为标注出形态学特征的竹种图像。
9.根据本发明提供的一种基于神经网络模型的竹种智能识别方法，所述竹种图像中标注的形态学特征，包括：
10.竹竿、叶和笋的边缘轮廓特征、纹理特征和颜色特征。
11.根据本发明提供的一种基于神经网络模型的竹种智能识别方法，所述竹竿、叶和笋的边缘轮廓特征、纹理特征和颜色特征，包括：
12.竿环的隆起程度特征、颜色特征，箨环的隆起程度特征、被毛与被粉特征、残留物特征，箨舌的形状特征、大小特征、颜色特征、被毛与被粉特征，箨耳的大小特征、形状特征、颜色特征、被毛与被粉特征。
13.根据本发明提供的一种基于神经网络模型的竹种智能识别方法，所述竹种图像通过标准化程序拍摄获取。
14.根据本发明提供的一种基于神经网络模型的竹种智能识别方法，所述标准化程序
包括：拍摄时，采用预设的相机、镜头，依照大型竹、中型竹、小型竹、地被竹的分级标准，对于不同等级的拍摄对象采用相应的预设的拍摄距离。
15.根据本发明提供的一种基于神经网络模型的竹种智能识别方法，所述获取所述待测竹种图像的竹种识别结果，之后包括：
16.获取对竹种识别结果的质疑；
17.确认对竹种识别结果的质疑为真；
18.将所述待测竹种图像重新标注形成的样本数据添加入所述训练集数据，触发所述神经网络模型的再训练。
19.根据本发明提供的一种基于神经网络模型的竹种智能识别方法，所述神经网络模型为yolo模型。
20.本发明还提供的一种基于神经网络模型的竹种智能识别系统，所述识别系统包括：
21.获取模块，所述获取模块获取待测竹种图像；
22.识别模块，所述识别模块基于神经网络模型对所述待测竹种图像进行识别，获取所述待测竹种图像的竹种识别结果；
23.其中，所述神经网络模型通过训练集数据完成训练，所述训练集数据为标注出形态学特征的竹种图像。
24.本发明还提供的一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一项所述基于神经网络模型的竹种智能识别方法的步骤。
25.本发明还提供的一种非暂态计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如上述任一项所述基于神经网络模型的竹种智能识别方法的步骤。
26.本发明还提供的一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如上述任一项所述基于神经网络模型的竹种智能识别方法的步骤。
27.本发明提供的基于神经网络模型的竹种智能识别方法和系统，通过形态学特征提取和智能识别神经网络模型，实现竹种的机器视觉识别。
附图说明
28.为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
29.图1为本发明提供的一种基于神经网络模型的竹种智能识别方法的流程示意图；
30.图2为本发明提供的基于神经网络模型的竹种智能识别方法的另一流程示意图；
31.图3为本发明提供的神经网络模型训练流程图；
32.图4为本发明提供的竹种识别系统架构图；
33.图5为本发明提供的基于神经网络模型的竹种智能识别系统的结构示意图；
34.图6为本发明提供的一种电子设备的实体结构示意图。
具体实施方式
35.为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
36.下面结合附图，通过具体的实施例及其应用场景对本技术实施例提供的基于神经网络模型的竹种智能识别方法进行详细地说明。
37.图1为本发明提供的一种基于神经网络模型的竹种智能识别方法的流程示意图，如图1所示，本发明提供的一种基于神经网络模型的竹种智能识别方法，识别方法包括：
38.步骤100、获取待测竹种图像；
39.可选地，获取主体为至于智能手机内的app，其通过相机实时拍摄待测竹种图像；
40.步骤200、基于神经网络模型对待测竹种图像进行识别，获取待测竹种图像的竹种识别结果；
41.其中，神经网络模型通过训练集数据完成训练，训练集数据为标注出形态学特征的竹种图像；
42.可选地，神经网络模型通过在先的训练配置好相关参数设置在app中；
43.可选地，训练好的神经网络模型将通过docker打包，作为微服务部署到云服务器上，可对微服务进行编排及管理，通过接口层向应用层提供服务；
44.可选地，对于训练集数据中使用的的竹种图像，先运用画图软件对前景和背景进行分割，再邀请竹子分类学领域的权威专家利用专业化的图像标注软件对分割后的前景图片进行特征标注，最后利用专业软件对标注的特征进行提取；
45.本实施例通过形态学特征提取，进行特征标注与数据集管理，通过参数的不断优化建立基于神经网络模型的竹类资源识别算法，实现竹种的机器视觉识别，发挥计算机视觉的先进性，引入神经网络模型来辅助甚至替代传统人工进行竹种识别。
46.进一步地，另一实施例中，本实施例提供一种基于神经网络模型的竹种智能识别方法，竹种图像中标注的形态学特征，包括：
47.竹竿、叶和笋的边缘轮廓特征、纹理特征和颜色特征。优选地，竹竿、叶和笋的边缘轮廓特征、纹理特征和颜色特征，包括：竿环的隆起程度特征、颜色特征，箨环的隆起程度特征、被毛与被粉特征、残留物特征，箨舌的形状特征、大小特征、颜色特征、被毛与被粉特征，箨耳的大小特征、形状特征、颜色特征、被毛与被粉特征。
48.本实施例通过对竹子各部位特征图像提取和训练，优化模型参数，提升模型的准确率和检测速率。
49.进一步地，另一实施例中，图2为本发明提供的基于神经网络模型的竹种智能识别方法的另一流程示意图，如图2所示，本实施例提供一种基于神经网络模型的竹种智能识别方法，竹种图像通过标准化程序拍摄获取，优选地，标准化程序包括：拍摄时，采用预设的相机、镜头，依照大型竹、中型竹、小型竹、地被竹的分级标准，对于不同等级的拍摄对象采用相应的预设的拍摄距离。
50.可选地，由于拍摄自然生长状态下的竹子，其背景环境十分复杂，拍摄的图像易受竹株大小、拍摄距离及角度、枝叶遮蔽等因素的影响，不易获得主体突出、比例相对一致的
照片，因此，在拍摄过程中采取必要的标准化程序显得尤为重要，采用佳能5d3相机，配置50mm定焦镜头，依照大型竹、中型竹、小型竹、地被竹等不同类型竹类植物分级标准，按照0.5-1米拍摄距离，配合三角架和快门线对被摄体的竹笋、竹竿、竹叶等部位进行拍摄，拍摄时用raw格式以最大分辨率保存拍摄图像，便于后续的图像调整和加工，拍摄时，精心选择没有病虫害，生长良好，且具有代表性的典型植株作为拍摄对象，拍摄时尽量使背景简化，并且对同一特征点选择不同的拍摄方向和角度进行多次拍摄，以获取足够多的高清图片数据；
51.本实施例通过标准化的图像采集，构建我国主要竹种的形态学特征图像数据库，通过标准化程序拍摄获取优秀的模型训练集数据，从而获得更好的训练效果。
52.进一步地，另一实施例中，本实施例提供一种基于神经网络模型的竹种智能识别方法，神经网络模型为yolo模型。
53.可选地，yolo为一种新的目标检测方法，该方法的特点是实现快速检测的同时还达到较高的准确率。将目标检测任务看作目标区域预测和类别预测的回归问题，该方法采用单个神经网络直接预测物品边界和类别概率，实现端到端的物品检测，相对于其它目标检测与识别方法(比如fast r-cnn)将目标识别任务分类目标区域预测和类别预测等多个流程，yolo将目标区域预测和目标类别预测整合于单个神经网络模型中，实现在准确率较高的情况下快速目标检测与识别，更加适合现场应用环境；
54.可选地，图3为本发明提供的神经网络模型训练流程图，如图3所示，利用focal loss函数解决竹种形态特征数据集样本不均衡问题，transformer纯注意力机制来提升模型收敛速度以及预测结果的准确性，结合数据维度对模型结构进行优化，然后再利用训练集数据对模型进行训练，通过损失函数和误差反向传播来调控参数，经过反复迭代，可使得模型逐步收敛，从而得到性能较好的yolo竹种识别模型。
55.本实施例细化了神经网络模型，提高的训练、识别的效率。
56.进一步地，另一实施例中，本实施例提供一种基于神经网络模型的竹种智能识别方法，获取待测竹种图像的竹种识别结果，之后包括：
57.获取对竹种识别结果的质疑；
58.确认对竹种识别结果的质疑为真；
59.将待测竹种图像重新标注形成的样本数据添加入训练集数据，触发神经网络模型的再训练。
60.可选地，图4为本发明提供的竹种识别系统架构图，如图4所示，基于神经网络模型的竹种智能识别方法的实现系统总体可以分为6层，从下到上依次为云基础设施层、数据层、数据处理层、模型算法层、接口层以及应用层；优选地，应用层主要提供三大功能：(1)图像识竹：通过将拍摄的竹子照片上传到系统，系统可以自动返回识别到的竹子种类；(2)新增竹种：通过添加新竹种的高清图片、形态学特征文字以及标签，可以重新训练模型，使得模型具备识别新竹种的能力；(3)挑战结果：如果用户对竹种识别的结果存在质疑，可以挑战结果，后台专家可以对质疑进行审核，校准及回复，并触发样本的重标注以及模型的再训练。
61.本实施例通过用户的质疑反馈、直接添加新竹种的训练数据等不断完善模型的训练集数据，从而不断提升识别的准确性。
62.下面对本发明提供的基于神经网络模型的竹种智能识别系统进行描述，下文描述的基于神经网络模型的竹种智能识别系统与上文描述的基于神经网络模型的竹种智能识别方法可相互对应参照。
63.图5为本发明提供的基于神经网络模型的竹种智能识别系统的结构示意图，如图5所示，本发明还提供的一种基于神经网络模型的竹种智能识别系统，识别系统包括：
64.获取模块，获取模块获取待测竹种图像；
65.识别模块，识别模块基于神经网络模型对待测竹种图像进行识别，获取待测竹种图像的竹种识别结果；
66.其中，神经网络模型通过训练集数据完成训练，训练集数据为标注出形态学特征的竹种图像。
67.本实施例开发成套的竹种智能识别系统，做到对我国现有主要竹种科学、精准的快速识别。
68.图6为本发明提供的一种电子设备的实体结构示意图，如图6所示，该电子设备可以包括：处理器(processor)810、通信接口(communications interface)820、存储器(memory)830和通信总线840，其中，处理器810，通信接口820，存储器830通过通信总线840完成相互间的通信。处理器810可以调用存储器830中的逻辑指令，以执行基于神经网络模型的竹种智能识别方法，该方法包括：
69.获取待测竹种图像；
70.基于神经网络模型对待测竹种图像进行识别，获取待测竹种图像的竹种识别结果；
71.其中，神经网络模型通过训练集数据完成训练，训练集数据为标注出形态学特征的竹种图像。
72.此外，上述的存储器830中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read-only memory)、随机存取存储器(ram，random access memory)、磁碟或者光盘等各种可以存储程序代码的介质。
73.另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，计算机能够执行上述各方法所提供的基于神经网络模型的竹种智能识别方法，该方法包括：
74.获取待测竹种图像；
75.基于神经网络模型对待测竹种图像进行识别，获取待测竹种图像的竹种识别结果；
76.其中，神经网络模型通过训练集数据完成训练，训练集数据为标注出形态学特征的竹种图像。
77.又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各提供的基于神经网络模型的竹种智能识别方法，该方法包括：
78.获取待测竹种图像；
79.基于神经网络模型对待测竹种图像进行识别，获取待测竹种图像的竹种识别结果；
80.其中，神经网络模型通过训练集数据完成训练，训练集数据为标注出形态学特征的竹种图像。
81.以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
82.通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
83.最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。