基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法和装置制造方法及图纸

本发明专利技术涉及图像处理的技术领域，公开了一种基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法和装置。该方法包括：利用彩色相机采集不同叮咬程度的茶鲜叶图像，构成基础数据集；对基础数据集中的每个茶鲜叶图像进行数据预处理；人工标注基础数据集中的每个茶鲜叶图像；对基础数据集进行数据增广，构建增广数据集；构建卷积神经网络初始模型，利用增广数据集对卷积神经网络模型进行训练，得到卷积神经网络模型；利用卷积神经网络模型对目标茶鲜叶图像进行分级。实施本发明专利技术，可以做到精确检测茶小绿叶蝉叮咬程度的同时对茶鲜叶进行等级分类，为茶鲜叶原料适度的推断、茶鲜叶质量等级评定的定量化、自动化、规模化提供有力支撑。力支撑。力支撑。

【技术实现步骤摘要】
基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法和装置


[0001]本专利技术涉及图像处理
，具体涉及一种基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法和装置。

技术介绍

[0002]茶叶是一种极具营养价值和经济价值的饮料作物。茶鲜叶原料质量是茶叶品质的基础，鲜叶的准确等级判别是实现茶叶标准化加工的前提。目前茶鲜叶原料的质量评估主要通过人工感官评价，所得结果易受主观因素影响，缺乏量化的评价指标。因此建立一种科学、客观、便捷的茶鲜叶质量等级评价方法对茶叶标准化加工，科学指导生产，具有极其重要的现实意义。
[0003]现有研究表明，当茶树受到昆虫的侵蚀后会释放出不同的挥发性物质，对茶叶香气的形成和变化影响较大。由于茶树经小绿叶蝉聚集侵害后不仅释放出一些“互利素”，而且在茶树叶片中合成并贮存了更多的挥发物或者挥发物的前体，包括以挥发物为配基的糖苷，这些香气前体物质在加工过程中水解或转化，从而形成茶产品独特的风味品质。但目前田间观察发现，不同茶小绿叶蝉叮咬程度会对茶叶品质及产量有不一样的影响，叮咬轻的茶青制成的成品茶蜜香不明显，叮咬过重则会导致芽梢生长缓慢或停止，严重时会导致嫩叶全部焦枯脱落，影响茶叶产量。
[0004]在目前的茶园管理中，对茶小绿叶蝉叮咬后的茶鲜叶状况的判别，很大程度上还是依据人工经验进行外观判断，受主观因素的影响较大，从而导致茶鲜叶等级判别不统一，茶青外观与内质的综合检测分级技术缺乏导致茶青质量不齐、成品茶质量参差不齐等问题，极大阻碍了茶产业的标准化和规模化发展。/>[0005]目前，深度学习解决茶青分类的一个有效办法。但是现有的技术在利用图像的处理，对颜色相近的茶鲜叶是无法通过图像进行分类识别出来的，现有技术中在利用光谱领域来解决，但是数据处理存在一定的冗余，利用深度学习进行数据处理会时间过长，效果不佳，同时深度学习需要大量的有效标签化的数据，极大地阻碍了光谱技术的应用，因此茶青分类对茶产业来说是一个亟待解决的技术难题。

技术实现思路

[0006]针对所述缺陷，本专利技术实施例公开了一种基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法和装置，其以自然场景图像中茶小绿叶蝉叮咬后的茶鲜叶为主要对象，结合图像识别及深度学习，可以做到精确检测茶小绿叶蝉叮咬程度的同时对茶鲜叶进行等级分类，为茶鲜叶原料适度的推断、茶鲜叶质量等级评定的定量化、自动化、规模化提供有力支撑。
[0007]本专利技术实施例第一方面公开一种基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法，其包括：
[0008]利用彩色相机采集不同叮咬程度的茶鲜叶图像，构成基础数据集，所述不同叮咬程度包括正常、轻度、中度和重度；
[0009]对所述基础数据集中的每个茶鲜叶图像进行数据预处理，所述数据预处理包括归一化处理和使用Retinex算法来增强每个茶鲜叶图像并减少光线变化和阴影的影响；
[0010]人工标注所述基础数据集中的每个茶鲜叶图像；
[0011]对所述基础数据集进行数据增广，构建增广数据集；
[0012]构建卷积神经网络初始模型，利用所述增广数据集对所述卷积神经网络模型进行训练，得到卷积神经网络模型；
[0013]利用所述卷积神经网络模型对目标茶鲜叶图像进行分级。
[0014]作为较佳的实施例，在本专利技术实施例的第一方面中，对所述基础数据集中的每个茶鲜叶图像进行数据预处理，包括：
[0015]将所述茶鲜叶图像的像素值转化为0
‑
1之间，得到茶鲜叶归一化图像；
[0016]从所述茶鲜叶归一化图像中分离出光照分量，以获取反射图像：
[0017]log[R(x,y)]＝log[S(x,y)]‑
log[L(x,y)][0018]其中，S(x,y)为茶鲜叶归一化图像，R(x,y)为反射图像，L(x,y)为光照分量，光照分量L(x,y)通过高斯核G(x,y)与茶鲜叶归一化图像S(x,y)的卷积计算出来：
[0019]log[R(x,y)]＝log[S(x,y)]‑
log[(S(x,y)*G(x,y))][0020]再将反射图像R(x,y)的像素值映射到[0，255]内，即可得到去除光照分量后的反射图像R
′
(x,y)，记为茶鲜叶增强图像。
[0021]作为较佳的实施例，在本专利技术实施例的第一方面中，人工标注所述基础数据集中的每个茶鲜叶图像，包括：
[0022]使用图像标注工具Labelme标注每个茶鲜叶图像，并使用python脚本将标注后的数据格式转为coco格式。
[0023]作为较佳的实施例，在本专利技术实施例的第一方面中，对所述基础数据集进行数据增广，构建增广数据集，包括：
[0024]根据所述人工标注结果对所述基础数据集按照不同叮咬程度划分成四个类别的训练样本集；
[0025]对所述训练样本集使用python库中的数据增强库Augmentor或Retinex进行随机增广，将每个类别的训练样本集中的训练样本数量扩增至原来的n倍，n为大于1的正整数。
[0026]作为较佳的实施例，在本专利技术实施例的第一方面中，构建卷积神经网络初始模型，利用所述增广数据集对所述卷积神经网络模型进行训练，得到卷积神经网络模型，包括：
[0027]使用YOLOV7s作为卷积神经网络初始模型的网络结构；
[0028]在原YOLOV7s的Head部或/和Neck部添加CBAM注意力机制，形成最终的卷积神经网络初始模型；
[0029]将所述增广数据集按照预设比例划分成训练集、测试集和验证集；
[0030]使用所述训练集对所述卷积神经网络初始模型进行训练，并使用测试集和验证集对训练得到的卷积神经网络模型进行测试和验证。
[0031]作为较佳的实施例，在本专利技术实施例的第一方面中，在所述YOLOV7s网络的Head部添加CBAM注意力机制，包括：
[0032]对第一数据按照通道进行全局最大池化和均值池化，将按通道进行全局最大池化和均值池化的两个一维向量送入全连接层运算后相加，生成第一一维通道注意力，再将所述第一一维通道注意力与所述第一数据相乘，获得通道注意力调整后的第一特征图F
′
；将所述第一特征图F
′
按空间进行全局最大池化和均值池化，将按空间进行全局最大池化和均值池化生成的两个二维向量拼接后进行卷积操作，最终生成第一二维空间注意力，再将所述第一二维空间注意力与所述第一特征图F
′
按元素相乘，形成所述YOLOV7s网络的Head部的输出信息；
[0033]在所述YOLOV7s网络的Neck部添加CBAM注意力机制，包括：
[0034]对第二数据按照通道进行全局最大池化和均值池化，将按通道进行全局最大池化和均值池化的两个一维向量送入全连接层运算后相加，生成第二一维通道注意力，再将所述第二一维通道注意力与所述第二数据相乘，获得通道注意力调整后的第二特征图F...

【技术保护点】

【技术特征摘要】
1.一种基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法，其特征在于，包括：利用彩色相机采集不同叮咬程度的茶鲜叶图像，构成基础数据集，所述不同叮咬程度包括正常、轻度、中度和重度；对所述基础数据集中的每个茶鲜叶图像进行数据预处理，所述数据预处理包括归一化处理和使用Retinex算法来增强每个茶鲜叶图像并减少光线变化和阴影的影响；人工标注所述基础数据集中的每个茶鲜叶图像；对所述基础数据集进行数据增广，构建增广数据集；构建卷积神经网络初始模型，利用所述增广数据集对所述卷积神经网络模型进行训练，得到卷积神经网络模型；利用所述卷积神经网络模型对目标茶鲜叶图像进行分级。2.根据权利要求1所述的基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法，其特征在于，对所述基础数据集中的每个茶鲜叶图像进行数据预处理，包括：将所述茶鲜叶图像的像素值转化为0
‑
1之间，得到茶鲜叶归一化图像；从所述茶鲜叶归一化图像中分离出光照分量，以获取反射图像：log[R(x,y)]＝log[S(x,y)]
‑
log[L(x,y)]其中，S(x,y)为茶鲜叶归一化图像，R(x,y)为反射图像，L(x,y)为光照分量，光照分量L(x,y)通过高斯核G(x,y)与茶鲜叶归一化图像S(x,y)的卷积计算出来：log[R(x,y)]＝log[S(x,y)]
‑
log[(S(x,y)*G(x,y))]再将反射图像R(x,y)的像素值映射到[0，255]内，即可得到去除光照分量后的反射图像R
′
(x,y)，记为茶鲜叶增强图像。3.根据权利要求1所述的基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法，其特征在于，人工标注所述基础数据集中的每个茶鲜叶图像，包括：使用图像标注工具Labelme标注每个茶鲜叶图像，并使用python脚本将标注后的数据格式转为coco格式。4.根据权利要求1所述的基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法，其特征在于，对所述基础数据集进行数据增广，构建增广数据集，包括：根据所述人工标注结果对所述基础数据集按照不同叮咬程度划分成四个类别的训练样本集；对所述训练样本集使用python库中的数据增强库Augmentor或Retinex进行随机增广，将每个类别的训练样本集中的训练样本数量扩增至原来的n倍，n为大于1的正整数。5.根据权利要求1
‑
4任一项所述的基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法，其特征在于，构建卷积神经网络初始模型，利用所述增广数据集对所述卷积神经网络模型进行训练，得到卷积神经网络模型，包括：使用YOLOV7s作为卷积神经网络初始模型的网络结构；在原YOLOV7s的Head部或/和Neck添加CBAM注意力机制，形成最终的卷积神经网络初始模型；将所述增广数据集按照预设比例划分成训练集、测试集和验证集；使用所述训练集对所述卷积神经网络初始模型进行训练，并使用测试集和验证集对训
练得到的卷积神经网络模型进行测试和验证。6.根据权利要求5所述的基于神经网络和图像识别的茶小绿叶蝉叮咬鲜叶等级分类方法，其特征在于，在所述YOLOV7s网络的Head部添加CBAM注意力机制，包括：对第一数据按照通道进行全局最大池化和均值池化，将按通道进行全局最大池化和均值池化的两个一维向量送入全连接层运算后相加，生成第一一维通道注意力，再将所述第一一维通道注意力与所述第一数据相乘，获得通道注意力调整后的第一特征图F
′
；将所述第一特征图F
′
按空间进行全局最大池化和均值池化，将按空间进行全局最大池化和均值池化生成的两个二维向量拼接后进行卷积操作，最终生成第一二维空间注意力，再将所述第一二维空间注意力与所述第一特征图F
′...

【专利技术属性】
技术研发人员：周巧仪，凌彩金，邓海东，高世龙，郜礼阳，林敏玲，梁冬霞，何东波，
申请(专利权)人：华南农业大学紫金县紫龙农业开发有限公司英德市林清语茶文化传播有限公司，
类型：发明
国别省市：