一种基于多特征深度学习技术的农田害虫图像识别方法
一种基于多特征深度学习技术的农田害虫图像识别方法
【技术领域】
[0001] 本发明设及图像处理技术领域，具体来说是一种基于多特征深度学习技术的农田 害虫图像识别方法。
【背景技术】
[0002] 依靠科技创新促进农业发展成为当今发展农业的主题，计算机技术在新兴农业科 技中占有相当重要的作用，害虫图像识别技术就是其中之一。利用该技术可W及时、准确地 识别害虫，减少农药的使用，提高作物产量和质量，保护生态环境。现今已经提出了多种害 虫图像识别方法在环境得到有效控制的前提下取得了一定的识别准确率。但在实际复杂的 农田环境中，害虫图像受到来自背景环境的干扰，其识别性能将受到一定限制。多特征深度 学习与多核学习技术可W综合学习害虫图像的多种类型特征，保证不会由于一种类型特征 而影响总体的识别效果，因此如何增强害虫特征表现能力与有效分类成为亟需解决的问 题。
【发明内容】
[0003] 本发明的目的是为了解决现有技术中复杂环境条件下害虫图像识别性能差的缺 陷，提供一种基于多特征深度学习技术的农田害虫图像识别方法来解决上述问题。
[0004] 为了实现上述目的，本发明的技术方案如下：
[0005] -种基于多特征深度学习技术的农田害虫图像识别方法，包括W下步骤：
[0006] 针对大规模害虫图像样本进行多特征提取，提取大规模害虫图像样本的颜色特 征、纹理特征、形状特征、尺度不变特征转换特征和方向梯度直方图特征；
[0007] 多特征深度学习，对不同类型特征分别进行非监督字典训练，获得不同类型特征 的稀疏表示；
[000引训练样本的多特征表示，通过结合不同类型特征，构建害虫图像样本的多特征表 示形式-多特征稀疏编码直方图；
[0009] 构建多核学习分类器，通过学习害虫图像正负样本的稀疏编码直方图构建多核分 类器，实现害虫图像的分类。
[0010] 所述的针对大规模害虫图像样本进行多特征提取包括W下步骤：
[0011] 提取害虫图像样本的颜色特征，包括均值、方差、标准差、偏度、峰度、赌，其分别定 义如下：
[0014]
[001引其中，μ为均值、σ%方差、σ3为0的；次方，σ4为σ的四次方，S为标准差、S为偏度、Κ 表示峰度、RE为赌值、i表示颜色分量值、L表示图像灰度级数、h(i)表示颜色分量值为i的像 素概率；
[0016]采用图像局部二值模式特征来提取害虫图像样本的纹理特征，其公式如下：
[0019 ]其中LBPp, R (X，y)表示局部二值模式特征，gc表示中屯、像素点（X，y)的灰度值、gn表 示在半径R处相邻点的灰度值、P表示中屯、像素点周围相邻像素点的个数；
[0020]使用联合不变矩特征来提取害虫图像样本的形状特征，其定义如下：
[0025] 其中Φι为化不变矩，目1是第i维联合不变矩特征；
[0026] 提取害虫图像样本的尺度不变特征转换特征；
[0027] 提取害虫图像样本的方向梯度直方图特征，取像素值下的梯度幅值G(x，y)和梯度 方向a(x，y)，其计算公式如下：
[0030] 其中，H(x，y)为点(x，y)处的像素值，
[0031] 其特征向量描述如下:在8 X 8块上分割4个4 X 4块，获得一个4 X 8共32维的特征向 量；
[0032] 在若干个害虫图像样本中均进行颜色特征、纹理特征、形状特征、尺度不变特征转 换特征和方向梯度直方图特征的提取。
[0033] 所述的多特征深度学习包括W下步骤：
[0034] 针对第k种特征类型进行非监督字典训练，固定随机字典〇k对输入数据yk进行稀疏 表示，得到稀疏向量矩阵xk，其公式如下；
[0035]
[0036] 其中：xk表示稀疏向量矩阵，通过I |χι| |〇<Τ进行系数限制；表示第k 类特征训练字典;yk表示输入害虫图像第k类特征集合；
[0037]逐列更新随机字典D，其公式如下：
[00；3 引
[0039] 其中(13表示0"中第3列，為表示第3个行矢量，6^^表示字典的贡献矩阵；
[0040] 判断误差是否满足精度要求或是否达到指定的迭代次数，满足则结束训练，产生 非监督字典啤；不满足则继续计算稀疏向量矩阵xk并更新随机字典〇k;
[0041] 对m种害虫图像样本特征均进行非监督字典学习方式，学习获得m种非监督字典， 其中m种害虫图像样本特征包括颜色特征、纹理特征、形状特征、尺度不变特征转换特征和 方向梯度直方图特征。
[0042] 所述的训练样本的多特征表示包括W下步骤：
[0043] 针对第k种特征类型的非监督字典第k类特征获得表示该种特征的稀疏编 码，其计算公式如下：
[0044]
[0045] 其中括表示第k类害虫图像特征中第i个特征向量；
[0046] 使用稀疏编码直方图来表示稀疏编码的分布情况，公式如下：
[0047]
[004引其中：Hk(q)表示第k类特征的稀疏编码直方图中第q个组距，Co为归一化常数，kO 表示一个各向同性核函数，分配不同的权值，对于远离中屯、点的位置分配较小的权值，靠近 中屯、点的位置分配较大的权值，Y表示目标点，Cl表示图像中屯、点位置，4表示第i个稀疏特 征的第q维数据；
[0049] 分别计算颜色特征、纹理特征、形状特征、尺度不变特征转换特征和方向梯度直方 图特征的稀疏编码直方图，获得m类稀疏编码直方图护。
[0050] 所述的构建多核学习分类器包括W下步骤：
[0051] 对分类器的学习训练采取有监督的方式，对负样本与每个特征类别进行人为区 分;获取N个训练样本，使用m类的稀疏编码直方图#，对m类特征和负样本图像特征均采取 特征形式为=!八!，八?、...，//;."'}，其中jEN，其多核学习公式如下：
[0054] 其中ω k表示对应核函数α WMO =〈 A (作)Λ )〉的权重，恥为超平面参数；
[0055] 使用支持向量机对不同的核函数学习不同的权值，对于测试样本，其分类的决策 函数为：
[0化6]
[0057]其中，b为阀值量，Ok化i，x)表示不同的核函数。
[005引所述的提取害虫图像样本的尺度不变特征转换特征包括W下步骤：
[0059] 尺度空间极值点检测，采用角点检测方法进行极值点检测，获得候选特征点，由可 变尺度高斯函数G(x，y，〇)与输入图像I(x，y)卷积得到尺度空间定义函数L(x，y，〇)，其公式 如下：
[0060] L(x,y,〇)=G(x,y,〇)*I(x,y)
[0061 ] 其中，*为X和y上的卷积运算
[0062] 特征点 D(x，y，〇)为；
[0063] D(x,y,〇) = (G(x,y,k〇)-G(x,y,〇))*I(x,y)=L(x,y,k〇)-L(x,y,〇)
[0064] 其中k为相邻两尺度差异的常数因子；
[0065] 对候选特征点过滤获得精确特征点，针对获选特征点处进行拟合函数运算，其公 式如下：
[0066]
[0067] 其中，D为D(x，y，〇)在特征点位置的值；
[0068] 确定特征点方向，尺度空间中任一点L(X，y)处的梯度值m(X，y)与方向Θ(X,y)分别 为：
[0069]
[0070] 0(x,y)=arctan((L(x,y+l)-L(x,y-l))/(L(x+1 ,y)-L(x-l ,y)))；
[0071] 其特征向量描述如下特征点为中屯、的16X16区域中4X4为一个单位，统计每 个单位内的8维梯度直方图，每个特征点有4X4个单位，共4X4X8 = 128维特征向量。
[0072] 有益效果
[0073] 本发明的一种基于多特征深度学习技术的农田害虫图像识别方法，与现有技术相 比提高了害虫识别的准确率。利用害虫图像的全局特征（颜色、形状、纹理）与局部特征 化0G、SIFT)对害虫图像进行深度学习得到多特征表示-多特征编码直方图，结合多核学习 分类器，实现了害虫图像识别较高的识别率。
【附图说明】
[0074] 图1为本发明的方法流程图。
【具体实施方式】
[0075] 为使对本发明的结构特征及所达成的功效有更进一步的了解与认识，用W较佳的 实施例及附图配合详细的说明，说明如下：
[0076] 本方法先获取大规模的害虫样本图像，此害虫样本图像只包括害虫个体，不包括 外界环境的表达。针对害虫样本从颜色特征、纹理特征、形状特征、尺度不变特征转换特征 和方向梯 度直方图特征五个特征对不同的害虫进行区分。针对五个特征进行深度学习得到 多特征表示-多特征编码直方图，再利用多核学习分类器，对害虫图像(包括外界环境的害 虫图像)进行分类，从而提高了害虫图像的识别度。
[0077] 如图1所示，本发明所述的一种基于多特征深度学习技术的农田害虫图像识别方 法，包括W下步骤：
[0078] 第一步，针对大规模害虫图像样本进行多特征提取，提取大规模害虫图像样本的 颜色特征、纹理特征、形状特征、尺度不变特征转换(SIFT)特征和方向梯度直方图化0G)特 征。目前的害虫识别主要根据图像的单一特征进行，缺乏对多种特征的综合应用。单一特征 限制了众多特征联合对图像进行i全释的可能，对提高害虫图像识别性能范围有限。基于W 上分析，本发明综合考虑多种特征，包括全局特征（颜色、形状、纹理）和局部特征（SIFT、 HOG)。得到的多种类型特征表示图像中包含的多种信息，从而提高识别性能。其具体包括W 下步骤：
[0079] (1)提取害虫图像样本的颜色特征，包括均值、方差、标准差、偏度、峰度、赌，其分 别定义如下：
[008引其中，μ为均值、σ2为方差、σ3为0的；次方，σ4为σ的四次方，S为标准差、S为偏度、K 表示峰度、RE为赌值、i表示颜色分量值、L表示图像灰度级数、h(i)表示颜色分量值为i的像 素概率。
[0084] (2)采用图像局部二值模式特征来提取害虫图像样本的纹理特征，其公式如下：
[0087 ]其中LBPp, R (X，y)表示局部二值模式特征，gc表示中屯、像素点（X，y)的灰度值、gn表 示在半径R处相邻点的灰度值、P表示中屯、像素点周围相邻像素点的个数。
[0088] (3)根据害虫图像的形状特征，使用联合不变矩特征来提取害虫图像样本的形状 特征，其具有缩放、旋转不变性，能够对区域与轮廓进行统一表示。其定义如下：
[0093] 其中Φ i为化不变矩，θι是第i维联合不变矩特征。
[0094] (4)提取害虫图像样本的尺度不变特征转换特征，尺度不变特征转换（SIFT)特征 是目前最有效的局部不变特征描述方法。作为特征描述子，其对于图像的旋转、平移、尺度 变化和亮度变化具有不变性。其包括W下步骤：
[00巧]A、尺度空间极值点检测，SIFT方法采用角点检测DoG(difference-〇f-Gaussian function)方法进行极值点检测，获得候选特征点，由可变尺度高斯函数G(x，y，〇)与输入图 像I(x，y)卷积得到尺度空间定义函数L(x，y，〇)，其公式如下：
[0096] L(x,y,〇)=G(x,y,〇)*I(x,y)
[0097] 其中，*为X和y上的卷积运算
[009引特征点D(x，y，0)为：
[0099] D(x,y,〇) = (G(x,y,k〇)-G(x,y,〇))*I(x,y)=L(x,y,k〇)-L(x,y,〇)
[0100] 其中k为相邻两尺度差异的常数因子；
[0101 ] B、对候选特征点过滤获得精确特征点，由于计算获得特征点不一定位于整数坐标 位置，需要对其进行定位，去除对比度低的特征点与边缘相应点。
[0102] 针对获选特征点处进行拟合函数运算，其公式如下：
[0103]
[0104] 其中，D为D(x，y，〇)在特征点位置的值；
[0105] C、确定特征点方向，尺度空间中任一点L(x，y)处的梯度值m(x，y)与方向目(x，y)分 别为：
[0106]
[0107] 0(x,y)=arctan((L(x,y+l)-L(x,y-l))/(L(x+1 ,y)-L(x-l ,y)))；
[010引其特征向量描述如下特征点为中屯、的16X16区域中4X4为一个单位，统计每 个单位内的8维梯度直方图，每个特征点有4X4个单位，共4X4X8 = 128维特征向量。
[0109] (5)提取害虫图像样本的方向梯度直方图化0G)特征，计算局部区域梯度上的梯度 方向直方图构成特征，其为SIFT特征方法的最后两步，取像素值下的梯度幅值G(x，y)和梯 度方向a(x，y)，其计算公式如下：
[0110]
[0111] a(x,y)=arctan((H(x,y+l)-H(x,y-l))/(H(x+1 ,y)-H(x-l ,y))),
[0112] 其中，H(x，y)为点(x，y)处的像素值，
[0113] 其特征向量描述如下:在8X8块上分割4个4X4块，获得一个4X8共32维的特征向 量。
[0114] (6)在若干个害虫图像样本中均进行颜色特征、纹理特征、形状特征、尺度不变特 征转换特征和方向梯度直方图特征的提取，形成害虫图像样本的5种特征集合。
[0115] 第二步，多特征深度学习，采用深度学习理论中稀疏编码理论对不同类型特征分 别进行非监督字典训练，获得不同类型特征的稀疏表示。经过针对大规模害虫图像样本进 行多特征提取的步骤，共获得m=5种害虫图像特征类型，包括颜色、纹理、形状、SIFT和HOG。 在此基于深度学习稀疏编码理论，则针对第k种特征类型kem，采用KSVD方法进行非监督字 典训练。其具体要求步骤如下：
[0116] (1)针对第k种特征类型（5种害虫图像特征类型之一)进行非监督字典训练，固定 随机字典〇k对输入数据yk进行稀疏表示，得到稀疏向量矩阵xk，其公式如下：
[0117]
[011引其中：xk表示稀疏向量矩阵，通过I |xi| |0<Τ进行系数限制；仪eir*"，Dk表示第k 类特征训练字典;yk表示输入害虫图像第k类特征集合。
[0119] (2)逐列更新随机字典D，其公式如下：
[0120]
[0121] 其中山表示〇k中第S列，為表示第S个行矢量，。V、-,;表示字典的贡献矩阵。
[0122] (3)判断误差是否满足精度要求或是否达到指定的迭代次数，满足则结束训练，产 生非监督字典^ :不满足则继续计算稀疏向量矩阵xk并更新随机字典〇k。
[0123] (4)对m种害虫图像样本特征均进行非监督字典学习方式，学习获得m种非监督字 典，其中m种害虫图像样本特征包括颜色特征、纹理特征、形状特征、尺度不变特征转换特征 和方向梯度直方图特征。
[0124] 第Ξ步，训练样本的多特征表示，通过结合不同类型特征(分别针对m种非监督字 典），构建害虫图像样本的多特征表示形式-多特征稀疏编码直方图。其具体包括W下步骤： [01巧](1)针对第k种特征类型的非监督字典Ο?与第k类特征获得表示该种特征的稀疏 编码，其计算公式如下：
[0126]
[0127] 其中如表示第k类害虫图像特征中第i个特征向量。
[0128] (2)使用稀疏编码直方图来表示稀疏编码的分布情况，公式如下：
[0129]
[0130] 其中：#(q)表示第k类特征的稀疏编码直方图中第q个组距，Co为归一化常数，kO 表示一个各向同性核函数，分配不同的权值，对于远离中屯、点的位置分配较小的权值，靠近 中屯、点的位置分配较大的权值，Y表示目标点，C康示图像中屯、点位置，马^表示第i个稀疏特 征的第q维数据。
[0131] (3)分别计算颜色特征、纹理特征、形状特征、尺度不变特征转换特征和方向梯度 直方图特征的稀疏编码直方图，获得m类稀疏编码直方图护。
[0132] 第四步，构建多核学习分类器，通过学习害虫图像正负样本的稀疏编码直方图构 建多核分类器，实现害虫图像的分类。害虫图像正样本指需进行害虫分类的训练图像中，带 有害虫的图像，即含有m类特征的图像。在实际应用中，还有一类图像是不含任何害虫的图 像，即负样本，此类图像只有环境背景，无害虫体现，而在图像采集过程中，不可能做到只采 集有害虫图像，不采集无害虫图像，因此分类器的分类过程中，也要考虑负样本的存在，贝U 把负样本作为单独特殊（自定义)一类害虫图像进行分类处理即可。其主要包括W下步骤：
[0133] (1)对分类器的学习训练采取有监督的方式，对负样本与每个特征类别进行人为 区分，人工区分出正样本(5个特征类别）和负样本。获取N个训练样本，使用m类的稀疏编码 直方图#，对m类特征和负样本图像特征均采取特征形式为//,叫//!，//,=，...^/^，其中托 N。在此将负样本图像也并入正样本训练中，就是将负样本列为另一类特殊的害虫类别，其 多核学习公式如下：
[0136] 其中ω康示对应核函数α抑，/// ) = (70Λ (//!!))的权重，恥为超平面参数。
[0137] (2)使用支持向量机对不同的核函数学习不同的权值，对于测试样本，其分类的决 策 函数为：
[013 引
[0139] 其中，b为阀值量，Ok化i，x)表示不同的核函数。分类向量机对多个图像进行分类， 从而将害虫类别进行区分、分类，并将没有害虫的图像单独分为一类，实现害虫的图像识别 处理。
[0140] 在针对D1和D2样本库进行试验过程中，其中D1样本库包括训练集与测试集，训练 集中有20张128X128蝴蝶图像，测试集中包含720张蝴蝶图像。D2样本库包括9个类目共225 张昆虫图像，随机选取其中一部分作为训练样本，其余为测试样本。对于D1样本库中蝴蝶图 像均具有相似的外形特征，比如形状，其主要的不同特征表现在纹理特征，因此基于多核学 习可W根据识别害虫具体情况学习得到不同的核函数权重，实现自动分类识别。实验中将 本发明方法与多种现有图像识别分类模型相比较，其中包括NSC(非负稀疏编码）、SVM(支持 向量机）、SC(稀疏编码）、LRSC(低秩稀疏编码）、SCSPM(空间金字塔匹配稀疏编码），在D1和 D2样本库上比较结果如下表1:
[0141 ] 表1在D1和D2样本库下不同方法识别率对比（％ )
[0142]
[0143] 由W上表中结果可W看出，本发明所提出的方法在运两种公共训练集上表现性能 均优于现有技术的其他方法，其应用有效并合理，能够达到识别害虫的功能，因此，本发明 所提出的方法与系统性能较优，具有实用价值。
[0144] W上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术 人员应该了解，本发明不受上述实施例的限制，上述实施例和说明书中描述的只是本发明 的原理，在不脱离本发明精神和范围的前提下本发明还会有各种变化和改进，运些变化和 改进都落入要求保护的本发明的范围内。本发明要求的保护范围由所附的权利要求书及其 等同物界定。
【主权项】
1. 一种基于多特征深度学习技术的农田害虫图像识别方法，其特征在于，包括以下步 骤： 11) 针对大规模害虫图像样本进行多特征提取，提取大规模害虫图像样本的颜色特征、 纹理特征、形状特征、尺度不变特征转换特征和方向梯度直方图特征； 12) 多特征深度学习，对不同类型特征分别进行非监督字典训练，获得不同类型特征的 稀疏表不； 13) 训练样本的多特征表示，通过结合不同类型特征，构建害虫图像样本的多特征表示 形式-多特征稀疏编码直方图； 14) 构建多核学习分类器，通过学习害虫图像正负样本的稀疏编码直方图构建多核分 类器，实现害虫图像的分类。2. 根据权利要求1所述的一种基于多特征深度学习技术的农田害虫图像识别方法，其 特征在于，所述的针对大规模害虫图像样本进行多特征提取包括以下步骤： 21) 提取害虫图像样本的颜色特征，包括均值、方差、标准差、偏度、峰度、熵，其分别定 义如下：其中，μ为均值、σ2为方差、σ3为σ的三次方，σ4为σ的四次方，S为标准差、S为偏度、K表示 峰度、RE为熵值、i表示颜色分量值、L表示图像灰度级数、h(i)表示颜色分量值为i的像素概 率； 22) 采用图像局部二值模式特征来提取害虫图像样本的纹理特征，其公式如下：其中LBPP,R(x，y)表示局部二值模式特征，g。表示中心像素点（x，y)的灰度值、g n表示在 半径R处相邻点的灰度值、P表示中心像素点周围相邻像素点的个数； 23) 使用联合不变矩特征来提取害虫图像样本的形状特征，其定义如下：其中Φ iSHu不变矩，S1是第i维联合不变矩特征； 24) 提取害虫图像样本的尺度不变特征转换特征； 25) 提取害虫图像样本的方向梯度直方图特征，取像素值下的梯度幅值G(x，y)和梯度 方向a(x，y)，其计算公式如下：其中，H(x，y)为点(x，y)处的像素值， 其特征向量描述如下:在8 X 8块上分割4个4 X 4块，获得一个4 X 8共32维的特征向量； 26) 在若干个害虫图像样本中均进行颜色特征、纹理特征、形状特征、尺度不变特征转 换特征和方向梯度直方图特征的提取。3. 根据权利要求1所述的一种基于多特征深度学习技术的农田害虫图像识别方法，其 特征在于，所述的多特征深度学习包括以下步骤： 31) 针对第k种特征类型进行非监督字典训练，固定随机字典Dk对输入数据yk进行稀疏 表示，得到稀疏向量矩阵x k，其公式如下：其中：xk表示稀疏向量矩阵，通过I I Xi I IO < T进行系数限制；e/r Dk表示第k类特 征训练字典;yk表示输入害虫图像第k类特征集合； 32) 逐列更新随机字典D，其公式如下：其中cU表示Dk中第s列，4表示第s个行矢量，<表示字典的贡献矩阵； 33) 判断误差是否满足精度要求或是否达到指定的迭代次数，满足则结束训练，产生非 监督字典贫;不满足则继续计算稀疏向量矩阵X k并更新随机字典Dk; 34) 对m种害虫图像样本特征均进行非监督字典学习方式，学习获得m种非监督字典，其 中m种害虫图像样本特征包括颜色特征、纹理特征、形状特征、尺度不变特征转换特征和方 向梯度直方图特征。4. 根据权利要求1所述的一种基于多特征深度学习技术的农田害虫图像识别方法，其 特征在于，所述的训练样本的多特征表示包括以下步骤： 41) 针对第k种特征类型的非监督字典D)与第k类特征获得表示该种特征的稀疏编码， 其计算公式如下：其中g表示第k类害虫图像特征中第i个特征向量； 42) 使用稀疏编码直方图来表示稀疏编码的分布情况，公式如下：其中：Hk(q)表示第k类特征的稀疏编码直方图中第q个组距，Co为归一化常数，k()表示 一个各向同性核函数，分配不同的权值，对于远离中心点的位置分配较小的权值，靠近中心 点的位置分配较大的权值，Y表示目标点，(^表示图像中心点位置，< 表示第i个稀疏特征的 第q维数据； 43)分别计算颜色特征、纹理特征、形状特征、尺度不变特征转换特征和方向梯度直方 图特征的稀疏编码直方图，获得m类稀疏编码直方图Hk。5. 根据权利要求1所述的一种基于多特征深度学习技术的农田害虫图像识别方法，其 特征在于，所述的构建多核学习分类器包括以下步骤： 51) 对分类器的学习训练采取有监督的方式，对负样本与每个特征类别进行人为区分； 获取N个训练样本，使用m类的稀疏编码直方图H k，对m类特征和负样本图像特征均采取特征 形式为其中j￡N，其多核学习公式如下：其中ω !^表示对应核函数的权重，Wk为超平面参数； 52) 使用支持向量机对不同的核函数学习不同的权值，对于测试样本，其分类的决策函 数为：其中，b为阀值量，Ok(HllX)表示不同的核函数。6. 根据权利要求2所述的一种基于多特征深度学习技术的农田害虫图像识别方法，其 特征在于，所述的提取害虫图像样本的尺度不变特征转换特征包括以下步骤： 61) 尺度空间极值点检测，采用角点检测方法进行极值点检测，获得候选特征点，由可 变尺度高斯函数G(x，y，〇)与输入图像I(x，y)卷积得到尺度空间定义函数L(x，y，〇)，其公式 如下： L(x，y，〇)=G(x，y，〇)*I(x，y) 其中，*为X和y上的卷积运算，特征点D(x，y，〇)为： D(x,y,〇) = (G(x,y,k〇)-G(x,y,〇))*I(x,y)=L(x,y,k〇)-L(x,y,〇) 其中k为相邻两尺度差异的常数因子； 62) 对候选特征点过滤获得精确特征点，针对获选特征点处进行拟合函数运算，其公式 如下：其中，D为D (x，y，σ)在特征点位置的值； 63)确定特征点方向，尺度空间中任一点L(x，y)处的梯度值m(x，y)与方向0(x，y)分别 为：其特征向量描述如下：以特征点为中心的16 X 16区域中4 X 4为一个单位，统计每个单 位内的8维梯度直方图，每个特征点有4 X 4个单位，共4 X 4 X 8 = 128维特征向量。
【专利摘要】本发明涉及一种基于多特征深度学习技术的农田害虫图像识别方法，与现有技术相比解决了复杂环境条件下害虫图像识别性能差的缺陷。本发明包括以下步骤：针对大规模害虫图像样本进行多特征提取，提取大规模害虫图像样本的颜色特征、纹理特征、形状特征、尺度不变特征转换特征和方向梯度直方图特征；多特征深度学习，对不同类型特征分别进行非监督字典训练，获得不同类型特征的稀疏表示；训练样本的多特征表示，通过结合不同类型特征，构建害虫图像样本的多特征表示形式-多特征稀疏编码直方图；构建多核学习分类器，通过学习害虫图像正负样本的稀疏编码直方图构建多核分类器，实现害虫图像的分类。本发明提高了害虫识别的准确率。
【IPC分类】G06K9/62
【公开号】CN105488536
【申请号】CN201510923464
【发明人】谢成军, 宋良图, 张超凡, 李 瑞, 张洁, 周林立, 陈红波, 刘磊
【申请人】中国科学院合肥物质科学研究院
【公开日】2016年4月13日
【申请日】2015年12月10日
【技术领域】
[0001] 本发明设及图像处理技术领域，具体来说是一种基于多特征深度学习技术的农田 害虫图像识别方法。
【背景技术】
[0002] 依靠科技创新促进农业发展成为当今发展农业的主题，计算机技术在新兴农业科 技中占有相当重要的作用，害虫图像识别技术就是其中之一。利用该技术可W及时、准确地 识别害虫，减少农药的使用，提高作物产量和质量，保护生态环境。现今已经提出了多种害 虫图像识别方法在环境得到有效控制的前提下取得了一定的识别准确率。但在实际复杂的 农田环境中，害虫图像受到来自背景环境的干扰，其识别性能将受到一定限制。多特征深度 学习与多核学习技术可W综合学习害虫图像的多种类型特征，保证不会由于一种类型特征 而影响总体的识别效果，因此如何增强害虫特征表现能力与有效分类成为亟需解决的问 题。
【发明内容】
[0003] 本发明的目的是为了解决现有技术中复杂环境条件下害虫图像识别性能差的缺 陷，提供一种基于多特征深度学习技术的农田害虫图像识别方法来解决上述问题。
[0004] 为了实现上述目的，本发明的技术方案如下：
[0005] -种基于多特征深度学习技术的农田害虫图像识别方法，包括W下步骤：
[0006] 针对大规模害虫图像样本进行多特征提取，提取大规模害虫图像样本的颜色特 征、纹理特征、形状特征、尺度不变特征转换特征和方向梯度直方图特征；
[0007] 多特征深度学习，对不同类型特征分别进行非监督字典训练，获得不同类型特征 的稀疏表示；
[000引训练样本的多特征表示，通过结合不同类型特征，构建害虫图像样本的多特征表 示形式-多特征稀疏编码直方图；
[0009] 构建多核学习分类器，通过学习害虫图像正负样本的稀疏编码直方图构建多核分 类器，实现害虫图像的分类。
[0010] 所述的针对大规模害虫图像样本进行多特征提取包括W下步骤：
[0011] 提取害虫图像样本的颜色特征，包括均值、方差、标准差、偏度、峰度、赌，其分别定 义如下：
[0014]
[001引其中，μ为均值、σ%方差、σ3为0的；次方，σ4为σ的四次方，S为标准差、S为偏度、Κ 表示峰度、RE为赌值、i表示颜色分量值、L表示图像灰度级数、h(i)表示颜色分量值为i的像 素概率；
[0016]采用图像局部二值模式特征来提取害虫图像样本的纹理特征，其公式如下：
[0019 ]其中LBPp, R (X，y)表示局部二值模式特征，gc表示中屯、像素点（X，y)的灰度值、gn表 示在半径R处相邻点的灰度值、P表示中屯、像素点周围相邻像素点的个数；
[0020]使用联合不变矩特征来提取害虫图像样本的形状特征，其定义如下：
[0025] 其中Φι为化不变矩，目1是第i维联合不变矩特征；
[0026] 提取害虫图像样本的尺度不变特征转换特征；
[0027] 提取害虫图像样本的方向梯度直方图特征，取像素值下的梯度幅值G(x，y)和梯度 方向a(x，y)，其计算公式如下：
[0030] 其中，H(x，y)为点(x，y)处的像素值，
[0031] 其特征向量描述如下:在8 X 8块上分割4个4 X 4块，获得一个4 X 8共32维的特征向 量；
[0032] 在若干个害虫图像样本中均进行颜色特征、纹理特征、形状特征、尺度不变特征转 换特征和方向梯度直方图特征的提取。
[0033] 所述的多特征深度学习包括W下步骤：
[0034] 针对第k种特征类型进行非监督字典训练，固定随机字典〇k对输入数据yk进行稀疏 表示，得到稀疏向量矩阵xk，其公式如下；
[0035]
[0036] 其中：xk表示稀疏向量矩阵，通过I |χι| |〇<Τ进行系数限制；表示第k 类特征训练字典;yk表示输入害虫图像第k类特征集合；
[0037]逐列更新随机字典D，其公式如下：
[00；3 引
[0039] 其中(13表示0"中第3列，為表示第3个行矢量，6^^表示字典的贡献矩阵；
[0040] 判断误差是否满足精度要求或是否达到指定的迭代次数，满足则结束训练，产生 非监督字典啤；不满足则继续计算稀疏向量矩阵xk并更新随机字典〇k;
[0041] 对m种害虫图像样本特征均进行非监督字典学习方式，学习获得m种非监督字典， 其中m种害虫图像样本特征包括颜色特征、纹理特征、形状特征、尺度不变特征转换特征和 方向梯度直方图特征。
[0042] 所述的训练样本的多特征表示包括W下步骤：
[0043] 针对第k种特征类型的非监督字典第k类特征获得表示该种特征的稀疏编 码，其计算公式如下：
[0044]
[0045] 其中括表示第k类害虫图像特征中第i个特征向量；
[0046] 使用稀疏编码直方图来表示稀疏编码的分布情况，公式如下：
[0047]
[004引其中：Hk(q)表示第k类特征的稀疏编码直方图中第q个组距，Co为归一化常数，kO 表示一个各向同性核函数，分配不同的权值，对于远离中屯、点的位置分配较小的权值，靠近 中屯、点的位置分配较大的权值，Y表示目标点，Cl表示图像中屯、点位置，4表示第i个稀疏特 征的第q维数据；
[0049] 分别计算颜色特征、纹理特征、形状特征、尺度不变特征转换特征和方向梯度直方 图特征的稀疏编码直方图，获得m类稀疏编码直方图护。
[0050] 所述的构建多核学习分类器包括W下步骤：
[0051] 对分类器的学习训练采取有监督的方式，对负样本与每个特征类别进行人为区 分;获取N个训练样本，使用m类的稀疏编码直方图#，对m类特征和负样本图像特征均采取 特征形式为=!八!，八?、...，//;."'}，其中jEN，其多核学习公式如下：
[0054] 其中ω k表示对应核函数α WMO =〈 A (作)Λ )〉的权重，恥为超平面参数；
[0055] 使用支持向量机对不同的核函数学习不同的权值，对于测试样本，其分类的决策 函数为：
[0化6]
[0057]其中，b为阀值量，Ok化i，x)表示不同的核函数。
[005引所述的提取害虫图像样本的尺度不变特征转换特征包括W下步骤：
[0059] 尺度空间极值点检测，采用角点检测方法进行极值点检测，获得候选特征点，由可 变尺度高斯函数G(x，y，〇)与输入图像I(x，y)卷积得到尺度空间定义函数L(x，y，〇)，其公式 如下：
[0060] L(x,y,〇)=G(x,y,〇)*I(x,y)
[0061 ] 其中，*为X和y上的卷积运算
[0062] 特征点 D(x，y，〇)为；
[0063] D(x,y,〇) = (G(x,y,k〇)-G(x,y,〇))*I(x,y)=L(x,y,k〇)-L(x,y,〇)
[0064] 其中k为相邻两尺度差异的常数因子；
[0065] 对候选特征点过滤获得精确特征点，针对获选特征点处进行拟合函数运算，其公 式如下：
[0066]
[0067] 其中，D为D(x，y，〇)在特征点位置的值；
[0068] 确定特征点方向，尺度空间中任一点L(X，y)处的梯度值m(X，y)与方向Θ(X,y)分别 为：
[0069]
[0070] 0(x,y)=arctan((L(x,y+l)-L(x,y-l))/(L(x+1 ,y)-L(x-l ,y)))；
[0071] 其特征向量描述如下特征点为中屯、的16X16区域中4X4为一个单位，统计每 个单位内的8维梯度直方图，每个特征点有4X4个单位，共4X4X8 = 128维特征向量。
[0072] 有益效果
[0073] 本发明的一种基于多特征深度学习技术的农田害虫图像识别方法，与现有技术相 比提高了害虫识别的准确率。利用害虫图像的全局特征（颜色、形状、纹理）与局部特征 化0G、SIFT)对害虫图像进行深度学习得到多特征表示-多特征编码直方图，结合多核学习 分类器，实现了害虫图像识别较高的识别率。
【附图说明】
[0074] 图1为本发明的方法流程图。
【具体实施方式】
[0075] 为使对本发明的结构特征及所达成的功效有更进一步的了解与认识，用W较佳的 实施例及附图配合详细的说明，说明如下：
[0076] 本方法先获取大规模的害虫样本图像，此害虫样本图像只包括害虫个体，不包括 外界环境的表达。针对害虫样本从颜色特征、纹理特征、形状特征、尺度不变特征转换特征 和方向梯 度直方图特征五个特征对不同的害虫进行区分。针对五个特征进行深度学习得到 多特征表示-多特征编码直方图，再利用多核学习分类器，对害虫图像(包括外界环境的害 虫图像)进行分类，从而提高了害虫图像的识别度。
[0077] 如图1所示，本发明所述的一种基于多特征深度学习技术的农田害虫图像识别方 法，包括W下步骤：
[0078] 第一步，针对大规模害虫图像样本进行多特征提取，提取大规模害虫图像样本的 颜色特征、纹理特征、形状特征、尺度不变特征转换(SIFT)特征和方向梯度直方图化0G)特 征。目前的害虫识别主要根据图像的单一特征进行，缺乏对多种特征的综合应用。单一特征 限制了众多特征联合对图像进行i全释的可能，对提高害虫图像识别性能范围有限。基于W 上分析，本发明综合考虑多种特征，包括全局特征（颜色、形状、纹理）和局部特征（SIFT、 HOG)。得到的多种类型特征表示图像中包含的多种信息，从而提高识别性能。其具体包括W 下步骤：
[0079] (1)提取害虫图像样本的颜色特征，包括均值、方差、标准差、偏度、峰度、赌，其分 别定义如下：
[008引其中，μ为均值、σ2为方差、σ3为0的；次方，σ4为σ的四次方，S为标准差、S为偏度、K 表示峰度、RE为赌值、i表示颜色分量值、L表示图像灰度级数、h(i)表示颜色分量值为i的像 素概率。
[0084] (2)采用图像局部二值模式特征来提取害虫图像样本的纹理特征，其公式如下：
[0087 ]其中LBPp, R (X，y)表示局部二值模式特征，gc表示中屯、像素点（X，y)的灰度值、gn表 示在半径R处相邻点的灰度值、P表示中屯、像素点周围相邻像素点的个数。
[0088] (3)根据害虫图像的形状特征，使用联合不变矩特征来提取害虫图像样本的形状 特征，其具有缩放、旋转不变性，能够对区域与轮廓进行统一表示。其定义如下：
[0093] 其中Φ i为化不变矩，θι是第i维联合不变矩特征。
[0094] (4)提取害虫图像样本的尺度不变特征转换特征，尺度不变特征转换（SIFT)特征 是目前最有效的局部不变特征描述方法。作为特征描述子，其对于图像的旋转、平移、尺度 变化和亮度变化具有不变性。其包括W下步骤：
[00巧]A、尺度空间极值点检测，SIFT方法采用角点检测DoG(difference-〇f-Gaussian function)方法进行极值点检测，获得候选特征点，由可变尺度高斯函数G(x，y，〇)与输入图 像I(x，y)卷积得到尺度空间定义函数L(x，y，〇)，其公式如下：
[0096] L(x,y,〇)=G(x,y,〇)*I(x,y)
[0097] 其中，*为X和y上的卷积运算
[009引特征点D(x，y，0)为：
[0099] D(x,y,〇) = (G(x,y,k〇)-G(x,y,〇))*I(x,y)=L(x,y,k〇)-L(x,y,〇)
[0100] 其中k为相邻两尺度差异的常数因子；
[0101 ] B、对候选特征点过滤获得精确特征点，由于计算获得特征点不一定位于整数坐标 位置，需要对其进行定位，去除对比度低的特征点与边缘相应点。
[0102] 针对获选特征点处进行拟合函数运算，其公式如下：
[0103]
[0104] 其中，D为D(x，y，〇)在特征点位置的值；
[0105] C、确定特征点方向，尺度空间中任一点L(x，y)处的梯度值m(x，y)与方向目(x，y)分 别为：
[0106]
[0107] 0(x,y)=arctan((L(x,y+l)-L(x,y-l))/(L(x+1 ,y)-L(x-l ,y)))；
[010引其特征向量描述如下特征点为中屯、的16X16区域中4X4为一个单位，统计每 个单位内的8维梯度直方图，每个特征点有4X4个单位，共4X4X8 = 128维特征向量。
[0109] (5)提取害虫图像样本的方向梯度直方图化0G)特征，计算局部区域梯度上的梯度 方向直方图构成特征，其为SIFT特征方法的最后两步，取像素值下的梯度幅值G(x，y)和梯 度方向a(x，y)，其计算公式如下：
[0110]
[0111] a(x,y)=arctan((H(x,y+l)-H(x,y-l))/(H(x+1 ,y)-H(x-l ,y))),
[0112] 其中，H(x，y)为点(x，y)处的像素值，
[0113] 其特征向量描述如下:在8X8块上分割4个4X4块，获得一个4X8共32维的特征向 量。
[0114] (6)在若干个害虫图像样本中均进行颜色特征、纹理特征、形状特征、尺度不变特 征转换特征和方向梯度直方图特征的提取，形成害虫图像样本的5种特征集合。
[0115] 第二步，多特征深度学习，采用深度学习理论中稀疏编码理论对不同类型特征分 别进行非监督字典训练，获得不同类型特征的稀疏表示。经过针对大规模害虫图像样本进 行多特征提取的步骤，共获得m=5种害虫图像特征类型，包括颜色、纹理、形状、SIFT和HOG。 在此基于深度学习稀疏编码理论，则针对第k种特征类型kem，采用KSVD方法进行非监督字 典训练。其具体要求步骤如下：
[0116] (1)针对第k种特征类型（5种害虫图像特征类型之一)进行非监督字典训练，固定 随机字典〇k对输入数据yk进行稀疏表示，得到稀疏向量矩阵xk，其公式如下：
[0117]
[011引其中：xk表示稀疏向量矩阵，通过I |xi| |0<Τ进行系数限制；仪eir*"，Dk表示第k 类特征训练字典;yk表示输入害虫图像第k类特征集合。
[0119] (2)逐列更新随机字典D，其公式如下：
[0120]
[0121] 其中山表示〇k中第S列，為表示第S个行矢量，。V、-,;表示字典的贡献矩阵。
[0122] (3)判断误差是否满足精度要求或是否达到指定的迭代次数，满足则结束训练，产 生非监督字典^ :不满足则继续计算稀疏向量矩阵xk并更新随机字典〇k。
[0123] (4)对m种害虫图像样本特征均进行非监督字典学习方式，学习获得m种非监督字 典，其中m种害虫图像样本特征包括颜色特征、纹理特征、形状特征、尺度不变特征转换特征 和方向梯度直方图特征。
[0124] 第Ξ步，训练样本的多特征表示，通过结合不同类型特征(分别针对m种非监督字 典），构建害虫图像样本的多特征表示形式-多特征稀疏编码直方图。其具体包括W下步骤： [01巧](1)针对第k种特征类型的非监督字典Ο?与第k类特征获得表示该种特征的稀疏 编码，其计算公式如下：
[0126]
[0127] 其中如表示第k类害虫图像特征中第i个特征向量。
[0128] (2)使用稀疏编码直方图来表示稀疏编码的分布情况，公式如下：
[0129]
[0130] 其中：#(q)表示第k类特征的稀疏编码直方图中第q个组距，Co为归一化常数，kO 表示一个各向同性核函数，分配不同的权值，对于远离中屯、点的位置分配较小的权值，靠近 中屯、点的位置分配较大的权值，Y表示目标点，C康示图像中屯、点位置，马^表示第i个稀疏特 征的第q维数据。
[0131] (3)分别计算颜色特征、纹理特征、形状特征、尺度不变特征转换特征和方向梯度 直方图特征的稀疏编码直方图，获得m类稀疏编码直方图护。
[0132] 第四步，构建多核学习分类器，通过学习害虫图像正负样本的稀疏编码直方图构 建多核分类器，实现害虫图像的分类。害虫图像正样本指需进行害虫分类的训练图像中，带 有害虫的图像，即含有m类特征的图像。在实际应用中，还有一类图像是不含任何害虫的图 像，即负样本，此类图像只有环境背景，无害虫体现，而在图像采集过程中，不可能做到只采 集有害虫图像，不采集无害虫图像，因此分类器的分类过程中，也要考虑负样本的存在，贝U 把负样本作为单独特殊（自定义)一类害虫图像进行分类处理即可。其主要包括W下步骤：
[0133] (1)对分类器的学习训练采取有监督的方式，对负样本与每个特征类别进行人为 区分，人工区分出正样本(5个特征类别）和负样本。获取N个训练样本，使用m类的稀疏编码 直方图#，对m类特征和负样本图像特征均采取特征形式为//,叫//!，//,=，...^/^，其中托 N。在此将负样本图像也并入正样本训练中，就是将负样本列为另一类特殊的害虫类别，其 多核学习公式如下：
[0136] 其中ω康示对应核函数α抑，/// ) = (70Λ (//!!))的权重，恥为超平面参数。
[0137] (2)使用支持向量机对不同的核函数学习不同的权值，对于测试样本，其分类的决 策 函数为：
[013 引
[0139] 其中，b为阀值量，Ok化i，x)表示不同的核函数。分类向量机对多个图像进行分类， 从而将害虫类别进行区分、分类，并将没有害虫的图像单独分为一类，实现害虫的图像识别 处理。
[0140] 在针对D1和D2样本库进行试验过程中，其中D1样本库包括训练集与测试集，训练 集中有20张128X128蝴蝶图像，测试集中包含720张蝴蝶图像。D2样本库包括9个类目共225 张昆虫图像，随机选取其中一部分作为训练样本，其余为测试样本。对于D1样本库中蝴蝶图 像均具有相似的外形特征，比如形状，其主要的不同特征表现在纹理特征，因此基于多核学 习可W根据识别害虫具体情况学习得到不同的核函数权重，实现自动分类识别。实验中将 本发明方法与多种现有图像识别分类模型相比较，其中包括NSC(非负稀疏编码）、SVM(支持 向量机）、SC(稀疏编码）、LRSC(低秩稀疏编码）、SCSPM(空间金字塔匹配稀疏编码），在D1和 D2样本库上比较结果如下表1:
[0141 ] 表1在D1和D2样本库下不同方法识别率对比（％ )
[0142]
[0143] 由W上表中结果可W看出，本发明所提出的方法在运两种公共训练集上表现性能 均优于现有技术的其他方法，其应用有效并合理，能够达到识别害虫的功能，因此，本发明 所提出的方法与系统性能较优，具有实用价值。
[0144] W上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术 人员应该了解，本发明不受上述实施例的限制，上述实施例和说明书中描述的只是本发明 的原理，在不脱离本发明精神和范围的前提下本发明还会有各种变化和改进，运些变化和 改进都落入要求保护的本发明的范围内。本发明要求的保护范围由所附的权利要求书及其 等同物界定。
【主权项】
1. 一种基于多特征深度学习技术的农田害虫图像识别方法，其特征在于，包括以下步 骤： 11) 针对大规模害虫图像样本进行多特征提取，提取大规模害虫图像样本的颜色特征、 纹理特征、形状特征、尺度不变特征转换特征和方向梯度直方图特征； 12) 多特征深度学习，对不同类型特征分别进行非监督字典训练，获得不同类型特征的 稀疏表不； 13) 训练样本的多特征表示，通过结合不同类型特征，构建害虫图像样本的多特征表示 形式-多特征稀疏编码直方图； 14) 构建多核学习分类器，通过学习害虫图像正负样本的稀疏编码直方图构建多核分 类器，实现害虫图像的分类。2. 根据权利要求1所述的一种基于多特征深度学习技术的农田害虫图像识别方法，其 特征在于，所述的针对大规模害虫图像样本进行多特征提取包括以下步骤： 21) 提取害虫图像样本的颜色特征，包括均值、方差、标准差、偏度、峰度、熵，其分别定 义如下：其中，μ为均值、σ2为方差、σ3为σ的三次方，σ4为σ的四次方，S为标准差、S为偏度、K表示 峰度、RE为熵值、i表示颜色分量值、L表示图像灰度级数、h(i)表示颜色分量值为i的像素概 率； 22) 采用图像局部二值模式特征来提取害虫图像样本的纹理特征，其公式如下：其中LBPP,R(x，y)表示局部二值模式特征，g。表示中心像素点（x，y)的灰度值、g n表示在 半径R处相邻点的灰度值、P表示中心像素点周围相邻像素点的个数； 23) 使用联合不变矩特征来提取害虫图像样本的形状特征，其定义如下：其中Φ iSHu不变矩，S1是第i维联合不变矩特征； 24) 提取害虫图像样本的尺度不变特征转换特征； 25) 提取害虫图像样本的方向梯度直方图特征，取像素值下的梯度幅值G(x，y)和梯度 方向a(x，y)，其计算公式如下：其中，H(x，y)为点(x，y)处的像素值， 其特征向量描述如下:在8 X 8块上分割4个4 X 4块，获得一个4 X 8共32维的特征向量； 26) 在若干个害虫图像样本中均进行颜色特征、纹理特征、形状特征、尺度不变特征转 换特征和方向梯度直方图特征的提取。3. 根据权利要求1所述的一种基于多特征深度学习技术的农田害虫图像识别方法，其 特征在于，所述的多特征深度学习包括以下步骤： 31) 针对第k种特征类型进行非监督字典训练，固定随机字典Dk对输入数据yk进行稀疏 表示，得到稀疏向量矩阵x k，其公式如下：其中：xk表示稀疏向量矩阵，通过I I Xi I IO < T进行系数限制；e/r Dk表示第k类特 征训练字典;yk表示输入害虫图像第k类特征集合； 32) 逐列更新随机字典D，其公式如下：其中cU表示Dk中第s列，4表示第s个行矢量，<表示字典的贡献矩阵； 33) 判断误差是否满足精度要求或是否达到指定的迭代次数，满足则结束训练，产生非 监督字典贫;不满足则继续计算稀疏向量矩阵X k并更新随机字典Dk; 34) 对m种害虫图像样本特征均进行非监督字典学习方式，学习获得m种非监督字典，其 中m种害虫图像样本特征包括颜色特征、纹理特征、形状特征、尺度不变特征转换特征和方 向梯度直方图特征。4. 根据权利要求1所述的一种基于多特征深度学习技术的农田害虫图像识别方法，其 特征在于，所述的训练样本的多特征表示包括以下步骤： 41) 针对第k种特征类型的非监督字典D)与第k类特征获得表示该种特征的稀疏编码， 其计算公式如下：其中g表示第k类害虫图像特征中第i个特征向量； 42) 使用稀疏编码直方图来表示稀疏编码的分布情况，公式如下：其中：Hk(q)表示第k类特征的稀疏编码直方图中第q个组距，Co为归一化常数，k()表示 一个各向同性核函数，分配不同的权值，对于远离中心点的位置分配较小的权值，靠近中心 点的位置分配较大的权值，Y表示目标点，(^表示图像中心点位置，< 表示第i个稀疏特征的 第q维数据； 43)分别计算颜色特征、纹理特征、形状特征、尺度不变特征转换特征和方向梯度直方 图特征的稀疏编码直方图，获得m类稀疏编码直方图Hk。5. 根据权利要求1所述的一种基于多特征深度学习技术的农田害虫图像识别方法，其 特征在于，所述的构建多核学习分类器包括以下步骤： 51) 对分类器的学习训练采取有监督的方式，对负样本与每个特征类别进行人为区分； 获取N个训练样本，使用m类的稀疏编码直方图H k，对m类特征和负样本图像特征均采取特征 形式为其中j￡N，其多核学习公式如下：其中ω !^表示对应核函数的权重，Wk为超平面参数； 52) 使用支持向量机对不同的核函数学习不同的权值，对于测试样本，其分类的决策函 数为：其中，b为阀值量，Ok(HllX)表示不同的核函数。6. 根据权利要求2所述的一种基于多特征深度学习技术的农田害虫图像识别方法，其 特征在于，所述的提取害虫图像样本的尺度不变特征转换特征包括以下步骤： 61) 尺度空间极值点检测，采用角点检测方法进行极值点检测，获得候选特征点，由可 变尺度高斯函数G(x，y，〇)与输入图像I(x，y)卷积得到尺度空间定义函数L(x，y，〇)，其公式 如下： L(x，y，〇)=G(x，y，〇)*I(x，y) 其中，*为X和y上的卷积运算，特征点D(x，y，〇)为： D(x,y,〇) = (G(x,y,k〇)-G(x,y,〇))*I(x,y)=L(x,y,k〇)-L(x,y,〇) 其中k为相邻两尺度差异的常数因子； 62) 对候选特征点过滤获得精确特征点，针对获选特征点处进行拟合函数运算，其公式 如下：其中，D为D (x，y，σ)在特征点位置的值； 63)确定特征点方向，尺度空间中任一点L(x，y)处的梯度值m(x，y)与方向0(x，y)分别 为：其特征向量描述如下：以特征点为中心的16 X 16区域中4 X 4为一个单位，统计每个单 位内的8维梯度直方图，每个特征点有4 X 4个单位，共4 X 4 X 8 = 128维特征向量。
【专利摘要】本发明涉及一种基于多特征深度学习技术的农田害虫图像识别方法，与现有技术相比解决了复杂环境条件下害虫图像识别性能差的缺陷。本发明包括以下步骤：针对大规模害虫图像样本进行多特征提取，提取大规模害虫图像样本的颜色特征、纹理特征、形状特征、尺度不变特征转换特征和方向梯度直方图特征；多特征深度学习，对不同类型特征分别进行非监督字典训练，获得不同类型特征的稀疏表示；训练样本的多特征表示，通过结合不同类型特征，构建害虫图像样本的多特征表示形式-多特征稀疏编码直方图；构建多核学习分类器，通过学习害虫图像正负样本的稀疏编码直方图构建多核分类器，实现害虫图像的分类。本发明提高了害虫识别的准确率。
【IPC分类】G06K9/62
【公开号】CN105488536
【申请号】CN201510923464
【发明人】谢成军, 宋良图, 张超凡, 李 瑞, 张洁, 周林立, 陈红波, 刘磊
【申请人】中国科学院合肥物质科学研究院
【公开日】2016年4月13日
【申请日】2015年12月10日
最新回复(0)