分享自:

基于深度双通道神经网络的图像烟雾检测方法研究

期刊:IEEE Transactions on MultimediaDOI:10.1109/TMM.2019.2929009

类型a

主要作者与机构及发表信息
本文的主要作者包括Ke Gu(北京工业大学)、Zhifang Xia(北京工业大学和国家信息中心)、Junfei Qiao(北京工业大学)以及Weisi Lin(南洋理工大学)。该研究发表于《IEEE Transactions on Multimedia》,2020年2月刊。

学术背景
本研究属于计算机视觉与深度学习领域,专注于基于图像的烟雾检测技术。烟雾检测在工业安全预警系统和火灾预防中具有重要作用。然而,由于烟雾的形状、纹理和颜色复杂多变,从图像中识别烟雾仍然是一个重大挑战。传统的烟雾检测方法依赖手工提取特征,但这些方法难以充分捕捉烟雾的复杂变化。近年来,深度学习在模式识别任务中表现出色,尤其是在图像分类和目标检测领域。尽管如此,针对烟雾检测任务的深度学习研究仍然较少。为此,本文提出了一种新的双通道深度神经网络(DCNN),旨在通过融合低级局部纹理特征和高级全局轮廓信息来提高烟雾检测的性能。

详细研究流程
本研究分为以下几个主要步骤:

  1. 数据预处理
    研究使用了一个公开的烟雾检测数据库,包含四个子集(Set-1至Set-4)。为了减少图像块之间的方差并提高网络的鲁棒性,研究引入了两种图像预处理方法:像素归一化和数据增强。数据增强通过旋转图像块(90°、180°、270°)增加了烟雾图像的数量,使其与无烟图像数量接近。像素归一化则采用最小-最大归一化方法,以降低亮度变化对检测的影响。

  2. 网络架构设计
    本文提出的DCNN由两个子网络组成:选择性批归一化网络(SBNN)和跳跃连接网络(SCNN)。

    • SBNN架构
      SBNN由六个卷积层、三个最大池化层和四个批归一化层组成。卷积层用于捕获局部信息,最大池化层用于学习生物上合理的特征并减少参数数量。批归一化层被选择性地附加到后四个卷积层,以缓解梯度消失和过拟合问题。最后,SBNN通过三个全连接层输出分类结果。
    • SCNN架构
      SCNN在SBNN的基础上进一步引入了跳跃连接和全局平均池化。跳跃连接通过将早期特征图与后期特征图合并,防止梯度消失并增强特征传播。全局平均池化取代了全连接层,大幅减少了模型参数数量并缓解了过拟合问题。
    • DCNN架构
      DCNN通过拼接操作将SBNN和SCNN的特征融合在一起。具体而言,SBNN提取烟雾的细节信息(如纹理),而SCNN捕获烟雾的基础信息(如轮廓)。两者结合后,通过卷积层和全局平均池化层完成分类任务。
  3. 训练过程
    网络训练分为三个阶段:

    • 首先独立训练SBNN和SCNN,使用随机梯度下降法优化模型参数,并通过交叉熵损失函数评估模型性能。
    • 其次,将SBNN和SCNN组合成完整的DCNN,并仅优化部分参数(如卷积层m̂13),冻结其他参数。
    • 最后,对整个DCNN进行微调,以搜索最优参数。
  4. 实验验证
    研究在公开的烟雾检测数据库上进行了大量实验,比较了DCNN与多种主流深度学习模型(如AlexNet、VGGNet、ResNet等)以及基于手工特征的模型(如HLTPMC和MCLBP)的性能。此外,还通过可视化特征图和消融实验分析了DCNN各组件的贡献。

主要结果
1. 性能对比
实验结果表明,DCNN在测试集上的平均检测率超过99.5%,显著优于其他主流模型。例如,在Set-1和Set-2上,DCNN分别比HLTPMC和MCLBP提高了3.4%和2.9%的准确率。与最近提出的DNCNN相比,DCNN在Set-1和Set-2上的相对性能提升分别为1.9%和1.4%。此外,DCNN仅使用了约270万个参数,不到其他主流模型参数数量的三分之一。

  1. 特征互补性
    可视化分析显示,SBNN擅长提取烟雾的细节信息(如纹理),而SCNN则专注于捕获烟雾的基础信息(如轮廓)。两者的特征融合显著提升了DCNN的性能。

  2. 消融实验
    消融实验表明,批归一化层、跳跃连接、全局平均池化等组件对DCNN的性能提升起到了关键作用。例如,移除批归一化层或全局平均池化层后,模型的测试精度显著下降。

结论与意义
本研究提出了一种新颖的双通道深度神经网络(DCNN),用于基于图像的烟雾检测。DCNN通过融合SBNN和SCNN的特征,实现了高精度和高效性。实验结果表明,DCNN在公开数据集上的性能优于现有方法,且参数数量显著减少。该研究为烟雾检测提供了一种新的解决方案,具有重要的科学价值和应用前景。例如,DCNN可用于石化企业的火炬黑烟检测和公共场所的香烟烟雾检测,从而提高工业安全和环境保护水平。

研究亮点
1. 创新性架构设计
DCNN通过双通道结构融合了低级纹理特征和高级轮廓信息,解决了传统方法难以全面表征烟雾特性的难题。
2. 高效的参数优化
通过引入全局平均池化和选择性批归一化,DCNN大幅减少了模型参数数量,同时保持了高性能。
3. 广泛的实验验证
研究不仅在公开数据集上进行了性能对比,还通过特征可视化和消融实验深入分析了模型的工作机制。

其他有价值内容
研究还探讨了DCNN在实际应用中的表现。例如,在火炬黑烟检测任务中,DCNN能够准确识别烟雾并控制水蒸气流量;在香烟烟雾检测任务中,DCNN的表现优于其他主流模型。未来,研究计划构建更大规模的数据集,并设计专门针对黑烟和香烟烟雾的深度学习模型。

上述解读依据用户上传的学术文献,如有不准确或可能侵权之处请联系本站站长:admin@fmread.com