图像分类中的视觉注意机制:端到端一致性引导网络

在过去的几年中,视觉注意机制在许多计算机视觉任务中变得越来越流行,例如图像分类、语义分割、图像超分辨率、物体定位、显著性检测和姿态估计。许多研究人员研究了如何通过结合视觉注意机制选择有区别性的特征,例如,Cao等人使用反馈卷积神经网络捕捉自上而下的视觉注意,Zhou等人提出了一种使用全局平均池化在CNN中生成类激活图(CAM)的方法。此外,视觉注意机制在细粒度图像分类中非常常见。例如,Xiao等人提出了一种用于细粒度图像分类的两级注意模型,而Zhao等人提出了用于细粒度对象分类的多样化视觉注意网络。Fu等人提出了一种新颖的循环注意卷积神经网络,以相互增强的方式递归学习多尺度上的有区别性区域注意和基于区域的特征表示。

与上述工作不同,本文提出了一种端到端的一致性引导网络用于退化图像分类。该网络考虑了类别分布、特征分布和视觉注意力,以解决现有方法在清晰图像和退化图像之间没有充分利用有用信息的问题。类别一致性和语义一致性可以引导模型学习更一致的类别分布和语义分布,而视觉注意力对齐可以强制模型集中于与清晰图像相对应的语义信息丰富的区域。

该网络的优势在于:

  • 通过类别一致性和语义一致性,模型可以学习更一致的类别分布和语义分布。
  • 通过视觉注意力对齐,模型可以关注与清晰图像相对应的语义信息丰富的区域。
  • 该网络是一种端到端训练的网络,可以有效地利用清晰图像和退化图像之间的有用信息。

本文的研究表明,该网络在退化图像分类任务中取得了显著的性能提升。该方法为解决退化图像分类问题提供了新的思路,并具有重要的理论意义和应用价值。

图像分类中的视觉注意机制:端到端一致性引导网络

原文地址: https://www.cveoy.top/t/topic/Ph 著作权归作者所有。请勿转载和采集!

免费AI点我,无需注册和登录