CLASH:基于互补学习与神经架构搜索的步态识别框架

CLASH:基于互补学习与神经架构搜索的步态识别框架

CLASH:基于互补学习与神经架构搜索的步态识别框架 研究背景 步态识别是一种通过个体的行走模式进行身份识别的生物识别技术。这种技术由于可以在远距离无须个体合作的条件下进行,因此在安全检查、视频检索和身份识别等领域有着广泛的应用。然而,基于人影轮廓的识别方法存在一些问题:二值化的稀疏边界表示缺乏丰富的时空信息,使得轮廓大部分像素对步态模式不敏感。为了提高对步态模式的敏感性,同时保持识别的鲁棒性,本文引入了一种基于神经架构搜索的互补学习(Complementary Learning with Neural Architecture Search, CLASH)框架,旨在解决上述问题。 论文来源 本文由Huanzhang Dou、Pengyi Zhang、Yuhan Zhao、Lu Jin和Xi...

基于标签内容描述的透明化深度图像美学评估

基于标签内容描述的透明化深度图像美学评估

基于标签内容描述的透明化深度图像美学评估 学术背景 随着社交媒体平台如Instagram和Flickr的普及,图像美学评估(Image Aesthetics Assessment, IAA)模型的需求日益增长。这些模型不仅可以帮助社交网络服务提供商优化图片排序或推荐结果,还能帮助普通用户管理相册、选择最佳照片,甚至在拍摄和编辑过程中提供指导。然而,如何构建一个稳健的IAA模型一直是一个挑战,因为图像美学的复杂性包括对象、摄影技术等多个因素。 研究动机 现有的深度学习方法虽然在IAA中表现出色,但其内部机制仍不明确。大多数研究通过隐性学习语义特征来预测图像美学,但这些方法未能直接解释这些特征具体代表了什么。本文的核心目标是创建一个更透明的IAA框架,引入可解释的语义特征,以人类可读的标签描述图...

平衡特征对齐与统一性用于小样本分类

平衡特征对齐与统一性用于小样本分类

平衡特征对齐与统一性来解决小样本分类问题 背景与动机 少样本学习(Few-Shot Learning, FSL)的目标是在只有少量新类别(novel classes)样本的条件下,正确地对新样本进行识别。现有的少样本学习方法主要通过最大化特征表示与其对应标签之间的信息,来学习从基础类别(base classes)中可转移的知识。然而,这种方法可能会出现“监督崩溃”(supervision collapse)的问题,因为它对基础类别存在偏差。本文提出了一种解决方案,通过保留数据的内在结构,并学习一种适用于新类别的广义模型。本研究依据信息最大化原则,最大化样本与其特征表示之间以及特征表示与其类别标签之间的互信息(mutual information, MI),以在特征表示中平衡类特异性信息的捕获...

基于负面确定性信息的多重实例学习用于弱监督目标检测与分割

基于负面确定性信息的多重实例学习用于弱监督目标检测与分割

Negative Deterministic Information-Based Multiple Instance Learning for Weakly Supervised Object Detection and Segmentation 背景介绍 在过去的十年中,计算机视觉领域取得了显著进展,特别是在对象检测(Object Detection)和语义分割(Semantic Segmentation)方面。然而,大多数设计的算法和模型都严重依赖于精确的标注数据,这在实际应用中耗费大量人力和时间。弱监督学习(Weakly Supervised Learning,WSL)因其仅需粗粒度的标注数据(如图像级标注)解决了这一问题。在此背景下,弱监督对象检测(Weakly Supervised...

基于信息感知的Transformer展开网络促进高光谱和多光谱图像融合

基于信息感知的Transformer展开网络促进高光谱和多光谱图像融合

基于信息感知的Transformer展开网络促进高光谱和多光谱图像融合 背景介绍 高光谱图像(Hyperspectral Image, HSI)由于其包含多个波段的光谱信息,在材料识别、图像分类、目标检测和环境监测等遥感应用中发挥着重要作用。然而,由于传感器硬件的限制,实际的成像过程中存在空间分辨率和光谱分辨率之间的权衡问题。具体来说,成像传感器只能提供丰富光谱信息的图像(低分辨率的HSI,LR-HSI),或者是高空间分辨率但光谱信息较少的图像(高分辨率的多光谱图像,HR-MSI)。为了获得高分辨率的HSI(HR-HSI),研究者们提出了将LR-HSI和HR-MSI融合的方法,称为MSI-HSI融合。MSI-HSI融合在遥感图像处理中引起了广泛关注。 论文来源 这篇论文《Advancing ...

基于图神经网络的图优化问题求解框架

基于图神经网络的图优化问题求解框架

基于图神经网络的图优化问题求解框架 背景及研究动机 在解决约束满足问题(CSPs)和组合优化问题(COPs)时,回溯法与分支启发式结合是一种常见的方法。尽管为特定问题设计的分支启发式理论上是高效的,但其复杂性和实施难度使实践应用受限。反之,通用的分支启发式尽管适用范围广,但通常表现出次优性能。本文作者提出了一个新的求解框架,通过在分支启发式中引入香农熵(Shannon Entropy),在通用性和特定性之间找到平衡。具体地,利用图神经网络(GNN)模型从概率方法中训练得出的损失函数学习这些概率分布,并将其应用于两个NP-hard问题:最小支配团问题(Minimum Dominating Clique Problem)和边团覆盖问题(Edge Clique Cover Problem)。 作者...