AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别 (aaai2025审稿结果)

文章编号:41838 资讯动态 2024-12-03 AAAI创新奇智人工智能2022

近日,创新奇智关于 双注意力机制少样本学习 的研究论文《Dual Attention Networks for Few-Shot Fine-Grained Recognition》被全球人工智能顶会接收为Main Track论文。

AAAI(The National Conference on Artificial Intelligence)是人工智能领域的主要学术组织之一国际先进人工智能协会(American Association for Artificial Intelligence),主办的A类人工智能学术会议。今年会议共收到9251篇投稿,最终经过大量的筛选,录取率仅为15.0%,创下历史新低。创新奇智投稿的论文脱颖而出,得益于一直以来在计算机视觉领域深厚的创新力。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

概述:

细粒度图像识别是计算机视觉和模式识别领域的基础研究课题,但是大量优质细粒度图像数据的获取和标注需要耗费大量的人力和财力,这为细粒度图像识别的推广和使用带来了巨大的障碍。

少样本学习是目前研究的热门方向之一,能够极大地减少细粒度图像识别对于标注样本的依赖,故少样本的设定下进行细粒度图像识别的相关研究,内容和成果均符合实际应用的需求。

本文通过卷积神经网络与注意力机制提取图像中的部件与全局特征,通过基于图的多示例学习对局部特征进行建模,丰富了细粒度部分的内在结构相关性,通过注意力机制发掘对细粒度图像识别有用的微妙全局信息,从而得到更高的少样本细粒度图像识别的准确率。

主要贡献

1、提出了一种由双注意力流构成的元学习方式的新型少样本细粒度框架,以获取细粒度定制图像嵌入表示。

2、开发了包含硬/软注意力机制的双注意力网络,不仅实现细粒度物体部分间重要关联的显式构建,而且能够隐式获取细微但有辨识性的细节。

3、基于三个常用的细粒度基准数据集进行了综合的实验,本文提出的模型在识别准确性上明显优于其他解决方案

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

这是一种基于双注意力流的少样本细粒度图像识别方法,包括以下步骤:

步骤1: 提取样本的特征图(feature map),生成特征图的空间注意力图(spatial attention map)引导,利用注意力引导机制,生成用于软注意力流的加权特征图,同时筛选出用于硬注意力流的深度描述符(deep descriptor)。

步骤2: 加权特征图使用全局聚合操作得到全局嵌入特征;将一个样本筛选出的所有深度描述符建模为一个多示例学习(multi-instance learning)的包(bag), 使用基于图的多示例学习方法挖掘样本部件之间的关系,得到部件嵌入特征。

步骤3: 将两个注意力流得到的全局嵌入特征和部件嵌入特征拼接得到样本最终的嵌入表示,基于原型表示和最近邻方法进行类别预测和模型训练。

本方法与现有技术相比,其显著优点为:

(1)本方法使用了两个注意力流分别得到了部件级别的关键信息和全局聚合信息,不仅对细粒度图像识别提供了区分新的部件级信息,也补充了对细粒度图像识别有用的微妙全局信息。

(2)对于硬注意力流,使用多示例方法将筛选出的有用深度描述符建模为包,并基于图的方法对包进行编码一体化得到对应细粒度部件的深度描述符的整体表示,丰富了细粒度部分的内在结构相关性。

(3)与基于双线性池的方法相比,我们的方法复杂度更低更加易于训练且有更高的识别效率。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

在三个常用的少样本细粒度图像识别数据集 (CUB Birds,Stanford Dogs和Stanford Cars) 上进行了实验,上图实验结果表明,论文提出的方法几乎在所有数据集上均明显优于其他基准方法。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

上图结果显示出我们的模型对语义簇数的鲁棒性,并且当簇数为3时识别的准确率最高。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

我们提出的基于MIL的聚合方法与原始MIL池化方法的效果,上表结果显示无论是否与全局特征进行连接,我们的方法均表现出较好的效果。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

从上表结果可见,引入本文中考虑细粒度部件间关系的方法会显著提高少样本低粒度识别的准确性。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

最后,我们将实验中一些硬/软注意力样例进行可视化,上图中第一排为输入图像;第二排为硬注意力选取的深度描述符的位置,可见均对应物体的细粒度部分,如头、耳、尾、轮胎等;第三排展示软注意力,更多的细节细粒度模式能够被软注意力关注到。

版权文章,未经授权禁止转载。详情见 转载须知 。

全局中部横幅
腾讯网

腾讯网从2003年创立至今,已经成为集新闻信息,区域垂直生活服务、社会化媒体资讯和产品为一体的互联网媒体平台。腾讯网下设新闻、科技、财经、娱乐、体育、汽车、时尚等多个频道,充分满足用户对不同类型资讯的需求。同时专注不同领域内容,打造精品栏目,并顺应技术发展趋势,推出网络直播等创新形式,改变了用户获取资讯的方式和习惯。

郑州企业商标识logo

河南近远品牌设计有限公司(简称近远品牌设计),是中原第一家专注品牌的设计机构,为各类公司机构量身定制品牌成长全案,以最有力的品牌战略规划去实现品牌增值。

江苏风行环境科技有限公司

江苏风行环境科技有限公司专注直联通风机,外转子通风机,轴流风机生产和销售,欢迎来电咨询:18914530687

嘉祥晨禾种业有限公司

嘉祥晨禾种业有限公司经营荷豆12、淮豆9号、淮豆11、淮豆12、新豫农035、邢麦6号等。www.jxrnzy.com

传统节日网

传统节日网-中国传统节日有哪些_中国传统节日祝福语大全表

环球车讯

环球车讯为您提供最新汽车报价,汽车图片,汽车资讯,内容含最精彩的汽车新闻、行情、评测、导购等,是提供信息最快最全的中国汽车网站。

钎焊炉网带

盐城海荣炉业是专业生产钎焊炉网带,真空钎焊炉,软钎焊,铝钎焊炉等大型机器的厂家,设备齐全,质量稳定,价格合理,欢迎来电咨询

山东郓城成达专用汽车制造有限公司

山东郓城成达专用汽车制造有限公司是国家工信部公告管理企业,有多种车型的生产能力,选车请到正规厂家。

博文企业管理咨询

江阴公司注册代办服务网具有多年实践经验的资深会计师发起,公司专门为中小企业提供代理记账、代理注册公司、代办执照、商标注册、代办企业进出口权服务等。客户遍布江阴市城区及各乡镇,面向各类中外高新企业、服务业、工商业、一般纳税人等企事业单位。

上海泡沫板

公司成立以来坚守“客户至上,诚信经营”的核心理念,本着“诚信做人,完美做事,追求卓越”的服务信念,以雄厚的技术实力,良好的口碑信誉,周到快捷的服务和售前售后全方位的技术支持,用我们的真诚和汗水,以求发展,共创未来!

美文社

美文社(1214.cn),专业的SCI论文润色服务机构。提供SCI/EI/SSCI英文润色服务、学术翻译、专业英语翻译、文章润色等业务,以“专业、准时、质量”为宗旨,让学术交流变得更简单!

全自动包衣机

浙江迦南科技股份有限公司(www.canaan-tech.com)是专业的全自动包衣机,无菌分装隔离器供应商,总部坐落于温州市永嘉工业园区,是中国制药装备产业企业,是目前国内固体制剂装备领域上市企业。欢迎来电洽谈

全局底部横幅