AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别 (aaai2025审稿结果)

文章编号:41838 资讯动态 2024-12-03 AAAI创新奇智人工智能2022

近日,创新奇智关于 双注意力机制少样本学习 的研究论文《Dual Attention Networks for Few-Shot Fine-Grained Recognition》被全球人工智能顶会接收为Main Track论文。

AAAI(The National Conference on Artificial Intelligence)是人工智能领域的主要学术组织之一国际先进人工智能协会(American Association for Artificial Intelligence),主办的A类人工智能学术会议。今年会议共收到9251篇投稿,最终经过大量的筛选,录取率仅为15.0%,创下历史新低。创新奇智投稿的论文脱颖而出,得益于一直以来在计算机视觉领域深厚的创新力。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

概述:

细粒度图像识别是计算机视觉和模式识别领域的基础研究课题,但是大量优质细粒度图像数据的获取和标注需要耗费大量的人力和财力,这为细粒度图像识别的推广和使用带来了巨大的障碍。

少样本学习是目前研究的热门方向之一,能够极大地减少细粒度图像识别对于标注样本的依赖,故少样本的设定下进行细粒度图像识别的相关研究,内容和成果均符合实际应用的需求。

本文通过卷积神经网络与注意力机制提取图像中的部件与全局特征,通过基于图的多示例学习对局部特征进行建模,丰富了细粒度部分的内在结构相关性,通过注意力机制发掘对细粒度图像识别有用的微妙全局信息,从而得到更高的少样本细粒度图像识别的准确率。

主要贡献

1、提出了一种由双注意力流构成的元学习方式的新型少样本细粒度框架,以获取细粒度定制图像嵌入表示。

2、开发了包含硬/软注意力机制的双注意力网络,不仅实现细粒度物体部分间重要关联的显式构建,而且能够隐式获取细微但有辨识性的细节。

3、基于三个常用的细粒度基准数据集进行了综合的实验,本文提出的模型在识别准确性上明显优于其他解决方案。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

这是一种基于双注意力流的少样本细粒度图像识别方法,包括以下步骤:

步骤1: 提取样本的特征图(feature map),生成特征图的空间注意力图(spatial attention map)引导,利用注意力引导机制,生成用于软注意力流的加权特征图,同时筛选出用于硬注意力流的深度描述符(deep descriptor)。

步骤2: 加权特征图使用全局聚合操作得到全局嵌入特征;将一个样本筛选出的所有深度描述符建模为一个多示例学习(multi-instance learning)的包(bag), 使用基于图的多示例学习方法挖掘样本部件之间的关系,得到部件嵌入特征。

步骤3: 将两个注意力流得到的全局嵌入特征和部件嵌入特征拼接得到样本最终的嵌入表示,基于原型表示和最近邻方法进行类别预测和模型训练。

本方法与现有技术相比,其显著优点为:

(1)本方法使用了两个注意力流分别得到了部件级别的关键信息和全局聚合信息,不仅对细粒度图像识别提供了区分新的部件级信息,也补充了对细粒度图像识别有用的微妙全局信息。

(2)对于硬注意力流,使用多示例方法将筛选出的有用深度描述符建模为包,并基于图的方法对包进行编码一体化得到对应细粒度部件的深度描述符的整体表示,丰富了细粒度部分的内在结构相关性。

(3)与基于双线性池的方法相比,我们的方法复杂度更低更加易于训练且有更高的识别效率。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

在三个常用的少样本细粒度图像识别数据集 (CUB Birds,Stanford Dogs和Stanford Cars) 上进行了实验,上图实验结果表明,论文提出的方法几乎在所有数据集上均明显优于其他基准方法。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

上图结果显示出我们的模型对语义簇数的鲁棒性,并且当簇数为3时识别的准确率最高。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

我们提出的基于MIL的聚合方法与原始MIL池化方法的效果,上表结果显示无论是否与全局特征进行连接,我们的方法均表现出较好的效果。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

从上表结果可见,引入本文中考虑细粒度部件间关系的方法会显著提高少样本低粒度识别的准确性。

AAAI2022丨创新奇智提出双注意力机制少样本学习 助力工业场景细粒度识别

最后,我们将实验中一些硬/软注意力样例进行可视化,上图中第一排为输入图像;第二排为硬注意力选取的深度描述符的位置,可见均对应物体的细粒度部分,如头、耳、尾、轮胎等;第三排展示软注意力,更多的细节细粒度模式能够被软注意力关注到。

版权文章,未经授权禁止转载。详情见 转载须知 。

全局中部横幅
建筑加固公司

加固之家网是中国建筑加固行业平台,致力于中国建筑加固行业电子商务的发展,以业主和加固公司创造价值为主要责任!为业主提供房屋安全鉴定、加固设计、加固施工、混凝土切割、防水补漏以及建材设备一站式服务,加固之家整合了整个加固产业链上最优质的资源,汇聚了全国大量技艺精湛的金牌施工队和数百家一线品牌合作企业,为加固行业领域带来新的变革,为用户提供标准化加固服务,从而可以让用户花更少的钱,轻松解决加固难题。

湖北省农业信贷融资担保有限公司

湖北省农业信贷融资担保有限公司官网

枞富装潢【官网】闵行装潢公司|闵行装饰公司|闵行家庭装潢|闵行家庭装修

上海枞富建筑装潢设计有限公司是一家集设计、装饰、施工于一体的装饰公司,以现代市场观念为全新经营理念的专业装饰公司.

【su模型免费下载】sketchup模型

专注sketchup模型表达,原创su模型之家,好模型好设计尽在素模网

铁岭市金星仪器仪表有限公司

致力于各种液位计、物位计、各种窑炉火焰监视、工业电视监视、流量计的应用与研究。

武汉理工大学网络信息中心

,主要用于武汉理工大学网络信息中心,服务指南,图片新闻,通知公告,工作动态,党群工作,部门概况,法律法规,工作清单,信息公开,技术支持,网络安全等信息的发布

日本SMC过滤器

上海乾拓贸易有限公司专业销售日本SMC过滤器|SMC磁性开关|SMC减压阀|FESTO|费斯托电磁阀FESTO气缸|BURKERT电磁阀|BURKERT流量计|SMC无杆气缸|SMC气管等进口品牌,欢迎新老客户来电咨询

首页

苏州久保昌精密机械有限公司成立于2014年4月,致力于精密零部件、涡轮、蜗杆、轴、销类车削加工。

交叉滚子轴承

洛阳博盈轴承有限公司是交叉滚子轴承生产厂家,致力于交叉滚子轴承,交叉圆锥滚子轴承,YRT转台轴承,转台轴承等的生产制造销售.轴承精度等级为P5,P4,P2级.适用于精密旋转工作台,机械加工中心转台,工业机器人的关节部和旋转部,测量检测仪器等设备。

成都层流手术室净化装修

四川华川洁净科技有限公司,专注层流手术室净化建设,ICU病房建设,负压隔离病房,PCR实验室、供应室、洁净实验室净化装修、厂房洁净车间净化工程设计、施工。电话:13198551112

Aa字库

Aa字库成立于2015年,致力于创造原创设计风格独树一帜的商用字体。目前版权字体超3000套,包括专业字体、创意字体、书法字体、手写字体、装饰字体等。

全局底部横幅