ICRA2019热闹开幕 视觉自监督学习机器人获最佳论文 李飞飞组触感 (icra2024)

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

雷锋网 AI 科技评论按:机器人与自动化国际会议 ICRA 2019 近日正如火如荼地在加拿大蒙特利尔召开。作为展示机器人设计方案以及控制算法的顶级学术会议,ICRA 相比 ICML、ICLR 之类的机器学习会议要更加务实,一方面理论发现要有可用的实现,另一方面自然是「能够在真实机器人上发挥效果」是非常重要的评判标准。这也让 ICRA 会议的前前后后都非常热闹,不仅投稿阶段组委会会鼓励作者们在投稿论文时附上一个展示视频,大会现场也随处可见各种各样的机器人。

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

以及,2020 年的 ICRA 将于 5 月 31 到 6 月 4 日在法国巴黎举行。

卡耐基梅隆大学计算机科学及机器人学教授的主题演讲「拥抱失败」(embracing failure)让许多听众产生了共鸣,许多人都拍下了这张极富教育意义的 PPT:

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

除了全体演讲的大厅现场,展区内的机器人也带来了很多乐趣。比如下面几个。

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

MIT Cheetah(猎豹)机器人和波士顿动力 Spot Mini 机器人共同起舞。

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

Independent Robotics 的多地形机器人 Aqua。

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

传鸡蛋 —— 可以说是很高的运动控制水平了。

还有很多其它机器人,在现场的参会者一定看得玩得津津有味。

在当地时间 5 月 22 日下午的颁奖环节上,ICRA 组委会颁发了多项论文奖。

ICRA 会议的传统是有许多细分项目的论文奖,目前雷锋网 AI 科技评论了解到,今年获得最佳大会论文奖(Best Conference Paper Award)的是来自斯坦福大学李飞飞组的《Making Sense of Vision and Touch: Self-Supervised Learning of Multimodal Representations for Contact-Rich Tasks》(理解视觉和触觉:在具有丰富接触的任务中进行多模态表征的自监督学习,)。

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

论文摘要:在非结构化的环境中进行带有丰富触觉接触的控制任务一般都同时需要利用触觉反馈和视觉反馈。然而,想要得到一个可以同时利用触觉、视觉这两种具有完全不同特性的信号模态的机器人,为它手工设计一个控制器可不是一件容易的事情。虽然深度强化学习已经能够根据高维度输入成功地学习到控制策略,但这些方法通常都样本效率太低,难以部署在真实的机器人上。在这篇论文中,作者们使用了自监督学习方法为机器人传感器的输入学习紧凑且多模态的表征,学习到的表征也就可以用来提高控制策略学习的样本效率。作者们在多种钉子形状、配置、孔间隙的条件下测试了机器人执行摁钉子任务的表现,机器人不仅有良好的适应能力,而且对外部干扰具有鲁棒性。作者们也同时展示了模拟器中的机器人和真实机器人上的表现。

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

摁钉子任务中 z 轴(高度)方向的力传感器读数以及不同时刻对应的视觉观察画面如上图所示。整个过程在以下 6 个状态之间变化:(1) 机械臂在空间中自由运动;(2) 接触到盒子;(3)(4) 找准钉子的过程中在盒子表面滑动,传感器读数体现了不同的动态特性;(5) 对准后,机器人用力把钉子塞进洞里 (6) 成功送入后力量逐渐减小。

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

自监督多模态表征学习系统的神经网络架构框图。网络的输入来自三个不同的传感器:RGB 图像传感器,力-扭矩传感器读数(每 32ms 一次),以及机器人手臂末端位置和速度。网络会把数据编码并集成到一个多模态表征中,然后基于这个表征学习带有丰富的触觉能力的运动控制器。这个表征学习网络是通过自监督学习端到端地训练的。

项目主页:(有展示视频)

论文地址:

另外,获得最佳机械和设计奖(ICRA2019 Best Paper Award on Mechanisms and Design)的论文是《Development and Experimental Validation of Aerial Vehicle With Passive Rotating Shell on Each Rotor》(在每个驱动器上都有被动旋转翼的空中交通工具的开发和验证,)。其它的论文奖我们在持续了解中。

近期我们的其它报道文章中也介绍了多篇 ICRA 2019 接收论文,感兴趣的读者欢迎点击阅读。

更多后续报道请继续关注雷锋网 AI 科技评论。

版权文章,未经授权禁止转载。详情见 转载须知 。

ICRA2019热闹开幕,李飞飞组触感+视觉自监督学习机器人获最佳论文

全局中部横幅
变频器,PLC,伺服马达,人机界面,您值得信赖的供应商

深圳金龙翔自动化设备有限公司主营Lenze,伦茨,YASKAWA,安川,三菱,西门子,FUJI富士,松下,台达,OMRON欧姆龙,Invt英威腾,Kinco步科eview,WEINVIEW威纶,Pro-face普洛菲斯,HAKKO白光,海泰克等原装变频器,PLC,伺服马达,人机等工控产品及原装选配件。

腾讯云

腾讯云(tencentcloud)为数百万的企业和开发者提供安全稳定的云计算服务,涵盖云服务器、云数据库、云存储、视频与CDN、域名注册等全方位云服务和各行业解决方案。

361工具

361工具网为您提供站长常用查询工具外,还有海量开发人员用到的实用工具,JSON工具、格式化转换、加解密编码、文本转换、网络查询、站长工具、计算工具、对照列表等其他工具。

中铁在线

中铁在线,安保网是服务于安防行业的生产厂家、保安公司,销售商、系统集成商、安防工程商、安防公司等为您提供最新的安防招标信息,安防产品,安防行业新闻,安防技术及安防展会信息,全国政务信息一体化应用平台

热熔胶复合机

盐城市德玛机械有限公司专业生产销售各种复合机械,主要产品有:热熔胶复合机,撒粉复合机,火焰复合机等,公司致力于复合机械的研究,设计生产,所有产品出厂前都经过严格测试,竭诚期待您的合作!

猫抓板线锯机

迈腾木工机械是一家集科研、开发、制造、销售、服务于一体的专业从事木工机械设备制造的企业。

怀化吉佳门窗有限公司

工厂定制铝合金门窗,为你打造更实惠的价格,更优质的品质。高端定制,彰显您高贵品质的生活!

陕西普菲特自控工程有限公司

陕西普菲特自控工程有限公司_我们坚持“以人为本,诚信服务”的经营宗旨,积极推动和提供国外先进的自控产品的销售、工程成套和技术服务工作,在冶金、有色、建材、玻璃、航空航天、热电、化工、轻工和设备配套等各行业,取得了良好的应用业绩,积累了丰富的仪表成套、系统集成及现场仪表应用、安装和技术服务经验。

松果集運

松果集運,台灣集運,集運倉,大陸到台灣集運

91金融

91金融,普惠金融,中小微企业主,贷款融资,融资服务,融资平台

瓦格纳尔涂装

东莞市七星机械设备有限公司为德国瓦格纳(WAGNER)喷涂设备在中国授权一级代理商,拥有多年专业的涂装技术和经验,可一站式完成中央供油、计量、控制、混合、远载、喷涂、换色等系统,提供整厂工业喷涂系统解决方案。

慧聪行业资源网

慧聪行业资源网是工业品B2B垂直采购平台,致力为用户提供“垂直、高效、精准”的商机线索,提高“找生意”和“做生意”的效率,以产业互联网的理念,打造集“信息服务、品牌服务、交易撮合服务、工具服务”为一体的B2B服务平台。目前hczyw.com已覆盖工业品热泵、空调、地暖、水处理、电子元器件、物联网、舞台灯光设备、专业音响灯光、工程机械、汽车配件、汽车用品、广电、涂料、塑料、家电、酒店用品、消防等31个主要工业品及原材料行业

全局底部横幅