AI 不止 MIT 黑科技让图像秒变小视频 照片欲静而 (爱不止玫瑰)

文章编号:39882 资讯动态 2024-12-03 黑科技YannMIT机器学习LeCun

你有想过吗?给你展示任何一张照片的时候,你看到的也许不仅仅是静止的图像,而是一段灵动的“小视频”。如今,在机器学习的帮助下,可以根据静止的照片,预测到接下来的一连串动作,准确率还相当的高。

无论是美女骑车、狗接飞盘,还是有人突然的跌倒等等,想象出这些连续的动作是我们最基本的技能之一,我们无需考虑用于预测的大量信息,比如重力、惯性和跌倒的本能反应等。那么,要让电脑学会这种预判的能力无疑是机器视觉中的一个关键挑战。

来自麻省理工学院的研究人员正在努力解决这个难题,他们已经展示出了一系列非常令人印象深刻的结果。通过使用专门训练过的神经网络,将图像转化为视频,并由计算机预测接下来会发生什么。但是,他们的模型仍然有很多局限性,视频通常只有几秒钟长,文件很小,而且图像经常很混乱。但这仍然是机器想象力方面一次令人印象深刻的创举,计算机在像人一样理解世界的道路上又前进了一步。

训练这个神经网络使用了超过 200 万个从 Flickr下载的视频片段。所有场景被分为四种类型:高尔夫球场、海滩、火车站和医院。这组连续镜头的画面很稳定,消除了相机抖动。通过这些数据,团队的神经网络不仅能够产生类似这些场景的短视频,也能根据一个静止图像产生连续的画面。这实质上是预判了接下来会发生的动作,但目前的效果还很有限,只能推测像素的变化,而不是基于整个场景的理解。

下面是效果图:

照片欲静而 AI 不止,MIT 黑科技让图像秒变小视频

这里,我们可以看到实现后的效果,例如在海滩上,你可以看到波浪的起伏;在火车站,预测模型会预判火车行驶。然而,当要求预测某人如何穿过高尔夫球场时,结果看起来有些失真,图像也很模糊。

研究人员提到计算机的预测往往并不符合正常逻辑,但至少其对运动轨迹的判断是合理的。

机器学习系统在相关领域已经取得了许多进展,包括预测握手和拥抱等行为,甚至能够生成匹配视频的音频。Facebook 的 AI 部门负责人Yann LeCun在去年的一次采访中提到了这个话题,表示预判运动轨迹是开发预测计算机的重要一环。但是,要做到真正理解视频或图像,及其接下来可能发生的动作,还需要花费研究人员更多的精力。

“假如你正在看希区柯克的电影,这时我问,‘从现在开始的15分钟后,电影情节会发展成什么样子呢?’你此时就必须设法预判出凶手是谁。”

LeCun说:“要完全解决这个问题,就需要了解这个世界和人性,这才是真正的乐趣所在。”

人工智能在预测方面的能力已经越来越强,但要想做到更加准确、自然、符合实际的效果,还需要更加完善的模型。研究人员也许需要考虑更多的因素,建立更加复杂的神经网络,利用更多的数据集训练模型。只有这样,才有可能通过机器学习技术,真正实现对图像中的连续动作进行提前预判。

推荐阅读

困境中的英特尔,拿什么在AI领域找回昔日尊严

在微软亚洲研究院工作是种什么体验? | 硬创公开课

原创文章,未经授权禁止转载。详情见 转载须知 。

全局中部横幅
直播

新浪赛事直播中心为广大球迷24小时提供全面及时的赛事直播,包括NBA直播,足球直播,英超直播,欧冠直播,NBA视频直播,火箭NBA直播,湖人NBA直播,等体育赛事直播

足球

虎扑足球专注于英超、西甲、欧冠、中超等顶级足球比赛,包含一手资讯、球员交易在内的足球比赛内容服务,并提供C罗、梅西、内马尔等国内外知名球员的动态资讯。

婚纱&婚礼小游戏,婚纱&婚礼小游戏大全,4399婚纱&婚礼小游戏全集,4399小游戏

4399婚纱&婚礼大全收录了国内外婚礼&婚纱小游戏、婚纱小游戏、设计婚纱小游戏、婚纱装扮小游戏、婚礼&婚纱小游戏下载、最新婚礼&婚纱小游戏。好玩就拉朋友们一起来玩吧!

三姐珠宝

三姐珠宝网是中国领先的珠宝行业门户网站,立足于珠宝首饰行业的发展积累和敏锐的新闻触角,为热爱珠宝的各界人士提供发展趋势,最新政策,最新资讯,科研鉴定,投资收藏,设计艺术,文化研究,时尚消费的最权威与最及时的动态信息。

粗纺纱

润昌纺织成立于2011年7月,是一家粗纺纱线专业生产企业,下设环锭纺分厂、走锭纺分厂以及嘉兴市共赢纺织品有限公司,并于2016年3月协手香港怡彩纺织有限公司,双方签订战略合作协议,为开拓更广阔的市场而合作共赢。

贵阳钢模

贵州攀志兴钢模加工厂专业贵州钢模、贵阳钢模厂家,加工生产销售各种贵州建筑钢模、预埋件、隧道台车、钢支撑以及相关配套附件等,贵州本地企业,十年老品牌,诚信经营,品质保证,欢迎来电咨询!

东方演出网

东方演出网,持平台战略,整合信息,动态全面准确的信息资讯;营造文艺圈子,以点评+互动+交流,解决客户的选择障碍,提升鉴赏能力和素养

开山空压机

浙江开山压缩机是国内知名的螺杆空压机制造企业,开山空压机18857002497永磁变频空压机及配件服务

吾爱海洋论坛

为从事海洋专业学习、海洋工作、海洋科学研究的人群提供交流的论坛平台

山西茂辉环保科技有限公司

山西茂辉科技有限公司是一家专注于净化水.软化水.供水.污水处理的集科研.生产、销售、施工、技术咨询与服务为一体的水处理公司。我公司根据国内水处理市场的需求,利用国内外的先进技术和产品,将国内、外的水处理技术和先进的生产工艺融合到茂辉的产品体系中。在产品引进方面创造了一种全新的与国内、外水工业界紧密合作的模式。引进目前先进的技术、涉及工业及民用水处理设备领域的产品,服务于广大的国内用户。

河北广电网

河北省权威新闻资讯平台

全局底部横幅