时间卷积网络 时间序列的下一场革命 (时间卷积网络和卷积神经网络)

文章编号:46622 资讯动态 2024-12-10 深度学习神经网络

时间卷积网络:时间序列的下一场革命?

字幕组双语原文: 时间卷积网络:时间序列的下一场革命?

英语原文: Temporal Convolutional Networks, The NEXT REVOLUTION for Time-Series?

翻译:雷锋字幕组( 君思 )


这篇文章回顾了几个最新的基于TCN的解决方案。

我们首先介绍运动检测的案例研究,并简要回顾一下TCN架构及其相对于传统方法(如卷积神经网络(CNN)和递归神经网络(RNN))的优势。然后介绍了TCN的几个新颖应用,包括改善交通预测,声音事件定位和检测以及概率预测。

TCN简要回顾

Lea等人的开创性工作。(2016)首先提出了基于视频的动作分割的时间卷积网络(TCN)。此常规过程的两个步骤包括:首先,使用(通常)对时空信息进行编码的CNN来计算低级特征,其次,将这些低级特征输入到使用(通常是)捕获高级时域信息的分类器中)RNN。这种方法的主要缺点是需要两个单独的模型。 TCN提供了一种统一的方法来分层捕获所有两个级别的信息。

编码器-解码器框架如图1所示,其中有关体系结构的更多信息可以在前两个参考文献中找到(在文章末尾)。提供了最关键的问题,如下所示:TCN可以采用一系列任意长度并将其输出为相同长度。在使用一维完全卷积网络体系结构的情况下,使用因果卷积。一个关键特征是,时间t的输出 仅与t之前发生的元素卷积 。

时间卷积网络:时间序列的下一场革命?

随着Yan等人最近发表的研究成果,围绕TCN的话题甚至传到了《自然》杂志上。(2020)在TCN上进行天气预报任务。在他们的工作中,使用TCN和LSTM进行了对比实验。他们的结果之一是,除其他方法外,TCN在使用时序数据的预测任务中表现出色。

时间卷积网络:时间序列的下一场革命?

下一部分提供了此经典TCN的实现和扩展。

改善流量预测

拼车和在线导航服务可以改善交通预测效果并改变人们的出行方式。通过更好的交通预测可以实现更少的交通拥堵,更少的污染,安全和快速的驾驶等。由于这是实时数据驱动的问题,因此有必要利用即将到来的流量的累积数据。基于此,Dai等人最近(2020)提出了一种混合时空图卷积网络(H-STGCN)。总体思路是利用分段衬里流量密度关系的优势,并将即将来临的交通量转换为等效的行进时间。他们在这项工作中使用的最有趣的方法之一是图卷积以捕获空间依赖性。复合邻接矩阵捕获流量近似的固有特征(更多信息,请参见Li,2017)。在以下架构中,提出了四个模块来描述整个预测过程。

时间卷积网络:时间序列的下一场革命?

声音事件定位和检测(SELD)的领域在不断增长。对环境的了解在自主导航中起着至关重要的作用。Guirguis等最近(2020)提出了一种声音事件SELD-TCN的新颖架构。他们声称,他们的框架在现场培训方面比当前最先进的技术领先。在他们的SELDnet(以下结构)中,以44.1 kHz采样的多声道音频记录通过应用短时傅立叶变换提取频谱的相位和幅度,并将其堆叠为单独的输入特征。然后,连接卷积块和循环块(双向GRU),然后连接完全连接的块。SELDnet的输出是声音事件检测(SED)和到达方向(DOA)。

时间卷积网络:时间序列的下一场革命?

为了超越它,他们提出了SELD-TCN:

时间卷积网络:时间序列的下一场革命?

由于扩张的卷积使网络能够处理各种输入,因此可能需要更深入的网络(在反向传播期间,网络会受到不稳定梯度的影响)。他们通过适应WaveNet(Dario et al。,2017)架构克服了这一挑战。他们表明SELD任务不需要循环层,并成功检测到活动声音事件的开始和结束时间。

概率预测

由Chen等人设计的新颖框架(2020)可用于估计概率密度。时间序列预测改善了许多业务决策方案(例如,资源管理)。概率预测可以从历史数据中提取信息,并最大限度地减少未来事件的不确定性。当预测任务是预测数以百万计的相关数据系列时(如在零售业务中),它需要大量的劳动力和计算资源来进行参数估计。为了解决这些困难,他们提出了基于CNN的密度估计和预测框架。他们的框架可以学习系列之间的潜在关联。他们的工作中的新颖之处在于他们提出的深层TCN,如其体系结构所示:

时间卷积网络:时间序列的下一场革命?

编码器-解码器模块解决方案可能有助于实际的大规模应用设计。

摘要

在这篇文章中,我们介绍了最近的工作:基于时间卷积网络,比经典的CNN和RNN方法更好地完成时间序列任务的方法。


雷锋字幕组是一个由 AI 爱好者组成的翻译团队,汇聚五百多位志愿者的力量,分享最新的海外AI资讯,交流关于人工智能技术领域的行业变革与技术创新的见解。

团队成员有大数据专家、算法工程师、图像处理工程师、产品经理、产品运营、IT咨询人、在校师生;志愿者们来自IBM、AVL、Adobe、阿里、百度等知名企业,北大、清华、港大、中科院、南卡罗莱纳大学、早稻田大学等海内外高校研究所。

如果,你也是位热爱分享的AI爱好者。欢迎与雷锋字幕组一起,学习新知,分享成长。

时间卷积网络:时间序列的下一场革命?

版权文章,未经授权禁止转载。详情见 转载须知 。

时间卷积网络:时间序列的下一场革命?

全局中部横幅
中文域名转码

站长工具提供中文域名在线转码功能,中文域名转码就是将中文字符串转成punycode标准编码的字符串。

杭州瑞丰生物科技有限公司

杭州瑞丰生物科技有限公司成立于2009年,主要从事农业生物技术的研发和推广,是我国农业生物技术领导者。公司充分利用中信农业基金的资本优势、隆平高科育种及产业优势和浙江大学基础研究优势,建立了从功能基因挖掘、转化体创制和筛选、国内国际安全评价和转基因品种转育的产学研结合平台和创新人才队伍。

防水涂料生产厂家

山东鑫晟发防水材料有限公司,防水卷材生产厂家,提供高分子自粘/非沥青基防水卷材产品定制与批发.山东鑫晟发防水材料有限公司是sbs防水卷材厂家、防水材料厂家、防水涂料厂家,主营高分子自粘防水卷材、js防水涂料、耐根穿刺防水卷材、聚氨酯防水涂料、TPO防水卷材、sbs防水卷材、非沥青基防水卷材等。

日历官网

日历官网(rili.cn)是专业的日历网站,可以在手机、网站之间同步数据。同时还提供各种日历日程信息,包括新闻资讯,工具查询,天气预报,黄道吉日、农历、黄历、星座运程、体育赛程、电视节目等。

台湾佰旭晨

台湾佰旭晨数控转台(四轴五轴卧式转台等)相关产品销售/安装/保修/和维修服务;第四轴、第五轴高精度旋转工作台,以及相关的各种驱动电机、液压站、增压泵、中板、L块、卡盘等配件。

湖北省农业信贷融资担保有限公司

湖北省农业信贷融资担保有限公司官网

荧光增白剂

济南吉灵化工有限公司(15668449612)专业研发,生产,销售增白剂,荧光增白剂OB-1,荧光增白剂,荧光增白剂厂家,造纸增白剂,印染增白剂,洗衣粉增白剂洗衣液增白剂,造粒专用增白剂,KSN,KCB,CBS-351,127,VBL,BA,CXT,BBU等系列塑料,洗涤,棉涤增白剂产品。让您的产品更白,更艳.厂

冷再生机

徐州恒诺机械生产销售铣刨机,路拌机,冷再生机,灰土拌和机,稳定土拌和机,拌和机,水泥破碎机,路面冷再生机,冷再生施工和冷再生机配件销售,咨询电话13852099107

上海肇民新材料科技股份有限公司

我公司以特种工程塑料的应用开发为核心,专注于高品质工程塑料精密件和精密模具的研发、设计和制造,拥有多项自主知识产权。 公司的产品聚焦于乘用车、商用车、新能源车、高端厨卫家电等领域,为客户提供具有高安全性、重要功能性的核心零部件。产品系列包括汽车发动机周边部件、汽车传动系统部件、汽车制动系统部件、新能源车部件、智能座便器功能部件、家用热水器功能部件、家用净水器功能部件、精密工业部件等。

智乐聘全球猎头服务平台

智乐聘是基于整合全球猎头资源为企业提供全球招聘服务的猎头平台。在日本/美国/韩国/东南亚/欧洲等全球范围内签约专业猎头和机构为企业提供覆盖国内/海外人才、外籍专家引进等猎头渠道服务。也为全球猎头提供优质项目,全球猎头在平台做单赚高额收益。

全局底部横幅