论文解读 基于强化学习的时间行为检测自适应模型 2018 AAAI (论文解读基于什么理论)
雷锋网 AI 科技评论按 ：互联网上以视频形式呈现的内容在日益增多，对视频内容进行高效及时的审核也变得越来越迫切。因此，视频中的行为检测技术也是当下热点研究任务之一。本文主要介绍的就是一种比传统视频行为检测方法更加有效的视频行为检测模型。
在近期雷锋网 GAIR 大讲堂举办的线上公开上，来自北京大学深圳研究生院信息工程学院二年级博士生黄靖佳介绍了他们团队在 AAAI 2018 上投稿的一篇论文，该论文中提出了一种可以自适应调整检测窗口大小及位置的方法，能对视频进行高效的检测。视频回放地址：
黄靖佳，北京大学深圳研究生院信息工程学院二年级博士生。2016 年毕业于华中科技大学计算机学院信息安全专业，获学士学位。现研究方向为计算机视觉、行为检测、增强学习等。
以下是 AI 科技评论对嘉宾分享的内容回顾。
分享主题 ：AAAI 2018 论文解读：基于强化学习的时间行为检测自适应模型
分享提纲：
分享内容：
大家好，我的分享首先是介绍一下行为检测的应用背景，接下来介绍我们团队提出的 SAP 模型，以及模型在实验数据集上的性能，最后是对本次分享的总结。
行为检测任务的介绍
但是这种方法在解决任务时存在两个难点。
首先是对于一个没有切割过的视频，比如在图中这个视频中，所需要检测的目标是一个三级跳运动，三级跳在不同的情况下，根据人的不同，所持续的时间也是不同的。
第二个难点是，目标时间出现的位置是在视频中的任意时间点。
所以说用「两阶段方法」进行目标行为预测，会产生非常多不同尺度，不同位置 proposal。最简单的方法是用不同尺度的滑动窗口，从前到后滑动，产生非常多的 proposal，然后再做分类。这种方法虽然行之有效，但时间复杂度和计算复杂度都相当高，使得在完成这项任务时往往需要花费大量的计算资源。
为了避免这种低效的检测方法，我们提出了一种可以自适应调整检测窗口大小及位置的方法，对视频进行高效的检测。
我们最开始的想法是能不能仅使用一个滑动窗口，只需要从头到尾滑动一遍就完成 proposal 产生过程呢？
这就必须要求窗口能不断地自适应地根据窗口所覆盖的内容，能够不断调节窗口的大小，最终的窗口大小能精确覆盖目标运动，从而得到检测的窗口区间。
我们使用增强学习作为背后的模型支撑来完成这样的循环过程，达到我们的目的。下面是 SAP 模型的框架图。
关于 Temporal Pooling Layer
在原有的 C3D 模型中，要求输入的视频帧是固定的，一般是 16 帧或 8 帧。以 16 帧为例，当视频帧多于 16 帧，就需要对视频帧下采样，采样成 16 帧，送到视频中进行处理，这样在采样过程中会丢失非常多细节信息，造成特征表达不准确等问题。
而我们提出的 Temporal Pooling Layer 的输入帧可以是任意长度。
我们在增强学习中的奖励设置机制。在增强学习中，对于一个 agent，如果 agent 执行了一个动作后，我们认为是执行正确的，就给一个奖励；如果认为是错的，就给一个惩罚。
SAP 模型的训练过程，可到文末观看嘉宾的视频回放，或关注嘉宾的 GitHub 地址获取相关代码。
SAP 模型的测试
实验过程
我们的实验是在 THUMOS'14 数据集展开的，用它的 validation set 训练模型，在 test set 上进行实验评估。我们使用了是以下两个衡量标准。第一个是 recall 值和平均 proposal 数量函数第二个是 recall 和 IoU。
proposal 做分类后的评判标准是：Average Precison 和 mAP
检测性能的结果
上图红色圈注的部分比较的是不同的模型，在取相同的 proposal 数量，用同样的分类器做分类，哪个模型的性能会更好。结果发现，在只有 50 个 proposal 的时候，我们的方法表现的最好。
总结
代码相关资料GitHub地址：
雷锋网GAIR大讲堂视频回放地址：
更多免费直播视频，请关注微信公众号： AI科技评论。
原创文章，未经授权禁止转载。详情见 转载须知 。
JSON在线压缩转义工具，非常方便、高质、效率，希望可以为您提供帮助。
提供精品正版电子书免费下载和购买；多看阅读APP目前支持Android、iPhone、iPad、Kindle等多种设备。多看阅读，享受精品阅读时光。好书，你值得多看。
序多多，全新的在线网站建设和小程序开发制作的一站式saas平台,颠覆传统建站。已为深圳、广州、北京、上海和全国十万+企业公司提供营销服务.平台致力于网站建设,网站设计,网站制作,网页设计,响应式高端网站开发;系统全面支持微信小程序开发。7*12小时在线售后服务.
知海网(www.zhwenku.com），海纳百川知识如海水般无边无际，是一个在线资源分享平台，您可以找到教学课件,工作总结,行业资料,模板范文等资源,并提供用户下载获得收益的平台。
哈尔滨华恒展柜有限公司是一家集展示柜设计、制作、生产、销售于一体的综合性专业厂家!专业生产设计哈尔滨展览展示,哈尔滨展柜厂等各类展柜！一流品质欢迎定制。详询：15504628968
云南鑫希旺环保工程有限公司
华科信息网一个专注于科学信息的综合性门户平台，致力于为科研人员、学生及爱好者提供最新的科研动态、学术资源和专业文献。通过丰富的数据库和高效的搜索功能，用户能够方便地获取相关领域的最新成果和研究进展。我们还鼓励学术交流，提供论坛和互动功能，帮助用户建立联系、分享经验，共同推动科学研究的发展。无论您是科研新手还是资深学者，华科818网都将是您探索知识、拓展视野的重要伙伴。
山东大益生物科技集团有限公司是集生产、研发于一体的微生物饲料添加剂生产厂家和饲料添加剂供应商，生产微生态制剂，猪鸡水产饲料添加剂产品，打造山东微生物饲料添加剂品牌
新钢集团
易展网推荐优质的展会、展销会、展览会、博览会等信息，是一个展会信息、历届照片、展商的选展定展的公开平台，为参展企业提供网上展厅和展商宣传，为组展机构提供免费会展信息发布平台和展会推广宣传平台。
河池游戏网是一个集海量游戏攻略、资深玩家社区、安全下载服务、个性化推荐和优质服务于一体的游戏平台。我们专注于为游戏爱好者提供全面、详细的游戏指南，以及安全、便捷的游戏下载服务，让您的游戏体验更加丰富多彩。快来与我们一起探索游戏的无限可能吧！
阳澄湖莲花岛小宋蟹庄
年关将至，幼儿园行业进入了后的冲刺阶段，全国的园长开始抱团取暖寻找2018年的发展机遇，就是在这样的环境下，香港跨世纪国际教育集团的加盟园园长在参加了跨世纪加盟英雄年会后竟然说出了这样的话，园长们究竟说了什么话呢，我们不妨来听听，安徽宿松跨世纪博爱幼儿园园长说，让我们大家能够静下心来好好回顾2017、用心展望2018，跟随跨世纪一起...。
城市生活压力大，年轻人想创业，又担心资金不够，竞争太激烈，于是，不少人都会把目光转向广袤的农村，农村地大物博，商机无限，那么，农村创业到底做什么好呢，下面，就请跟随小编来看看年个农村创业点子吧，、泥鳅养殖泥鳅被称为，水中之参，，是营养价值很高的一种鱼类，同时还可入药，起到补益健脾，利水缓缓效效等合格的结果，正是基于这些优势，当下，泥鳅...。
2017年，在全体金职人的共同努力下，金职伟业集团取得了辉煌的战果，为表彰员工及团队，集团总经办决定奖励公司精英团队赴普吉岛旅行，并借此提高团队凝聚力，为2018开启美好的开篇……2018年1月30日下午，金职伟业精英团队50余人在金职伟业董事长彭英女士、总裁潘建明先生的带领下，坐上了飞往普吉岛的包机，开始了为期七天难忘的普吉岛之旅，...。
年关将至，幼儿园行业进入了后的冲刺阶段，全国的园长开始抱团取暖寻找2018年的发展机遇，就是在这样的环境下，香港跨世纪国际教育集团的加盟园园长在参加了跨世纪加盟英雄年会后竟然说出了这样的话，园长们究竟说了什么话呢，我们不妨来听听，安徽宿松跨世纪博爱幼儿园园长说，让我们大家能够静下心来好好回顾2017、用心展望2018，跟随跨世纪一起...。
西式的糕点已经成为了大家的生活的一部分，在日常的生活中，面包糕点就可以作为休闲零食吃，还能够早餐的食物吃，市面上的烘焙店内生意红火，人气高，也吸引了很多的创业者的加入，在众多的美食品牌中，法帝诺就已经走进了大家的生活，还拥有较高的名气，如果加盟的话，究竟法帝诺怎么样，烘焙技术好学吗，法帝诺怎么样法帝诺的公司总部创立于2018年，现在还...。
串串香是现代人喜爱的菜，它不仅色香味俱全，还可以达到人们追求的健康安全，特别是喜欢辣的人是无比的热爱，并且这种小火锅一样的串串香我们百吃不厌，选择串串香加盟无疑是具有很大竞争力的，因为它的需求量大，我们总是可以有好的销售量，你想了解2018串串香品牌排行榜，想创业的话可以和小编一起来了解下，上上签串串香深受大众的欢迎，因为它不仅色香味...。
女生爱美我们都知道，但是并不是说每个人都有天生好看的容貌，我们只能是先天不足后天补了，所以对于现代爱美的女生来说保持一个好皮肤，好身材就是首要任务，所以美容院就是我们女生常去的地方了，在这里我们感受到自己变美，给自己带来自信，我们每个女性每个月在美容院的消费基本是我们公司的三分之一，美容院也就有了很不错的发展前途了，要想创业的朋友可以...。
现在汽车的使用越来于频繁，汽车在使用的时候，就难免会有损耗，汽车出现问题的话，会修理汽车，汽车易损件的市场需求量就很高，很多创业者就想要加入汽车易损件的行业中，以抓住创业的商机，如果想要加盟代理汽车易损件的话，究竟汽车易损件连锁品牌排行有哪些，下面就简单的介绍一下，1、好汽配，该品牌是源自上海商务公司建立的品牌，公司创立于2018年，...。
3月15日，18日，如鱼得水软装优，相第二十五届，北京，国际墙纸布艺展览会，距离上次如鱼得水参展已时过五年，大数据时代，大平台时代，大软装时代，如鱼得水战略转型整体软装，并成功引进智能柔性生产系统，品质优、交期快，生产力翻倍增长，实力足以支撑更多加盟门店经营销售，家居建材展会是企业招商的重要平台，如鱼得水软装优品一切准备工作就绪，全国...。
酷比乐寄语，酷比乐2018全新加盟政策正式起航，不忘初心，砥砺前行，酷比乐，作为西式快餐特许加盟品牌之一，引路西式快餐品牌，专心只做好炸鸡，酷比乐品牌发展一直秉承，真诚不凡快捷，的经营宗旨，以对人真诚与美食的热情为顾客营造出，好吃时尚快捷，的用餐体验，我们深知在品牌发展的道路上离不开您的合作与支持，酷比乐2018全新加盟政策，正式...。
根据本草纲目记载羊肉是补身体的好食材，我们喝了对身体是有很大的帮助的，可以祛寒暖胃，滋阴补阳，补气血，用山羊熬成的汤，所以营养价值更加的高，它有着天下第1汤的美称，目前很多人说到它就已经是垂涎三尺了，忍不住的去喝上一碗，由于人们的需求创业者们也想着是不是可以选择羊汤加盟来创业呢，2018餐饮排行，下面我们就来看看，在餐饮中有名的羊汤，...。
2018已翩跹而至，市场中的各行各业都开始了对2017年的总结，并以此为依据，对今年的经营策略做出适当的改进，近几年，的零售业在电商的冲击下达到了盛大盛大的规模，各个企业明争暗斗，抢占市场资源，今天，小编就来带大家了解一下，2017零售业排名是什么，榜首，马云的创业史，在各行各业已成为神话，尤其是支付宝的出现，改变了人的消费方式，是现...。
这是一件讽刺又无奈的事，近日，知乎上演了一部年度，虚拟，大剧，一个讨论国产操作系统，天赐，的话题前几天在知乎热榜发酵，其中不乏有专业人士出面答疑解惑，但奇怪的是，这个热门话题之下所有的帖子作者全都标注着一个创作声明，内容包含虚构创作，内容中的情节存在虚构加工，仅供参考，这是怎么回事呢，当真有国产操作系统，天赐，我们接着往下看，就...。
曾经的医械，老大哥，深圳安科，近日冲刺创业板IPO受阻，创业板官网显示，深圳安科高技术股份有限公司，以下简称，安科，的发行上市审核已于8月19日中止，上市计划暂缓，或是受其保荐机构招商证券被立案调查影响，上市节奏被打乱，何时能重启计划尚未可知，为安科多舛的命途再添一笔阴影，这家成立于1986年的老牌医学影像设备企业，在医械圈内无人不...。
发表在专业问答2022，10，2814，54展示机型信息，品牌型号，小米电视5系统版本，MIUITV3.0电视机有图像没声音是怎么回事可能是因为电视被静音或者遥控器把音量调到了最低导致，也可能是电视内部的硬件故障导致，如扬声器故障或者内部线路问题导致的扬声器失效，电视机有图像没声音是怎么回事电视机有图像没声音是怎么回事可能有以下三种问...。
烤鸡被很多人选择，在满足消费者口味需求后，也值得创业者来加盟，这部分创业者想知道灵芝烤鸡加盟费多少钱，下面介绍的内容能够帮助，继续跟着小编浏览下面介绍的内容吧，省会城市、地级城市、县级城市的创业者，要是选择加盟灵芝烤鸡的话，需具备大约15万元、9万元、5万元的加盟费，创业者可以将这里介绍的费用作为参考，具体的费用要创业者亲自进行准备工...。
美国入选总统特朗普外地期间11月10日晚经过社交媒体发表，他将任命美国移民与海关执法局前代理局长汤姆·霍曼在新政府中主管边陲事务，特朗普在帖文中称，霍曼将，担任咱们国度的边陲，包含但不限于南部边陲、北部边陲、一切海上和航空安保，特朗普将打击合法移民作为其竞选的外围内容，承诺将把合法移民大规模驱逐出境，霍曼曾在特朗普的第一个任期内担任...。
