新进展 用AI控制气球导航 谷歌 出服务区 气球互联网 吹 不怕WiFi被 (新进展用英语怎么说)
这是Google「气球互联网」项目“Project Loon”交回的最新成绩单。
Google母公司Alphabet于2013年6月正式启动Project Loon计划，该计划旨在将AI技术与超压气球相结合，为更多地区提供低价且高速的无线互联网服务，尤其是与市中心相距甚远的偏远地区。
前段时间，Loon顺利完成了最新一轮飞行测试。
昨日，最新分析结果显示，在飞跃太平洋的39天里，Loon气球表现出了比以往更好的性能——基于最新人工智能系统，它能够更快地计算出气球的最佳导航路径；在目标区域上飞行的时间更长，消耗的能量更少，更关键的是，它还提出了研究团队此前未曾想到过的新的导航动作。
而这一最新人工智能系统正是基于强化学习（ Reinforcement-Learnin，RL）算法的AI系统。
研究人员称，这是他们首次将RL系统应用到航空航天产品中。Loon取得的成绩，表明RL可以作为解决现实世界自主控制问题的有效解决方案。
目前，有关这项研究发现的论文成果已经登上了《Nature》杂志。
接下来，我们来具体聊一下：Google为什么要开展「气球互联网」计划，以及强化学习系统到底解决了哪些难题。
「气球互联网」计划
你可能难以想象，在互联网如此普及的当下，全球还有一半的以上的用户无法享受到这项服务。
2013年，为了让30多亿用户所在的偏远地区覆盖互联网，Alphabet正式启动了高空互联网服务项目。之后几年，陆续有不少科技公司也加入了这个队伍，比如spacex、OneWeb等。
其中最值得一提的，是马斯克的“太空互联网”计划，他计划向太空发射42000颗通信卫星，在地球低空轨道形成一个巨型星座来完成与地面的通信任务。目前他已经成功发射了近900颗卫星。
相比于马斯克的「太空卫星」，Alpbet则把通信业务的核心放在了「高空气球」上。
具体来说，用「高空气球」实现地面通信的过程如下：当气球上升到高空平流层后（超过云层12英里高），利用“太阳能技术”吸收能量以作为电力支持，然后通过“算法系统控制（ Algorithmic Control）”让气球上下飘动，并根据风向捕捉风流信号，将气球稳定在一个固定区域。
最后通过“网状回路（Mesh Networking）技术”，将互联网数据包从一个气球传输至另一个气球；从气球传输至在屋顶建立天线的家庭和企业用户；最后将这些用户的数据传输出去。
这一过程中，如果气球在平流层飞行的时间越长，意味着Loon越可以在较低成本下为目标区域提供更长久的连通性，这也意味着互联网服务将不仅可以覆盖到更偏远的地区，而且它的价格也会更便宜。
在近几年的飞行测试中，Loon的平流层飞行时长不断刷新着世界纪录，目前最高成绩已经达到312天，接近一整年。
这项最高飞行纪录开始于2019年5月，Loon从波多黎各（Puerto Rico）起飞，进入秘鲁（Peru），然后在那里进行为期三个月的飞行测试。测试结束后，向南越过太平洋，于今年3月在墨西哥的巴哈（Baja）登录。
这项记录刷新了当时223天的最高记录，Loon首席技术官Sal Candido在博客中表示，创纪录的飞行成绩是该公司努力发展技术，并以创新的方式推动硬件和软件向不断升级的结果。
当时Loon的软件系统还并未引入RL。
目前，Loon已经在澳大利亚、昆士兰、肯尼亚、新西兰、加州中央峡谷以及巴西利亚东北部等多个地区提供了Loon测试服务。去年，因受到飓风袭击的影响，美国电信运营商还利用Project Loon为超过25万的灾民提供了网络连接。
不过，在以上服务过程中，Loon的平流层导航问题依然面临很大的挑战。
此次，基于RL系统的提出为解决当前的挑战提供了一种全新的解决方案，与原有的气球导航系统相比，RL算法改善了飞行过程中的决策时间问题。
谷歌加拿大公司的研究科学家、论文一作马克·贝勒马尔（Marc Bellemare）表示，
Loon：强化学习飞行控制器
如果在一个区域提供完全的网络覆盖，Loon一次至少要运行5到10个气球。如果覆盖范围扩大，需要调用周围的备用气球，在空中组建一个更大的网状网络。
在这一过程中，气球一般会出现以下状况：一是因电池报废等因素，导致气球寿命缩短并自动降落。二是受飓风等恶劣天气影响，气球被吹出固定服务区；
三是最关键也是难度最高的气球导航。
上文已经提到过，Loon的气球导航是通过球体上下移动，寻找合适的气流来进行导航。
如下图（a）气球通过在不同高度的风之间移动来接近它的指定位置。（b）显示了气球的飞行线路，蓝色圆直径代表50公里，为气球之间的最佳距离。
但气流是不稳定的东西。靠风在天空中移动就像使用一个道路网，在那里街道会改变方向、车道数和速度限制，甚至在不可预知的时间完全消失。
因此要做到这一点就需要一套更复杂的算法—强化学习。通过训练飞行控制器，RL可以形成一套控制策略，以处理高维的、异质的输入，并优化长期目标。比如，RL已经在Dota 2等即时策略性游戏中多次战胜人类顶级玩家，而且在长远策略方面表现惊人。
而对于一个好的飞行控制器，需要确保三点：精准且丰富和数据集，最低负载消耗以及低计算成本。
在数据集方面，研究人员根据欧洲中期天气预报中心（ECMWF）的全球再分析数据（ERA5）创建了可信的风数据集，并通过数据集的模型训练重新解释历史天气观测的结果。（ERA5提供了用程序噪声修改的基准风，通过产生高分辨率风场改变驱动程序噪声的随机种子，可以提高控制器建模误差的鲁棒性。）
在最低负载消耗方面，研究人员将部署控制器的平均功率控制在了StationSeeker之下（之前的风控制系统），同时使用奖励r对目标进行了编码。当气球距离保持在50公里范围内时，r=1为最大值。当然这种奖励也与气球的状态有关，也就是说，它的响应随时间t的变化而提供不同的指示（上升、下降或停留）
当系数小于1时，最优控制器将使未来回报的预测折现总和最大化，即“回报”。
其中E表示期望值。R表示飞行控制器从初始状态形成的长期值。
最后，计算成本主要体现在风的测量上，研究人员使用高斯过程将气球的测量结果与ECMWF的预报结果相结合，将风预报作为先验平均值。后验分布的方差量化了不同风估计的不确定性。作为控制器的输入，对气球正上方和下方的风大小和相对方位进行编码，在181个气压等级下，范围为5 kPa到14 kPa。
太平洋高空测试
基于以上RL控制器，研究人员在太平洋上空进行了为期39天的气球导航测试。
从2019年12月17日—2020年1月25日，Loon累计飞行了约2884小时。这些数据被划分为851个三小时时间，每个时间段作为一个独立样本。最终测试结果显示，
与StationSeeker相比，在50公里射程内，RL控制器根据风况使用不同的策略，可以使其在25-50km射程内花费更多的时间（图4b）；通过主动移动以返回目标区域，缩短了偏移时间（图4c）。同时也让它节省了更多能耗（图d）最后，RL控制器利用海拔高度将电池容量过剩的太阳能转化为了势能（图4e）。
这些结果表明，强化学习是解决现实世界中自主控制问题的有效解决方案，在传统控制方法（StationSeeker）无法满足要求的情况下，需要创建与真实动态环境持续交互的人工智能体。
更多论文内容可参见：
引用链接：
原创文章，未经授权禁止转载。详情见 转载须知 。
全球营销网
天下新闻头条为您精选当天最热门的新闻资讯，最受关注的社会新闻时尚八卦等，看新闻就来天下新闻头条！
广东天宏钢结构工程有限公司
单机哥是专业的游戏攻略和游戏评测网站，为玩家提供手游、网游、单机等各类游戏攻略，包含通关技巧、心得秘籍，图文解说等，致力于做最具人气的游戏攻略平台。
瓦吉金价网_实时更新的黄金价格，权威的市场解读，深入的分析，为您的黄金之旅保驾护航。今日黄金价格多少钱一克？
杰诺生活汇为你科普各个东西的功效与作用及食用方法，价格等，让你用的放心。吃的安心。
东莞市松联环保通风设备有限公司专业从事:东莞通风工程,东莞环保空调,东莞厂房降温,工业环保空调等,欢迎来电咨询,服务热线:13302618938/潘先生.
世间本无产品经理，叫的人多了，也就有了产品经理。
深圳市盛仕达电子有限公司.主营:管道风机,静音风机,直流变频风机,斜流增压管道风机,直流散热风扇,工业散热风扇,静音风扇,智能风扇定制等,我司自主生产销售,是一家拥有雄厚技术实力的专业散热风扇厂家,企业口碑优良,质量过硬,价格公道,欢迎新老客户光临惠顾。
苏州恒创门业有限公司是一家专业从事自动门及控制系统研发、设计、制造、安装和调试为一体的的综合创新型企业；公司产品以工业门系统集成为主，涵盖工业门、快速门、机库大门、柔性大门、卸货平台、段滑伸缩门、悬浮门、停车场系统、车库门、卷帘门、感应门、防火门以及门禁系统等。产品造型美观大方、新颖独特、性能安全可靠，深受广大客户喜爱，目前产品已广泛应用于工业企业、商业、物流、办公写字楼及住宅等。
V2DJ云音乐是一款专门在线试听DJ音乐的平台，自2009年成立的幸运草音乐工作室，再到2014年的V2DJ音乐工作室，经过十年的不断努力，于2019年正式推出V2DJ云音乐平台，长时间的发展使我们积累了大量丰富的资源，也特别鸣谢来自全国各地的音乐权利人、制作人等DJ音乐爱好者
上海太琴贸易有限公司专业从事AMETEK授权代理商,程控电源,phantom高速摄像机,FLIR红外热成像仪;行业经验丰富,品质保证,价格合理,一站式服务,如有AMETEK可编程电源,程控电源,phantom高速摄像机,FLIR红外热成像仪需求,请致电:021-60405075.
随着社会的经济发展，人口的流动不断的增加，人们外出旅游或者是外出工作以及出差，在外的话，很多人都会选择酒店，酒店入住方便，而且拥有优越的生活条件，并且很多的孩子都会有常常去住酒店的想法，市面上的酒店品牌很多，而莹润酒店就是一家具有很高的商业价值的酒店，酒店的环境好，服务的质量高，并受到消费者的认可，一些创业者也想要加入酒店行业，以获得...。
北汽电动车，一家新时代下的国有控股高科技上市公司和绿色智慧出行一体化解决方案提供商，致力于为用户创造电动化、智能化、个性化的驾乘体验，构建汽车与能源、互联网、AI人工智能产业融合发展的新生态、新格局，打造面向未来的绿色智能科技服务平台，至于北汽电动车怎么代理，一起去了解一下，自2009年成立以来，北汽新能源以电动化为突破口，以科技为核...。
很多人在周末的时候就会出门逛超市，购买自己日常生活需要的东西，现在大多数的人群都会选择智能超市，智能超市不需要排队，而且都是扫码付款，比较方便，因此也就出现了各种系列的智能超市品牌，E21智能超市一直都是有很强的实力，会为顾客提供贴心的服务，所售卖的产品种类很齐全，性价比很高，顾客都很喜欢去这个品牌超市购买东西，所以众多创业者发展了品...。
手机已经是生活必需品，人手一台，由于手机的快速发展也促使了手游行业迎来了迅速的扩展，现在多数人手机上都安装各类的手机游戏，休闲的时间玩玩手游打发时间，随着手游的广受欢迎，很多人开始加盟其中，龙创手游就是一个比较好的加盟项目，于是，大家都在问龙创手游加盟费，谁加盟过，接下来，跟着小编一起来看看吧！龙创手游本着玩家充值，你就收效的经营理念...。
其实有关面馆在市场上的发展还是很具有前景的，如今有很多人对于面食的追求也是比较高的，所以说选择加盟一家面馆，未来的发展也会很不错，但是在面馆行业中拥有很多的竞争力，所以在挑选品牌的时候应该要认识对于一般面馆加盟费多少钱，还是要看你所加盟的品牌了，一般面馆加盟费多少钱，说到面馆的品牌，可能很多人都比较青睐于2014年所成立的巴味仙面庄面...。
人靠衣装，美靠靓妆，很多女性朋友为了永葆美丽肌肤，焕发无穷魅力，就会时常光顾美容院，正是因为有这样旺盛的需求，国内美容行业也就取得了突破性的发展，不少创业者都想开一家美容院加盟店，那么，2016容院加盟什么牌子好，小编在此为大家推荐百莲凯美容院，百莲凯美容院成立于2001年，是美容连锁经营的先驱，百莲凯拥有独立的科研、生产及人才培训基...。
水果捞是一种制作简单、原材料易得的甜品，尽管价格不菲，却因其健康美味而受到消费者的喜爱，水果捞主要由各种新鲜水果、酸奶、冰沙、冰淇淋和干果仁等组合而成，尤其在夏季备受欢迎，常见的水果有西瓜、芒果、桃子、草莓、奇异果、哈密瓜、圣女果、火龙果等，制作方法简单快捷，即切即食，既新鲜又解暑，那么，现在开一家水果捞店前景如何?水果捞店因其健康美...。
餐饮行业一直都是很不错的行业，会因为一个网红或者一个网站，带动了一个品牌的发展，美食一直都是离不开消费者生活的，经过网络时代的传播，会有很多人知道这种品牌，就像鲜贝恋贝壳粉品牌，网络时代给这个项目带来了很多的销售额，现在成为了一种网红项目，有些智慧之选商关注了这个项目，在消费者的眼中的爆品，鲜贝恋贝壳粉加盟费多少，鲜贝恋贝壳粉的由来就...。
马上就到十一国庆了，假期里想好怎么穿搭了吗，在这个秋意浓浓的日子里，姑娘们也是时候为自己准备几件内搭单品了，那么女生秋季内搭怎么穿好看呢，今天丹比奴女装为大家献上时尚的五款内搭单品，怎么穿都不会出错哦！秋季内搭单品1，针织衫寒冷的秋季入手一件针织衫是必须的，作为经典色调的白色是内搭受欢迎的色彩之一，一款修身版型的高领针织衫，简约大气的...。
孩子的教育问题始终都是社会热门话题，在双减政策的加持下，推动素质教育行业的快速发展，AI技术得到很多家长的认可，为孩子们带去更好素质教育，北四网校AI智领学习平板历经二十多年发展，创意运营模式，先进教学理念，使其成为教育领域中的实力品牌，那么北四网校AI智领学习平板好加盟吗，售后服务如何，北四网校AI智领学习平板从品牌创建到现在已经有...。
现在的人都十分重视饮食营养，吃东西讲究营养，其实每一种食物都有自身的营养价值，都有它存在的意义，但是不同的烹制方法会使食物的营养价值流失，失去了食物本身的营养价值，在众多烹制方法中，清蒸或是蒸焖是一种很好的烹制方法，因为这种烹制方法不会造成食物的营养流失，小火老师焖锅是一家生意不错的餐饮店品牌，该餐饮店所销售的食物都是以焖为主，食物健...。
创业哪个项目好，近年来儿童阅读加盟行业持续保持增长状态，主要在于以下几点，·全民阅读、文化自信是大背景，阅读是一个比较好的创业切入口；·9月份新的中小学新教材上线，整本书阅读对孩子的阅读量、阅读能力提出了更高的要求；·AI时代，培养孩子的综合能力成为大趋势，而阅读是其中的重要途径……在这种背景下，以借阅，读书会，研学活动为运营模式的书...。
2018年，在OculusConnect4开发者大会上，FacebookCEOMarkZurkberg表示，让要10亿人进入到VR的世界——为此，Facebook发布了一款入门款VR一体机OculusGo，然而，到了2020年，VR依旧是一个小众行业，但还好，Facebook一直没有放弃，它一直在以自己的方式推动VR的发展，目前，它在...。
美国开半导体高峰会，强迫台积电、三星等45天内交出商业机密数据据台湾，中时新闻网，27日消息，由于全球，芯片荒，迟迟未缓解，美国商务部上周再次举行半导体高峰会，包括台积电、三星、英特尔等半导体大厂都与会，报道引述韩媒消息，此次美国态度强硬，以提高芯片，供应链透明度，为由，要求台积电、三星等晶圆代工厂交出被视为商业机密的库存量、订单、销...。
早上8，30开始上班，到中午12，30工作结束，下午2，30开始上班，5，30工作结束，周六、日为休息日不上班，根据查询网络律临得知，一般情况下医保局在工作日每天早上8，30开始上班，到中午12，30工作结束，下午2，30开始上班，5，30工作结束，周六、日为休息日不上班，医保局主要职责有11项，涉及拟定医保制度政策、实施医保基金监督...。
楼上的车名字都打错...一看就知道不是搞汽车的我给LZ介绍下兰博基尼Ｍｕｒｃｉｅｌａｇｏ百闻不如一见，Ｍｕｒｃｉｅｌａｇｏ几近完美的色彩，富有内涵的外形，明锐的轮廓棱角，世上有几人能抵挡它的诱惑，Ｍｕｒｃｉｅｌａｇｏ的Ｖ12发动机，排量高达6.2升，最高时速达到330公里／小时，百公里加速仅需3.8秒，而且驾驶更简易，极速时更轻松、更...。
[文，观察者网严珊珊]综合俄罗斯卫星通信社和塔斯社报道，俄罗斯外交部副部长里亚布科夫7月11日示意，美国在德国部署远程导弹的选择旨在破坏俄罗斯的安保，俄罗斯将以沉着和专业的形式对此作出军事回应，里亚布科夫今日在圣彼得堡举行的第十届金砖国度议会论坛间隙示意，美方此举只是造成形势更新的一环，，一种吓唬战术，稍早前，俄罗斯驻美国大使阿纳托...。
