我们终于把它讲清楚 谈了这么久的Project Tango (我们终于把它忘记了)
雷锋网按 ：本文作者胡金晖，UCVR联合创始人，CTO，英国King's CollegeLondon电子工程系博士，专攻计算机视觉、图像处理。
ProjectTango发布初期曾经一度被称为黑科技，但现如今已慢慢走进我们的生活。如果说Kinect是3D感应技术的开创者，那么ProjectTango就算是3D感应技术领路人了。 ProjectTango将光学传感器、惯性传感器与计算机视觉技术进行了完美的结合 。
ProjectTango诞生记
说到ProjectTango就要说起ATAP（All Things Are Possible，ATAP是Google收购Motorola（后来又卖给了联想）后保留的一个重要部门），更要说起JohnnyLee。
如果你打开上面Project Tango的介绍视频，第一眼看到的一个面目和蔼的胖子，就是那个在2007年底把Wii玩出花的大神。07年12月John神在YouTube上传了一系列视频，记录了用Wii遥控手柄追踪人的手指，通过改装后的Wii遥控手柄和投影仪制造出多点触摸电子白板，还有用Wii遥控手柄追踪人的头部位置，与此同时，游戏画面也为了适应观众的视角而发生改变。从这几个实验中，我们可以看到当下LeapMotion、Oculus Rift等下一代人机交互方式的影子。
之后他加入了微软的Project Natal（该项目的成果是风靡全球的Kinect），后来跳槽到GoogleX，再之后加入MotorolaATAP（All Things Are Possible），最终带领团队在2014年6月5日启动ProjectTango。
ProjectTango三大核心技术
众所周知ProjectTango包含三块技术：运动追踪（MotionTracking），深度感知（DepthPerception）和区域学习（AreaLearning）。我们可以通过John神的职业道路，由简入繁来看看Project Tango里面的黑科技是如何一步一步实现的。
首先就是John神的成名之作：Wii实现头动追踪。他将Wii捕捉系统翻了个个，将含有IR相机的Wii手柄作为接收器，并把Wii的“感应棒”作为一个含有两个红外点光源的发射器，如下图：
这就形成了一个典型的单目视觉系统。 接收器拍摄到的图像是三维空间的场景在二维空间的投影，要识别场景的“深度”信息，就是一种逆向求解的过程。单目视觉系统一般采用对应点标定法，即通过不同坐标系中对应点的对应坐标求解坐标系的转换关系，说起来很绕口，但是简单解释就是好比你一只眼睛看一根木棍（我们假定木棍不会在水平面旋转），虽然没有了双目的立体视觉，但是通过观看木棍的长度和位置变化你就可以判断木棍的大概位置。同理John神的Demo中接收器拍摄到的图像大概是这个样子。
可能这个例子里面的原理非常之简单，但要知道他提出的这个VRDisplay概念要比Oculus早了近5年。
运动追踪
Project Tango的第一个核心技术“运动追踪”的三维动态捕捉就是利用了上面提到的单目视觉技术的升级版Feature Tracking（Google称为特征捕捉） 。特征捕捉如何理解呢？ 再回到John神的例子里，我们不再固定接收器的位置了，反而是拿着接收器（这里我们不再叫它接收器了，叫采集设备或相机）移动；而对面只有两个光点的发射器也变成一个一个的光点贴在John神家里屋子的各个角落。
当我们移动相机时不断地一帧一帧进行拍摄，因为拍摄到的光点的相对位置在不断变化（这里“变化”是指拍摄到的两帧之间同一个光点的相对位置变化），通过计算我们可以得到相机的移动距离。 简单来说Tango设备在不断循环的一个过程就是：拍摄——识别特征点（个人估计是SIFT点）——匹配特征点——筛去错误匹配——坐标换算 。当然ProjectTango的运动追踪不仅如此，他还能通过一个内置的6轴惯性传感器（加速度计和陀螺仪）来捕捉相机的加速度和运动方向。
当融合了以上两类传感器的数据之后ProjectTango就“完美”（其实还有瑕疵）实现了三维运动追踪。
为什么说还有瑕疵的？因为运动追踪只是单纯得到了相机移动的轨迹，然而对于相机所处的场景是零认知。所以一旦设备被关掉，它之前的运动轨迹就会被“忘掉”。最大的问题还是运动追踪中所累积的误差，或者叫漂移，在长距离使用后真实位置会和运算位置有很大差异。
为解决这个问题，John神团队为Tango设备设定了一种学习模式。这应该是他在Google X里面无人驾驶汽车研究成果的冰山一角。这种学习模式理解起来就简单很多了，为了让Tango设备具有一定记忆，而不再像一个被蒙着眼睛的人一样需要靠数自己走了多少步来计算距离，Project Tango可以让用户预先录入某个场景（这里要特别提醒的是，录入的数据不光包括了运动追踪里面所识别的特征点，还包含了场景本身），当用户重回这个场景的时候Tango设备会自动用录入的数据来纠正运动追踪的数据，这个纠正的过程中录入场景里的那些特征点会被当作观测点，一旦发现与当下特征点匹配的观测点，系统便会修正当下的追踪数据。 这就是Project Tango的第二大技术核心——区域学习 。
如果说把 深度感知 作为Project Tango的第三大技术核心，我觉得有点虚，毕竟Google也是采用的第三方的深度传感器。不过对此Google并没有掖着藏着，而是很大方的表明Tango设备可以选择任意一种现今流行的深度感知技术。而对这项技术的顺利应用多半也要归功于John神在Project Natal的经历了。Kinect一代的推出震动了业界，震动了学术界，同时也把结构光（Structured Light）的概念推广了出去。那么他到底是怎么实现深度检测的呢？检测到的“深度”又是什么概念呢？
结构光顾名思义是有特殊结构（模式）的光，比如离散光斑，条纹光，编码结构光，等等。他们被投射到待检测物体或平面上，看上去就好像标尺一样。根据用处不同，投影出来的结构光也可以分为不可见的红外光斑，黑白条纹可见光，单束线性激光，等等。比如Kinect投射出来的就是红外光斑，设想你玩游戏的时候要是一片黑白条纹光打到你身上，这画面感岂不是很怪。
人们发现把这些光投到不同深度的平面上光的纹路会发生变化，那么如果能采集到这些纹理变化，并且能精准的计算这些变化岂不是可以算出不同的深度？
回归正题，Kinect的离散光斑是如何实现深度检测的呢，我们知道如果拿一个手电照射墙壁，站近或站远，墙上的光斑是不同大小的，从不同角度照射墙，光斑也会呈现不同的椭圆。这就是基本原理了。但如何使一个红外光源按照不同角度射出？并且还要变成一堆离散的光斑？
这就要拿出它的发明者以色列PrimeSense公司的专利图了，他们非常聪明地在红外发射器前面加了一个特殊设计的diffuser（光柵、扩散片）可以使红外光线能从不同角度射出。另一个摄像头再去拍摄这些光斑然后进行计算从而得出每一个光斑所在的深度。每种结构光的扫描精度，所对应的算法，以及应用场景都有所不同。例如用于电子产业元器件锡膏检查（SPI/ AOI）一般就是可见的条纹光。另外几种结构光就不多做介绍了，总之只需要知道他们对深度感知的精准度会远远高于Kinect这种离散光斑类型的结构光（可以达到微米级），并且算法也有很大出入。
除了结构光Project Tango还提到了TOF（Timeof Flight飞翔的时间？）一个激光发射器，一个接收器，一个运算光程的芯片组成。通过计算不同的光程来获取深度信息，它也是一种深度传感器。
这些深度传感器输出称之为 “点云” 的数据，包含了所有被采集到深度的点的三维信息。
但是这里还隐藏了一个技术难点，因为Tango设备是在一边移动一边采集的，如何把上一帧采集的“点云”信息和当下帧采集的“点云”进行匹配，并且显示在同一世界坐标中就是难点所在。ProjectTango巧妙的结合运动追踪的轨迹数据达到了对“点云”的实时拼接。要知道“点云”的数量一般在几百或者上千。算法已经不易，运算量更是大的离谱，而Project Tango还把它做进了移动设备里。
结论
当这三大技术汇聚，Project Tango为移动平台带来了一种全新的空间感知技术，它可以让移动设备像人眼一样感知你所在的房间，找到行走的路，并且感知到哪里是墙，哪里是地，以及所有你身边的物体。
其实这段很酷炫的话只有一个关键词，那就是“移动平台”。为什么？此时先拿出一个上文都没有提过的词语SLAM（Simultaneous Localization And Mapping，同步定位与地图构建）。它是机器人领域里面最重要的一个概念，没有之一。
就是希望机器人能够在某个环境中认识这个环境，找到自己的位置，并且规划出合理的道路。然而自1986年这个概念被提出以来，运算复杂度就一直是它的一个有待解决的问题。 可能大家也发现了，Tango设备就是一种SLAM设备，并且Google把它实现在了移动设备端 。John神和他的团队靠的不是魔法，而是对于光学传感器和惯性传感器与计算机视觉技术的巧妙结合。利用光学传感器来校正惯性传感器的误差累计或者说“漂移”问题，利用惯性传感器的小尺寸，低成本，以及实时信息输出来降低光学传感器的运算量，再配合上成熟的深度感应器（其实也是光学感应器的一类）从而实现了这个人们眼中的黑科技。
Project Tango的价值并不是把某个技术做到了登峰造极，而是将多种技术完美融合在一起，做到了1+1+1大于3的功效。并且把这些技术融合在了我们每天手边拿着的设备上。在AR，VR，MR盛行的今天，Project Tango的场景扫描和运动追踪功能正是现在AR，VR，MR设备最缺失的几种输入信息方式。再加上Google最近发布的DayDream VR平台和Google移动操作系统的最新版本Android N，可见Google在移动VR上的布局是多么宏大。不过，此时看来Project Tango还处在“Tech Demo”阶段，究竟能给AR，VR带来多大的推动力，我们拭目以待。
特约稿件，未经授权禁止转载。详情见 转载须知 。
站长工具域名注册平台作为一个知名的互联网服务提供商，提供.com、.cn、.net等丰富域名供用户选择，帮助大家找到一个满意的域名
潍坊净禾环保科技有限公司主营销售产品有各种高效复合型、正压型二氧化氯发生器、壁挂式二氧化氯发生器、硫酸法和电解法二氧化氯发生器等，产品型号多，选择性大，受到广大用户认可，产品销往全国各地。
上海开陌实验器材有限公司(www.kemo-sci.com)是专业的热电ThermoOrion奥立龙,热电Thermo纯水机,美的生物低温冰箱的供应商,拥有充满活力的销售团队、具有丰富仪器技术和应用知识的技术支持团队和技术全面、经验丰富的售后服务团队
河北泽宏科技股份有限公司专业从事气体检测、分析系统研发、生产、销售于一体的高新技术企业
河北营凡物资回收有限公司大量收购回收各类库存废旧胶管,回收范围：钢丝胶管、煤矿高压油管、高压胶管、液压胶管、船厂胶管等废旧胶管，服务衡水市区及周边各县市，在回收行业建立了良好的信誉和口碑！
肇庆市荣坚管业有限公司是专业生产PE和PVC管材的大型厂家，拥有一支高素质的科技人才队伍和管理团队。公司拥有“荣坚”、“坚之塑”、“雄坚”三个品牌。公司是集科研生产、销售为一体的专业化企业，具有多年生产管材及异型材。公司主要产品有pe通信管、pvc给水管、建筑排水管、卫生饮用管、难燃线槽线管、电讯电力管、打井专用管、农用灌溉管道以及异型材等。
临沂市阳光热力有限公司位于临沂市费县探沂镇探沂工业园石田庄村北,主营热力销售,热力管网工程施工维护等业务,供热服务热线：0539-5618298
琵琶网是中国免费手机网游下载门户站,提供好玩的手机网游下载,安卓游戏,苹果iPhone网游,新闻资讯,攻略评测,新游激活码礼包,手机网游排行,道具商城,及手游论坛交流等全方位的手机游戏娱乐服务
麦瑞特电缆材料有限公司主要生产：电缆填充绳，高强涤纶丝，尼龙丝，芳纶丝，阻水纱，特多龙丝，电缆阻水纱，PP充麻，电缆棉线，充麻，网状填充绳，PP填充绳，电缆无纺布，电缆棉纸，铝箔麦拉，电缆云母带等电线电缆绕包材料和填充材料。
岩土科技股份有限公司专业为各类建构筑物（如桥梁、隧道、边坡、工业与民用建筑等）提供结构加固、基础加固的设计施工服务（结构补强、裂缝处理、基础托换、顶升纠偏平移、加层扩建、防腐防渗处理、基础沉降处理、地下室抗浮等），为各类地质灾害治理、环保工程提供勘察、设计、施工服务。
马斯特环境技术（广东）有限公司
十方通贸易平台
11月1日，在2018百度世界大会上，百度更新了其智能音箱，并推出小度语音车载支架产品，在主论坛上，百度智能生活事业群组，SLG，总经理景鲲首先就DuerOS的市场表现进行了总结，截至2018年10月，搭载百度DuerOS设备的激活量已超过1.5亿，月活跃设备量超过3500万，合作伙伴超过300家，搭载DuerOS的落地主控设备达到1...。
据彭博社8月18日消息，有知情人士向彭博社透露高通公司正在考虑推出一款新芯片重返服务器市场，以减少对智能手机的依赖，报道称，高通正在为去年收购的芯片公司Nuvia的产品寻找客户，并且，作为最大的服务器芯片买家之一，亚马逊旗下云解决方案提供商AWS已经在考虑研究高通公司的产品，转载了该消息的路透社表示，亚马逊已经向他们证实确在考虑高通公...。
适用了20余年的摩尔定律近年逐渐有了失灵的迹象，从芯片的制造来看，7nm就是硅材料芯片的物理极限，不过据外媒报道，劳伦斯伯克利国家实验室的一个团队打破了物理极限，采用碳纳米管复合材料将现有最精尖的晶体管制程从14nm缩减到了1nm，那么，为何说7nm就是硅材料芯片的物理极限，碳纳米管复合材料又是怎么一回事呢，面对美国的技术突破，中国应...。
中国互联网电视行业，这一年过得很辛苦，如同众多互联网公司急欲转型为AI公司一样，互联网电视企业也对AI颇具热情，而这其中的代表，就是暴风，作为暴风，AI，大屏，战略的重头戏，暴风TV在2017年全面拥抱了AI，砍掉了所有非AI产品，接连推出数款AI电视和两款AI投影，激进投入AI怀抱的背后，是暴风TVCEO刘耀平的判断，他认为，电视这...。
关于收费迅雷下载电影的网站，介绍经常使用正轨、大型且口碑良好的视频分享平台，例如，电影天堂、80S电影网、BT天堂等，但请留意，在下载任何内容时，务必确保遵守外地的版权法规则，在互联网时代，电影资源的失掉变得相对容易，但也随同着版权和非法性的疑问，迅雷作为一种下载工具，可以协助用户从各种网站下载电影资源，但是，在介绍详细的网站之前，必...。
最小型的福田雷沃开掘机的多少钱是4万元，请速采用，谢谢开掘机有哪些型号，型号35就是3.5吨级的斗容量在0.11立方左右；型号60就是6吨级的斗容量在0.3立方左右；型号120就是12吨级的斗容量在0.5立方左右；型号160就是16吨级的斗容量在0.65立方左右；型号是200就是20吨级斗容量在0.8立方左右；型号220就是22吨级的...。
要计算流行F600一年的保险费用，首要步骤是明白您选用的保险类型和保额，不同的保险组合会间接影响保费的高下，例如，假设您的保险笼罩了片面的保证，包含强迫保险、车辆损失险、第三者责任险以及免赔额保险等，那么流行F600一年的保费大约在五千五百元左右，但是，这只是个大略的参考，实践费用或许会因多种起因此有所变动，比如，车辆的经常使用性质，...。
军队、武警车牌军车牌现行军车牌称为，97式，，格局是甲A，第一局部为中文，天干地支，，代表束缚军军种序列，甲――束缚军总部，总顾问部、总政治部、总後勤部，乙――个人军丙――通讯和运输己――渖阳军区庚――北京军区辛――兰州军区壬――济南军区寅――南京军区辰――成都军区戍――广州军区午――空军未――海军申――总装备部第二局部为英文字母，代...。
我了解到的，1.TikTok，作为世界最受欢迎的短视频平台之一，TikTok提供了丰盛的特效、滤镜和音乐库，经常使用户能够轻松制造出幽默、创意的短视频，2.Kwai，快手，它提供了多种特效、滤镜和音乐选用，经常使用户能够将自己的创意想法变成事实，此外，Kwai还具备直播配置，用户可以实时与观众互动，3.VivaVideo，VivaV...。
原题目，美国加州警察也要用中国这招了据英国，金融时报，20日报道，美国加州警察局方案将经常使用装备扬声器和摄像头的无人机启动美国新冠疫情，居家隔离，时间的巡查防疫上班，据了解，外地警察局刚刚购置了中国大疆公司制作的两架价值11，000美元的无人机，外地警方示意，随着疫情的始终蔓延，为了进一步限度人与人接触，并启动隔离措施，将为无人机装...。
财联社8月12日电，中国驻德国大使馆颁布信息，德国，柏林报，8月12日刊登吴恳大使接受该报发行人迈尔专访，中国不是危险，问，据德，商报，报道，联邦政府或者在年内出台措施，以潜在安保危险为由，在德5G网络树立中逐渐扫除华为、中兴等中国科技企业，您怎样看，吴恳大使示意，德方希提高自身电信网络安保的关切可以了解，但不应以此为借口将中德反常...。
重庆分类目录网站收录保险相关的优秀网站大全分类检索，为上网用户提供保险网站排行榜与您分享、收藏！
今年银行业不好做，在面对诸多市场和技术挑战之际，不少中小银行似乎开始把最后的努力，押宝至数字化转型，但现阶段进行大规模的数字化和智能化，能否成为中小银行的救命稻草，11月27日，第三届中国数字银行圆桌论坛在深圳举行，多位中小银行代表代表针对这一话题进行了深入探讨，以下为圆桌论坛讨论全文，雷锋网，公众号，雷锋网，做了不影响原意的删减...。
情人节降至，百度推出基于AI的魅力值测评和诗歌自动生成主题功能百度搜索在近日推出了基于人工智能技术的，情人节用脸撩，开启桃花运，功能，迎接情人节，用户在百度搜索App中需用语音说一句，开启桃花运，即可进入主题页面，该页面包含两大核心功能，一个是，自拍撩汉，妹指数，，即根据照片颜值打分的功能，另一个则是输入姓名，地点后自动生成专属诗歌的...。
人工智能、大模型技术正在席卷全球，经过行业知识精调得到的电力领域垂直大模型，已成为加速电力行业数智化升级的重要手段，近日，腾讯云副总裁刘立萍在2023电力数字化大会人工智能与大数据助力新型电力系统建设分论坛表示，今年6月，国家能源局发布，新型电力系统发展蓝皮书，，提出加强电力系统智慧化运行体系建设，强调推动电网智能升级，打造新型数...。
发表在专业问答2022，2，1513，38展示机型信息，品牌型号，iPhone13系统版本，iOS15.3软件版本，腾讯视频8.2.6腾讯视频改名字总共分为三步，可以通过个人中心找到昵称更换，然后更改新昵称即可，详细的操作步骤如下，腾讯视频怎么改名字1.打开个人中心在腾讯视频的下面菜单栏找到个人中心并点击打开；2.打开用户界面在个人中...。
据央视资讯，外地期间8月15日17时，日本气候厅解除，日本南海海槽地震暂时情报——渺小地震留意报，日本宫崎县远海8日出现7.1级地震后，日本气候厅今日晚些时刻颁布揭示信息，正告日本东部太平洋南海海槽出现大地震或者性增高，呐喊民众未来一周左右提高警觉、做好防范，日本47个都道府县中，有29个被列为或者受大地震影响的地域，包含首都东京，...。
