的逼真效果更进一步 ML AR 谷歌 通过引入 实时自拍 ARCore
雷锋网 AI 科技评论按：ARCore 是谷歌于去年 2 月份正式推出的 增强现实（AR）软件开发工具包，给开发者提供了一个开发 AR APP 的平台。不到一个月前，谷歌正式推出 ARCore 1.7 版本，为其添加了前置摄像头 AR 自拍能力以及动画效果支持；而日前，谷歌又为其引入了机器学习技术，使其实时自拍 AR 的逼真效果更进一步，该技术相关的文章发布在谷歌 AI 的官方博客上，雷锋网 AI 科技评论编译如下。
通过将数字内容与信息叠加到物质世界的真实场景中，来让人类实现超越现实的感官体验。例如， 谷歌地图的 AR 功能 ，能够在现实场景中叠加方向信息来为你指路。借助于 Pixel 相机中的 Playground 模式 ，你可以使用 AR 从不同的视角看世界。并且通过借助于最新发布的 「YouTube Stories」 以及 ARCore 全新的面部增强（Augmented Faces）API ，你可以在自拍上添加动画面具、眼镜、帽子、皮肤等特效。
实现这种 AR 功能的关键挑战之一，就是以合适的方式将虚拟内容锚定到现实世界：这一过程需要一套能够追踪到每一次微笑、皱眉或假笑的高动态表面几何结构的独特的感知技术。
ARCore 的3D 网格以及它能实现的一些特效
为此，我们引入了机器学习（ML）技术来推断近似的 3D 表面几何结构，并且仅需要用到一个单摄像头输入而无需使用专用的深度传感器。这种方法利用面向移动 CPU 界面推断或其可用的全新移动 GPU 功能的 TensorFlow Lite ，实现了逼真的实时 AR 效果。与「 YouTube Stories」 全新的创作者特效所利用的技术一样，这项技术已通过 最新的 ARCore SDK 和 ML Kit Face Contour Detection API 向广泛的开发者社区开放。
用于自拍 AR 的机器学习工作流
我们的机器学习工作流由两个协同工作的实时深度神经网络模型组成：一个是探测器，它在整张图像上运行并计算出面部位置；另一个是通用的 3D 网格模型，它在探测器计算出来的面部位置上运行，并通过回归预测近似的表面几何结构。精确地裁剪面部能够极大地减少对一般的数据增强的要求，例如由旋转、平移和比例变换组成的仿射变换（affine transformations）等，同时让网络将大部分性能投入于预测坐标来提高其准确性——这对于锚定合适的虚拟内容至关重要。
裁剪完所关注的位置后，该网格网络一次仅应用于一个单帧，并利用加窗平滑（windowed smoothing）来减少面部处于静态时的噪音，同时避免在大幅移动期间出现的延迟。
针对 3D 网格，我们采用了 迁移学习 ，并训练了一个具有多个目标的网络：该网络能够同时地基于合成、渲染的数据预测 3D 网格坐标以及基于类似于所提供的带有注释的、现实世界的数据预测 2D 语义轮廓。最终的网络为我们提供了基于合成数据乃至现实世界数据的合理的 3D 网格预测。所有模型都在源自于地理学多样化的数据集的数据上进行训练，并接着在平衡、多样化的测试集上进行定性和定量性能的测试。
3D 网格网络接收经裁剪的视频帧作为输入。由于它不依赖于额外的深度输入，因而也可以应用于预先录制的视频。该模型不仅输出 3D 点的位置，还输出在输入中存在并合理对齐的面部概率。一种常见的替代方法就是为每个地标预测出 2D 热图，但这种方法并不适用于深度预测，并且对于如此多的数据点来说，使用这种方法耗费的计算成本非常高。
通过迭代自展和精炼预测，我们进一步提高了模型的准确性和鲁棒性，同时也将数据集发展成为愈加具有挑战性的实例，如鬼脸，拍摄角度倾斜以及面部遮挡等。此外，数据集增强技术也扩展了可用的 ground truth 数据，并开发出了对摄像头瑕疵等人工产品问题或极端光照条件具有弹力的模型。
数据集扩展和改善路径
我们使用 TensorFlow Lite 进行设备内置的神经网络推理。 新推出的 GPU 后端 加速能够有效提升性能，并显著降低功耗。此外，我们还设计了具有不同性能和效率特性的一系列模型架构，来覆盖到更加广泛的消费级硬件。较简单网络之间的最重要的区别就在于残差块（Residual Block）设计和可接受的输入分辨率（最简单模型中的输入分辨率为 128×128 像素，而最复杂模型中的输入分辨率为 256×256）。同时，我们还改变了层数以及子采样率（输入分辨率随网络深度的减少而减少的速度）。
这一系列的优化的结果就是：使用更简单的模型带来了实质性的加速，同时也将 AR 特效质量的降低幅度最小化。
最复杂模型（左）和最简单模型（右）的比较：在简单模型上，时序一致性以及对嘴唇、眼睛的追踪稍微降低。
这些成果最终则能够通过以下方式，让用户在 YouTube、ARCore 以及其他客户端体验到更加逼真的自拍 AR 效果：
另外，我们还通过以下方式实现了逼真的妆容效果：
案例对比：5 个目标在不同光线下的真实化妆效果以及 AR 化妆效果
我们很高兴将这项新技术分享给创作者、用户以及开发者。感兴趣的读者可以通过下载最新的 ARCore SDK （下载地址：）来将这项技术用起来。未来，我们还计划将这项技术广泛应用到更多的谷歌产品线中。
via：
原创文章，未经授权禁止转载。详情见 转载须知 。
手机新浪网体育频道提供最迅速、最权威地发布国内国际最热门体育赛事比分和赛果，国内外足球赛事、NBA、CBA全面图文直播，在中文体育站点中拥有最广泛的用户群。新浪体育触屏版-sports.sina.cn
广州市广深花卉园林有限公司是广州目前室内外植物、绿化、保养、施工（包括室内盆景、鲜花租赁、室外绿化保养）专业特色室内植物租赁管理公司之一，专业化的服务为用花单位以低廉的价格享受优质的服务。优质的绿化植物，通过摆放、养护、调换等过程，来保证客户所用的花卉植物枝繁叶茂，生长茂盛、匀称美观。
腾讯手游助手(手机模拟器)是腾讯官方新一代安卓模拟器,完美兼容X86/AMD,与传统的安卓模拟器相比,在性能、稳定性、兼容性等方面优胜同类安卓手机模拟器!腾讯安卓模拟器-你的专属手游模拟器。来腾讯手游助手官网下载海量手游电脑版，下载即玩，畅享电脑玩手游的快乐。
农林工程甲级资质监理公司成立于1998年，位于河南省郑州市，公司在全国区域内承接农林工程项目，高标准农田监理业务。公司监理的农林工程项目先后获得了国家行业优质工程奖、鲁班奖、国家优质工程奖等,联系电话：400-008-2685
天津市恒恩印刷材料有限公司成立于2004年，坐落于天津市津南区八里台工业园，恒恩秉承着“诚信经营，共同发展”的宗旨，坚持“顾客至上，服务为本”的经营理念，为客户提供最优质的产品与最专业的服务。 恒恩专注于高温钢化玻璃油墨的研发生产、大型丝网及精密丝网制版。除此之外，我们还提供图案设计、菲林输出、环保型低温油墨以及各种丝印耗材。公司全套引进国外先进设备，进口材料，专业生产技术人员进行研究开发，确保产品的质量品质，给客户提供完美的印刷解决方案。
嘉标网，专业的商标转让平台。为您提供安全、高效的商标交易服务。在这里，您可以轻松找到心仪的商标，实现品牌价值的最大化。购买商标选择嘉标网，让商标交易更简单、更放心！
安徽启宇律师事务所-主页，律师服务，律师咨询，法律咨询，民事，借钱，交通事故，判多久，刑事，纠纷，离婚，继承，
神游网为您提供最新的游戏软件资源以及游戏攻略和软件资讯。什么类型的游戏和软件都可以在这里找到,全部都是高速,安全,绿色无病毒的下载资源,有需要的用户就来神游网看看吧!
合肥琪锋光电科技有限公司是一家研发生产和销售便携式多组分恶臭分析仪、便携式汞分析仪、汞标气发生器、烟气汞连续在线监测系统为一体的高科技企业。
孔明聊项目
IFT游戏资讯网(www.lfoster.com)分享最新好玩耐玩的端游,手游,网页游戏,单机游戏攻略资讯，包含传奇、仙侠、回合制、武侠、卡牌、三国、策略等游戏种类。
汇五金为您免费提供五金行业企业黄页、电工工具气动工具销售代理企业名录、五金工具手动工具套装生产销售企业大全，为您展示家具门窗五金及卫浴五金销售公司的联系电话与联系人、大中小型锁具生产公司名录、测量工具扳手锤供求信息，同时您也可以在这里免费开设网店、免费发布产品信息、免费发布供求信息，并快速查找供应商联系方式、行业优质企业联系方式。总之，企业信息大全、海量供求产品，就来这里找！欢迎您注册登录，成为我们的会员，免费获得开店指导！
抑郁症，似乎离我们很近又很远，我们会在社交网络上得知名人抑郁自杀的消息，但殊不知在他们背后，还有更多普通人正在饱受抑郁症的困扰，据世界卫生组织，WHO，统计，目前全球范围内大约有3.5亿人患有抑郁症，我国泛抑郁人数已超过9500万人，每10个人中就有1人饱受抑郁症的折磨，此外，抑郁症已成为自杀倾向的最大隐患，据美国国立卫生研究院，U....。
在11月16日举办的谷歌开发者大会上，有关AR技术的内容发布抓住了大量云宇宙关注者的眼球，尽管没有过多明说AR技术与元宇宙的直接关系，但其通过更新AR工具所能够达成的大量成果，对于元宇宙场景的落地都至关重要，一言以蔽之，，真实性，是这次大会上谷歌对AR内容最大的期许，而据雷锋网观察，，真实性，则体现在如下两个方面，一方面，AR需要足以...。
在大多数机器学习竞赛中，特诊工程的质量通常决定着整个作品的得分与排名，也是参赛者们非常看重的一部分，在GitHub上，作者Nomi，专注于计算机视觉与嵌入式技术，也是tiny，dnn的原作者，向我们介绍了一个面向kaggle数据科学和离线竞赛的实用工具库nyaggle，可供开发者专用于特征工程与验证，在机器学习和模式识别中，特征工程的...。
近日，库克频繁出现在媒体中，并且先后在深圳和日本等地亮相，而在他近期的讲话中，库克的言行举止均透露出对VR、AR、AI、汽车四个，保密，方向的重视，近日，库克在接受媒体专访时着重讲述了自己对VR和AR的看法，为何更看好AR库克的观点是，相比于虚拟现实VR，增强现实具备增强人类体验的能力，是人感知的延伸，使得它比虚拟现实技术更可能成功，...。
在具有挑战性的环境中，一些人工智能系统通过利用过去经验所提供的世界表象来实现目标，研究人员将这些应用推广到新的情况，使它们能够在以前从未遇到过的环境中完成任务，事实证明，强化学习——一种使用奖励来推动软件策略朝着目标前进的训练技术——特别适合学习一个总结agent经验的世界模型，并通过扩展来促进新行为的学习，雷锋网消息，近日，来自Go...。
雷锋网AI科技评论按，对于机器学习而言，区分异常数据或有显著差异数据至关重要，谷歌在NeurIPS2019论文中提出并发布了针对基因组序列OOD检测的现实基准数据集，进而提出一种基于似然比的解决方案，可显著提高OOD检测的准确性，AI科技评论将谷歌对该方法的官方解读编译如下，深度学习科学家要成功部署机器学习系统，需要系统能够区分出异常...。
雷锋网AI科技评论按，作为最久负盛名的机器学习顶会之一，今年NeurIPS2019在召开之前就消息不断，在今年论文审稿期间，NeurIPS2019程序委员会主席专门发布声明称，19篇论文因一稿多投被拒收，一时造成热议；而在会议近一个月前，多位黑人参会者们申请加拿大签证被拒的消息引起了AI学者们纷纷为其发声并对近年来签证问题的讨论展开了...。
雷锋网AI科技评论按，本文来自德国Fraunhofer协会IAIS研究所的研究科学家MichaelGalkin，他的研究课题主要是把知识图结合到对话AI中，雷锋网AI科技评论全文编译如下，必须承认，图的机器学习，MachineLearningonGraphs，已经成为各大AI顶会的热门话题，NeurIPS当然也不会例外，在NeurIP...。
雷锋网消息，7月9日，由中国计算机学会，CCF，主办，雷锋网和香港中文大学，深圳，承办的第二届CCF，GAIR全球人工智能与机器人峰会进入了第三天，在机器学习专场第三场，iPINCEO杨洋为大会带来了题为，认知分析—透过机器重新审视商业本质，的分享，阐述了当前AI技术遭遇的瓶颈——认知，让机器实现认知的条件，以及获得认知能力后，技术可...。
雷锋网按，就大量关于，杀手级机器人，的炒作来说，2017年在人工智能方面取得了一些显著的进步，阿尔法狗、冷扑大师等棋牌机器人能让顶级玩家陷入绝望，在现实世界中，机器学习正被用于改善农业，以及扩大医疗保健的覆盖面，但你最近和Siri或者Alexa对话过吗，如果有，那么你会知道，撇开这些炒作，以及踌躇满志的亿万富翁们，还有很多事情人工智能...。
大家好，我就是倪蘋，社区昵称是MLer，1，毕业于纽约大学计算机科学专业，我目前正在利物浦大学从事机器学习算法相关的研究和开发工作，研究领域包括NLP，CV和分布式计算，之前一直在关注领域内的各大顶会，后来通过AI科技评论的公众号发现了AI研习社，ai.yanxishe.com，，分享、交流的圈子又扩大了数倍，再此感谢研习社提供的交流...。
通过使用优化的数据增强方法，在CIFAR，10、CIFAR，100、SVHN和ImageNet上得到了目前最好的结果，您可以从这里找到和使用它们，在ImageNet上得到的最好的增强效果，源自，https，arxiv.org，abs，1805.09501v1AutoML——使用机器学习来改进机器学习设计，如体系结构或优化器，的想法...。
谷歌母公司Alphabet已经踏入轻代码开发的舞台，据国外媒体报道，该公司近日为软件开发者带来了一款基于谷歌SaaS程序GSuite的应用AppMaker，这款号称，傻瓜式，的轻代码H5应用开发服务，能够让用户根据企业的需求快速地创建和部署一些个性化程序应用，只需要少量，甚至不需要，编程，比如一些企业管理者想要寻求更好的方式来批准员工...。
20万中国产WiFi摄像头曝漏洞，后门大开任由黑客进入雷锋网消息，据国外媒体BleepingComputer报道，近期对无线IP摄像头进行的随机取样调查中，在对相对低级的安全漏洞进行深入挖掘之后发现了7处安全漏洞，市面上超过1250款型号将近20万台设备都存在被黑客入侵的风险，存在这些安全漏洞隐患的产品全称为WirelessIPCam...。
近期，自月之暗面宣布Kimi可支持200万汉字的无损上下文输入能力后，Kimi相关热点先后两次登上微博热搜，第一次是，Kimi概念股，在200万汉字上下文输入能力正式官宣后，A股市场与Kimi存在关联关系的多只个股，包括掌阅科技、华策影视、超讯通信、中广天择、世纪天鸿、海天瑞声、九安医疗等等相继涨停，第二次是关于，Kimi获客成本，...。
黄学东领衔，微软Azure认知服务研究团队重磅发布，视觉，语言，语音，多模态预训练模型i，Code，在5项多模态视频理解任务以及GLUENLP任务上树立了业界新标杆！编译丨OGAI人类的智能涉及多个模态，我们整合视觉、语言和声音信号，从而形成对世界全面的认识，然而，目前大多数的预训练方法仅针对一到两种模态设计，在本文中，我们提出了一种...。
大家了解SD，WAN吗，近几年，SD，WAN作为企业级广域网布局中最热门的技术之一为什么如此火爆，随着网络技术的快速发展，云计算也日益成熟，企业越来越多的业务需要上云，传统的网络已经难以灵活应对企业组网、数据传输、SaaS加速、混合云架构等需求，SD，WAN，软件定义的广域网，作为一种用于管理WAN，广域网，的自动化程度更高的技术，通...。
