详解全新大数据分析 英特尔戴金权 Zoo AI平台Analytics (大数据新概念陷阱)
雷锋网按：2018 全球人工智能与机器人峰会（CCF-GAIR）在深圳召开，峰会由中国计算机学会（CCF）主办，雷锋网、香港中文大学（深圳）承办，得到了深圳市宝安区政府的大力指导，是国内人工智能和机器人学术界、工业界及投资界三大领域的顶级交流盛会，旨在打造国内人工智能领域最具实力的跨界交流合作平台。
在大会第一天的“AI前沿”主会场，英特尔高级首席工程师、大数据技术全球CTO戴金权带来了题为“大数据分析+人工智能”的演讲。
戴金权负责领导英特尔全球（位于硅谷和上海）的工程团队在高级大数据分析（包括分布式机器学习和深度学习）上的研发工作，他带领团队一手研发了基于Apache Spark 框架的分布式深度学习库 BigDL，在这次演讲中，他还着重介绍了一个新产品：Analytics Zoo。会后，雷锋网就BigDL和Analytics Zoo对戴金权进行了专访。
英特尔AI软件工具图谱
近一年来，英特尔反复提到的“人工智能全栈解决方案”是其人工智能战略布局的最好诠释。
戴金权介绍到，英特尔一直致力于提供一个完整的端到端的全栈人工智能解决方案，从终端设备端到网络，再到数据中心的云端。
这一套解决方案的底层技术包括了至强可扩展处理器、NNP芯片、FPGA、网络以及存储技术，其上则是各种数据库、人工智能平台和具体的体验。
此次，戴金权更为详细地解释了英特尔的人工智能软件层。
在基础层，有英特尔针对机器学习优化的英特尔发行版Python、优化的DAAL的发行版、MKL-DNN和clDNN神经网络函数的优化库、开源的nGraph编译器等；在库这一层，有机器学习库的优化、TensorFlow/MXNet/Caffe/BigDL等的优化，再到工具包这一层，有开源视觉推断和神经网络优化工具包OpenVINO、VPU上的优化推断开发的英特尔Movidius SDK、CPU上的认知解决方案英特尔Saffron AI。这些端到端的解决方案可以帮助开发者更快速地开发AI应用。
戴金权一直致力于大数据分析，开发出基于Spark的分布式深度学习框架BigDL和Analytics Zoo，让更多的大数据用户、数据工程师、数据科学家、数据分析师能够更好地在大数据的平台上使用人工智能技术。
BigDL是将英特尔大数据平台与人工智能结合的产物，为什么要做这样的结合呢？
戴金权介绍了三个趋势。
第一个趋势，今天深度学习的发展很大程度上是由于数据规模来推动的。由下图可见，随着横坐标数据规模的增长，纵坐标显示的神经网络模型就越有效，越准确。任何深度学习的系统、框架、应用都要能够处理大规模的数据。
第二个趋势是业界大数据的发展，不管是互联网公司还是传统企业，大家都以Apache Hadoop建立起数据平台，这个平台聚集大家处理过的和未处理的数据，从而你能够将各种数据的处理、分析和应用，应用到这个平台上。从这个意义上说，任何数据处理和分析的框架、应用，包括深度学习的应用，都要能够非常好地和Apache Hadoop为标准的数据平台交互。
第三个趋势，深度学习的模型只是整个流程的一部分，要构建和应用深度学习模型，还有数据的导入、数据清洗、特征提取、对整个集群的资源的管理和各个应用之间对这个资源的共享等，这些工作事实上占据了机器学习或者深度学习这样一个工业级应用开发的大部分的时间和资源。所以，数据处理、机器学习，以及算法必须很好地和现有的大数据处理的工作流整合在一起。
戴金权深刻感觉到，在大数据处理工作和深度学习模型算法之间有很大的断层。深度学习顶尖研究人员不断在突破模型，但是数据科学家、分析师、普通用户却很难将模型应用到现实的生产环境当中去。深度学习处理的一大瓶颈就是数据，特别是生产数据，都是采用分布式存储，很难将其拷贝到另一个环境再来进行处理。
在戴金权看来，Apache Spark是业界最广泛应用的分布式集群计算引擎，它里面有大量的对数据分析处理的组件，比如说SQL的处理、实时流的处理，还有进行图分析的库。
基于Spark推出的BigDL是Spark上标准的库、标准的组件，能够和这些大数据、生态系统里面的不同的分析、处理的组件非常好地整合在一起。BigDL与目前主流的深度学习框架Caffe、Torch、TensorFlow所能实现的功能相同。虽然市面上已经有主流的深度学习框架，英特尔推出BigDL则是因为看到了将大数据分析与人工智能结合起来的一个空白点。BigDL可以直接在现有的Hadoop和Spark的集群上运行，不需要对集群做任何修改。
戴金权告诉雷锋网：“我们看到有另外一个很重要的应用场景，没有被这些现有的框架所覆盖到，我们有大量spark用户，从2007年开始开源开发，十年间已经成为了业内数据存储处理分析的标准，大家都已经建立了大数据集群，上面有大量的数据，集群可能几千台，互联网公司可能几万台这样的规模。
为了深度学习和人工智能应用，难道是要把这套大数据集群完全抛弃，再另外建一套新的系统吗？我觉得其实并不是一个最合理的路径，从某种意义上来说，应该在你现有的大数据的平台，大数据的集群上面，能够将新的深度学习、人工智能的技术，能够加进来。”
Analytics Zoo
自2017年1月英特尔开源BigDL起，已经有广泛的合作案例。在去年年中，戴金权的团队在Apache Spark和BigDL的基础上又构建了Analytics Zoo大数据分析和人工智能的平台。
差不多是在BigDL开源半年后，戴金权开始着手Analytics Zoo的构建。他谈到，在跟很多客户合作BigDL时，他感到，BigDL、Tensorflow这些框架里最终的AI应用还是有很长的距离。
应用开发本身是非常复杂的工作流水线，戴金权思考如何才能提供像Spark上的Streaming这样很方便地对特征进行处理的流水线，提供内置的模型、特征工程操作、迁移学习的流水线的支持。Analytics Zoo正是这样一个更高级别的数据分析+AI平台，能够利用Spark的各种流水线、内置模型、特征操作等，方便用户构建深度学习端到端应用。
某种意义上它是Spark和BigDL的扩充，它的目的是方便用户开发基于大数据端到端学习的应用，除了内置的模型、内置的一些非常简单的操作之外，它里面还提供了大量的高级的流水线的支持，能够使用Spark>
第一个例子是英特尔与京东展开的合作。京东有大概几亿张的图片存储在分布式存储系统当中，他们想要把这几亿张图片从大数据系统里面读出来，然后对它进行处理。在这个案例中，用了SSD的模型来试图识别图片里面有什么物品，探后再用DeepBit的模型，将物品的特征提取出来。原来京东已经在GPU卡上做了一些应用，但是这里面有一些问题，包括如何处理端到端数据的流水线，包括如何提高端到端处理的效率。戴金权介绍到，“当我们把整个处理的应用迁移到Spark和BigDL平台上，可以看到它提升了很多的运维的效率，使用BigDL/Spark在Intel Xeon（英特尔至强可扩展处理器）集群有效扩展，取得相对于GPU集群3.8倍性能提升。”
AI的三个核心点在大数据、算法、算力，现在很多人认为要有足够的AI算力，非GPU不可。京东的这个案例体现了BigDL与英特尔至强可扩展处理器配合，对整体深度学习表现的提升。戴金权告诉雷锋网，京东这个案例一开始是建立在多个GPU之上的，他们的团队在Caffe上训练，在开发、部署、性能方面都碰到问题。英特尔将京东方面迁移到Spark上面，跑在1200个逻辑的核，一台服务器支持50个逻辑，大致用了24台服务器,利用Spark这样的端到端流水线处理，与之前用GPU的方案相比可以达到差不多3.8倍的性能提升。
第二个案例是英特尔和MLSListings合作的案例，他们是加州的不动产交易商，他们可以识别用户浏览的房屋图片，为用户推荐相似的房屋。这套系统构建在Microsoft Azure上。
第三个案例是和世界银行在AWS上合作。世界银行通过志愿者上传的世界各地的食物图片，帮助大家来分析在世界各地的物价水平。其中如何通过大数据处理对图片进行清洗、处理，再用迁移学习来构建图片分类模型是值得关注的问题。
第四个案例是与UCSF的合作，通过3D的模型对医疗图象进行分类，首先对3D的MRI照片进行识别，然后对它进行分类，可以试图诊断膝盖上面的一些病症。
第五个案例是们和Cray公司（美国做超级电脑的公司）合作。合作内容是做近期的降水云图的预测，通过Seq2Seq的模型，把过去一小时的卫星云图做了一个序列，输入到模型里面，能帮预测下一个小时每10分钟这个卫星云图的变化，通过这个来进行一些降水的分析。
第六个案例是和GigaSpaces合作的通过基于自然语言处理对呼叫中心进行管理。当有用户打电话进来，把其语音转成文本以后，导入到BigDL系统里面，然后对它进行实时的流式处理，使用BigDL上的文本分类模型可以知道用户打电话进来是为什么，他是Windows出了问题还是Mac出了问题，自动就会把呼叫中心的电话录入到不同的部门。
最后，戴金权总结到，英特尔致力于端到端全栈人工智能解决方案。BigDL和Anaylitics Zoo致力于架起大数据和人工智能之间的桥梁，当用户已有基于Apache的大数据集群，就可以很方便地进行大数据分析和上人工智能应用，不仅能够有更高的资源利用率，还可以提升端到端的开发效率，以及提升部署效率。
英特尔AI事业部三位负责人讲解：AI技术如何落地应用
发布新一代NNP芯片外，英特尔AI软件和应用更透露其AI野心
原创文章，未经授权禁止转载。详情见 转载须知 。
4399收藏盒全新改版,为用户推出个性化推荐,快来发现更多好玩的游戏！
4399安卓游戏为您提供造梦无双手机版下载、造梦无双安卓版下载，造梦无双攻略、评测，更多造梦无双手游下载尽在4399手机游戏网。
该站点未添加描述description...
世纪永盛科技发展有限公司是一家集生产制造、开发研制、经营销售为一体的涂料、化工生产经营企业。销售乙烯基树脂漆,乙烯基树脂防腐漆,乙烯基树脂油漆,乙烯基树脂涂料,乙烯基树脂防腐漆，中温乙烯基树脂漆，高温乙烯基树脂漆等产品。
电力网是由中国电力发展促进会主办，主要面向能源、电力等相关领域专业人群提供：全面的电力资讯、技术、产品、供求、会展、培训、招聘、论坛、研究报告、专项咨询等内容和服务。
上海漫道科技有限公司（简称漫道科技）面向金融机构提供专业的金融IT服务，这些服务基于漫道科技自主研发的解决方案和产品，全面金融与泛金融领域，服务吸纳互联网运营思维，技术手段，结合金融科技最新发展趋势，以多年的金融IT实施经验和专业的技术服务团队，帮助金融企业升级综合技术能力，为实现企业战略目标保驾护航。
盐城市明悦节能环保技术有限公司主要生产：制砂选粉机，砂石选粉机，转子选粉机，复合选粉机，石英砂选粉机，粉煤灰选粉机，氢氧化钙选粉机，布袋除尘器，脉冲除尘器，矿山除尘器，采石场破碎机除尘器，砂石除尘器，制砂机除尘器，破碎机除尘器，振动筛除尘器，沙子烘干机，石英砂烘干机，压裂砂烘干机，尾矿砂烘干机，尾矿烘干机，方形摇摆筛等设备。全国服务热线：18012577773
河南正华置地建工集团有限公司河南正华置地建工集团成立于2000年6月，下设驻马店正华置地商砼、驻马店置地建设房地产开发、驻马店筑城劳务、新蔡县凯德建筑工程四个子公司，是一家具备综合施工能力的集团企业。河南正华置地建工集团成立于2000年6月，下设驻马店正华置地商砼、驻马店置地建设房地产开发、驻马店筑城劳务、新蔡县凯德建筑工程四个子公司，是一家具备综合施工能力的集团企业。
华盈钢构、惠州钢构、钢构、惠州建筑、建筑
盐城市松源智能环保科技有限公司专业从事板链输送线,悬挂链输送线,地轨输送线,通用机械及零部件,涂装非标设备,除尘器等设备的研发,设计,制造,安装,设备齐全,检测手段完善,生产经验丰富,欢迎来电咨询.
温江区金丝楠园艺场主要供应金丝楠木（桢楠）苗木。是全国较大的金丝楠（桢楠）苗木基地。兼营其他乔木、灌木、彩叶树种、盆景花卉，苗木供应，技术支持。
河北瀚东管道制造有限公司
教育项目众多，但是在任何的教育项目发展中，早教是非常重要的一种，但是早教项目的研究和发展，也已经研究出亲子托育教育项目是非常有发展特色的，也是现在行业发展中的重点方向，因为亲子托育可以提高孩子们的学习基础，也可以增加亲子之间的互动，更是让一些年轻的父母们学会如何培养孩子，贝斯缇尔亲子托育是现在行业中有名的托育品牌，所以人们想要知道贝斯...。
很多人想要智慧之选一家餐饮店，考虑到同质化竞争问题，很多创业者想要选择一个与众不同的餐饮品牌加盟，美石记石锅拌饭具有浓浓的地域性特色，满满的地方风情，在餐饮行业独树一帜，具有广阔的市场空间，美石记石锅拌饭加盟需要多少钱，这是个投入不是很多的经营项目，大概数万元就能够拥有一个合格的开始，任何行业的发展都是从积累人气开始的，毕竟市场的需求...。
开店做生意需要多少钱，想要开店做生意，首先要选择合适的项目，小编觉得智慧之选暴走鸡排就很不错，暴走鸡排采用特殊的制作方法，做出的美食种类非常丰富，而且口味也很好，受到无数消费者的高度喜爱，选择这样有实力有特色的项目，能够轻松发展事业，开店做生意需要多少钱，暴走鸡排只需要投入1万到5万元的资金，就能够让加盟商开店，总部会结合加盟商的实力...。
杜总、刘总和陈总是多年同事，都有份稳定并且工资可观的工作，因为都有着相同的创业梦，成了志同道合的好友，在对佰信公司及相关业务进行了全面了解后，利用周末休息时间驱车数十小时从山东来到长沙总部实地考察，达成了友好合作，无论是我们父母那一辈，还是我们这一辈，都知道创业可以改变一个人的命运，尤其是在如今互联网时代，更是有很多的机遇，让我们可以...。
雷锋网消息，根据PassMark最新公布的全球CPU市场份额对比，截至7月1日，也就是刚刚开始的2017年第三季度，AMD凭借最新产品Ryzen系列处理器的强势表现，市场份额一度大涨至31%，但随着7月2日数据更新，这一数字又回落至23.9%，我们知道，AMD长期以来在CPU领域一直被英特尔压着打，市场份额更是遥遥落后，不过，随着近几...。
前段时间，威马汽车宣布已完成科创板上市辅导，回顾过去一年，科创板似乎成为了造车新势力们抢滩登陆的一块宝地，截至去年10月，已有包括恒大、吉利、东风、威马、零跑、天际、哪吒、爱驰、奇点等9家企业宣布计划于2021年登陆科创板，其中不少已启动科创板上市辅导，那么问题来了，为何造车新势力们都偏爱科创板，科创板即科技创新板，于2019年6月1...。
语音播放文章内容由深声科技提供技术支持您的浏览器不支持audio元素，雷锋网按，图片来自网络，雷锋网按，在上周的TechCrunchDisrupt大会上，Zoox联合创始人JesseLevinson与Uber首席产品官ManikGupta以及大名鼎鼎的SebastianThrun，现任KittyHawk飞行汽车公司CEO，就移动出行...。
智能手机行业发展到今天，产品的复杂度越来越高，用户对产品体验的要求越来越高，而厂商对软硬件协同性的要求也越来越高，然而，相对于苹果的iPhone来说，Android手机阵营要面临的一个问题是，如何在Google所推出的Android操作系统的大框架下尽可能地提升智能手机产品的流畅体验——这也是很多厂商在现有Android系统的基础上竭...。
小米发布透明电视，售价49999元雷军称要做高端电视第一8月11日晚间消息，在小米十周年演讲中，雷军发布了一款小米透明电视，雷军说，小米电视已经中国第一，但在高端电视上也要实现中国第一，目前小米正在主攻高端电视，此次发布的小米透明电视，采用55英寸透明OLED，支持120Hz刷新率，售价49999元，也创下小米电视售价新高，对于这个价...。
尽管AWS已经是该领域绝对的第一，但是它仍然像个，搅局，的鲶鱼，不断刺激着行业向更远处发展，无论是亚马逊AWS的CEOAndyJassy的3小时超长演讲，还是AWS云计算首席企业战略顾问张侠博士的会后交流，亦或是AWS首席布道师JeffBarr与雷锋网的，私密，对话，都在释放这个信号，的确，云计算的世界需要的不是统治一切的工具，需要的...。
雷锋网按，新技术会再给开发商们开一扇门吗，在许多业内专家看来，自动驾驶汽车必将统治未来已经是板上钉钉了，有人甚至认为这些次世代车辆会成为我们的新客厅，事实上，他们给出的结论不够精准也不太严密，如果非要给自动驾驶找个参照物，那它与移动设备进行比较更加合适，如果要在这个语境中打个比喻，那么，操作系统，才是能定义什么是自动驾驶汽车，以及自动...。
新SoC的发布节点，直接左右旗舰手机的发布周期，刚在12月发布的骁龙888，不但打破了历史规律，还带着CPU、GPU和AI性能的显著提升，和小米11一起拉开了小米新十年的序幕，小米11首批35万台之后，已多次连续放量，不少人已经体验到2021年的新旗舰，一人内测，全民公测，的酷安上，小米11的关键词已霸榜许久，骁龙888注定会是20...。
互联网行业裁员潮还在继续，游戏直播行业也同样动荡，近日游戏直播领域两家头部企业虎牙和斗鱼，相继传出大裁员的消息，4月24日，消息，据Tech星球报道，虎牙近日进行了一轮整体大裁员，国际国内业务均有涉及，国际化业务受创最为严重，运营部门裁员比例高达70%，导致出海产品Nimo运营团队大幅收缩，其他部门裁员比例50%；国内业务团队也...。
2014年博士毕业那年，摆在魏星面前的无非三条路，一，去美国Cadence、Synopsys或Mentor工作，像他在港中文的大多数同学一样；二，找一家互联网企业上班，像他以前在清华EDA实验室的许多师兄师姐一样；三，自己创业，留在国内继续研究EDA，最终，这位天之骄子选择了当时对他来说性价比最低、也是最艰难的第三条路——创业，与师兄...。
当数字化转型升级逐渐成为商业共识之际，也意味着一场持久战的开启，近日，休闲零食第一股来伊份公布2020年度业绩预告，预计全年亏损超过7000万，这是自公司2016年以来上市首亏，来伊份在公告中表示，亏损的主要原因是加大了人才的引进、信息化建设的投入以及品牌升级，根据公开信息，可查询到人才引进主要集中在产品升级、智慧零售、信息科技、加盟...。
工业革命不得不等候金融革命，英国学者、诺贝尔经济学奖得主约翰·希克斯的这句原话，道尽了金融与社会经济变迁的规律，历次消费升级伴随的产业结构的演进变化中，银行都发挥了极其重要的作用，17世纪末，英国依靠中央银行和商业银行体系提供资本燃料和动力，以蒸汽机为标志的工业革命，其实是金融革命的产物，20世纪初，摩根、卡内基等一众金融大鳄掀起...。
独家获悉，蚂蚁集团副总裁、支付宝用户事业部总经理李娟，花名，唐方，现已离职，目前公司组织架构中已查询不到其相关信息，李娟下一步的方向尚未确定，公开资料显示，李娟曾担任过支付宝用户运营及个人业务部总经理、支付宝用户服务运营负责人，参与过，收钱码，、，集五福，等产品和活动的运营，2023年，蚂蚁集团进行高管大轮岗，李娟在原有职务的基...。
