英特尔携手Cloudera 驱动未来数据分析与人工智能发展

马子雅表示，英特尔在数据分析应用和人工智能方面的承诺从来没有改变，希望给客户最佳的用户体验。因此，英特尔工作主要集中在三个方面：一是通过硬件的升级和软件优化来推进技术民主化；二是为新兴的需求提供新兴的解决方案，比如说最近一两年变得越来越火的深度学习；三是跟客户合作，推动创新，为客户解决最新、最复杂的问题，来帮助客户最大化其商业价值。

在万物智能互联时代，数以亿计的智能互联设备及其产生的数据洪流带来了产业的数字化变革。越来越多的企业希望借助机器学习与深度学习，从海量数据中获取切实可行的洞察以指导企业决策、创造更多价值。

作为全球计算力创新的引领者，英特尔在数据分析与人工智能领域深耕已久，希望借助性能强劲、安全可靠、且能满足细分应用市场多样化需求的计算、存储和网络基础设施平台，以端到端的全栈实力使企业用户能获得最好的数据洞察力，进而加速实现技术的民主化并释放更多创新可能。

日前，英特尔公司软件与服务事业部副总裁兼系统技术和优化部门大数据技术总监马子雅分享了英特尔在数据分析及人工智能领域的最新技术创新、英特尔与生态系统及开源社区间的紧密合作，以及相应解决方案在中国市场的应用情况。会后，马子雅在与Cloudera联合创始人兼首席技术官Amr Awadallah针对数据分析与人工智能的技术发展与未来应用进行了深入的探讨。

马子雅表示，英特尔在数据分析应用和人工智能方面的承诺从来没有改变，希望给客户最佳的用户体验。因此，英特尔工作主要集中在三个方面：一是通过硬件的升级和软件优化来推进技术民主化；二是为新兴的需求提供新兴的解决方案，比如说最近一两年越来越火的深度学习；三是跟客户合作，推动创新，为客户解决最新、最复杂的问题，来帮助客户最大化其商业价值。

说到硬件升级、软件优化来帮助推进技术民主化，英特尔也采取了一系列的措施和手段。例如刚刚宣布推出至强可扩展处理器，它不仅实现了性能、可靠性和可管理性方面的全面提升，也为企业提供了丰富的平台功能创新。在深度学习领域，相比3年前未经优化的服务器系统，英特尔至强可扩展处理器结合可加快交付人工智能服务的软件优化，可实现113倍性能提升。

此外，英特尔与Cloudera合作对Hbase 非堆存储的读操作进行优化，将其性能提升到5.6倍，“这个优化被阿里巴巴使用，它在'双11'的时候把HBase的Throughput提升了30%，它的吞吐量提升了30%，也是没有增加任何硬件成本，纯粹只是通过软件优化来做到的。”

除了在大数据和分析应用方面进行技术民主化，英特尔在人工智能相关的软件优化及开源技术创新方面也提供了有力支撑。

比如在硬件方面，英特尔希望给客户多种选择，而不是局限于某一种硬件，因此现在至强、至强融核、FPGA，未来还会有Nervana的Lake Crest；在深度学习的框架层面，英特尔将优化过的数学核心函数库放到流行的深度学习框架里面去，比如说Neon、Caffe、TensorFlow、Torch、Theano等等，最终来提升它们的性能，客户可以直接使用这些优化过的深度学习框架；在应用程序层面，英特尔则让用户可以比较简单高效生成深度学习的解决方案，不需要太多了解底层具体的细节。

有关新兴工作负载方面，英特尔发现客户在深度学习领域面临的真正痛点在四个方面：一是希望人工智能能够利用已有的海量数据分析平台；二是发现客户要求把深度学习在一个集群上进行扩展；三是客户希望能做深度学习的时候不要花费那么高昂的代价，部署一个非常昂贵的新集群，而是利用已有的集群，直接在上面添加深度学习的功能；四是高性能，比如说要求缩短模型训练的周期。

去年年底，为了降低企业用户使用深度学习进行数据分析和构建人工智能应用的门槛，英特尔还开源了基于 Apache Spark 的分布式深度学习框架BigDL，为整个数据分析和机器学习过程提供比现有框架更加统一和集成化的体验，进一步帮助用户减少端到端的学习延迟，实现总体拥有成本的降低。

BigDL是在Spark的基础上构建了分布式深度学习的框架，它将以往的深度学习框架同Spark结合之后，优势主要集中在：第一，它本身的深度学习功能是与已有的深度学习框架功能，所以深度学习的功能非常丰富；第二，它能够无缝的跟Spark、Hadoop进行结合，与分布式数据、海量的数据进行结合；第三，能够非常自然地利用Spark的可扩展性做到数据并行；第四，因为不需要再去构建一个新的集群，可以利用BigDL在已有的集群上直接生成深度学习，所以成本非常低；第五，在性能方面，英特尔利用优化过的数学核心函数库，以及多线性优化方法来提升其的性能，尤其是在至强服务器上，它的性能非常高。

在帮助客户解决问题方面，英特尔跟银联和Cloudera的合作，帮助客户做了一个端到端的深度学习的流水线，这条流水线是建立在BigDL和Spark之上。除了跟最终端的客户合作，英特尔也非常注意跟合作伙伴进行合作。

Cloudera联合创始人兼首席技术官Amr Awadallah

作为英特尔的合作伙伴Cloudera的联合创始人兼首席技术官，Amr Awadallah表示，能够更好满足用户需求的解决方案会得到更好的应用，“作为数据管理软件与服务提供商，在数据分析解决方案的构建中，我们一直与英特尔有着紧密的合作。希望借助双方在硬件创新、软件优化、行业洞察等多个方面的整合优势，持续地为企业数据分析、人工智能等提供性能最好、最稳定安全的应用环境。”

英特尔公司软件与服务事业部副总裁兼系统技术和优化部门大数据技术总监马子雅

目前，双方合作推出的数据分析解决方案已经在金融、电信、交通等不同行业获得成功部署，印证了双方在数据分析领域的强劲实力。英特尔公司软件与服务事业部副总裁兼系统技术和优化部门大数据技术总监马子雅表示：“未来，我们还将持续创新、着力构建广泛的生态环境，与Cloudera等生态合作伙伴建立更深入的合作关系，共同推动多元应用的开发，从而帮助企业实现业务上的变革和创新，驱动未来数据分析与人工智能的进一步发展。”

（编辑：济南站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!