0
本文作者: 李雨晨 | 2017-08-08 17:00 |
雷鋒網消息, 近日開源軟件 Apache Hadoop 的發(fā)行商 Cloudera 與英特爾在京舉辦媒體溝通會, Cloudera 與英特爾的戰(zhàn)略專家、架構師、開發(fā)人員和分析師參與了會議,就英特爾與 Cloudera 的合作經歷與英特爾在開源社區(qū)里的合作和雷鋒網在內的媒體進行了溝通。
雷鋒網了解到, Cloudera 的主要業(yè)務是出售大數據處理開源軟件 Apache Hadoop 的發(fā)行版,為企業(yè)客戶部署基于 Hadoop 的大數據基礎架構。2014年,英特爾斥資7.42億美元入股 Cloudera ,當時 Cloudera 的估值一度達到41億美元,是美國估值第二高的大數據公司。此后英特爾繼續(xù)追加投資,到今年1月底,英特爾對 Cloudera 的投資額累計達到7.665億美元,占股22%,是后者最大的機構股東。
媒體交流會上, Cloudera 聯合創(chuàng)始人兼首席技術官 Amr Awadallah 針對人工智能和機器學習發(fā)表了演講,他認為人類的進程就是一個自動化的過程,現在人類處于決策自動化的階段,這是我們的終極目標,機器學習的范疇則遠遠大于深度學習。
而英特爾公司軟件與服務事業(yè)部副總裁兼系統技術和優(yōu)化部門大數據技術總監(jiān)馬子雅則分享了英特爾在開源方面做的努力,以及與開源社區(qū)間的合作。
馬子雅回憶到,作為 AI 民主化戰(zhàn)略的重要實踐之一,除了和 Cloudera 合作,為企業(yè)用戶部署 Hadoop 的大數據基礎架構之外。2016年12月30日,英特爾開源了基于 Apache Spark 的分布式深度學習框架 BigDL 。
BigDL 0.1 版本主要專注在怎樣提高深度學習在數據科學家中的易用性,比如對組件的支持、對 Notebook 可視化的編程的環(huán)境支持和谷歌 Tensorboard 可視化的支持,以及更多的 RNN 功能的支持。做到更加健壯、容易擴展以及對大規(guī)模、分布式訓練的支持,是 BigDL 0.1 版本的主要功能體現。
正因為 BigDL 是跑在 Spark 上的深度學習的框架,和大數據的架構和云的架構高度契合,所以它在包括AWS、微軟Azure、阿里云、Cloudera的 Data Science workbench、DataBricks 以及 Lightbend 等在內的重要公有云平臺、大數據分析平臺上都得到了非常好的支持。這些網站也提供了各種教程,幫助用戶在自己的大數據平臺或云服務上來使用 BigDL 。
英特爾首席架構師戴金權也曾在近日透露,BigDL 0.2版本即將發(fā)布。BigDL 0.2提供了更加豐富、更加易用的分布式深度學習的支持,包括對功能性的 API 的支持。新版本還支持對 TensorFlow 的模型的導入以及 TensorFlow 模型定義。
同時,雷鋒網了解到,英特爾已成為 Linux、Tizen、Yocto 最大貢獻者之一,同時與 Google 在 Android 開發(fā)領域已有很多合作, Linux 內核 3.4 版本中,英特爾成為第一貢獻者。此外,英特爾也是 Hadoop 社區(qū)的重要貢獻者之一,在 Open Stack 云平臺管理項目中,英特爾作為提供底層硬件平臺和軟件優(yōu)化的合作伙伴也參與其中。
就與 Cloudera的合作而言,目前雙方推出的數據分析解決方案已經在金融、電信、交通等不同行業(yè)進行應用。馬子雅表示:“未來與 Cloudera 等生態(tài)合作伙伴建立更深入的合作關系,共同推動多元應用的開發(fā),從而幫助企業(yè)實現業(yè)務上的變革和創(chuàng)新,驅動未來數據分析與人工智能的進一步發(fā)展。”
雷峰網原創(chuàng)文章,未經授權禁止轉載。詳情見轉載須知。