0
本文作者: 李雨晨 | 2017-08-08 17:00 |
雷鋒網(wǎng)消息, 近日開源軟件 Apache Hadoop 的發(fā)行商 Cloudera 與英特爾在京舉辦媒體溝通會, Cloudera 與英特爾的戰(zhàn)略專家、架構(gòu)師、開發(fā)人員和分析師參與了會議,就英特爾與 Cloudera 的合作經(jīng)歷與英特爾在開源社區(qū)里的合作和雷鋒網(wǎng)在內(nèi)的媒體進(jìn)行了溝通。
雷鋒網(wǎng)了解到, Cloudera 的主要業(yè)務(wù)是出售大數(shù)據(jù)處理開源軟件 Apache Hadoop 的發(fā)行版,為企業(yè)客戶部署基于 Hadoop 的大數(shù)據(jù)基礎(chǔ)架構(gòu)。2014年,英特爾斥資7.42億美元入股 Cloudera ,當(dāng)時 Cloudera 的估值一度達(dá)到41億美元,是美國估值第二高的大數(shù)據(jù)公司。此后英特爾繼續(xù)追加投資,到今年1月底,英特爾對 Cloudera 的投資額累計達(dá)到7.665億美元,占股22%,是后者最大的機(jī)構(gòu)股東。
媒體交流會上, Cloudera 聯(lián)合創(chuàng)始人兼首席技術(shù)官 Amr Awadallah 針對人工智能和機(jī)器學(xué)習(xí)發(fā)表了演講,他認(rèn)為人類的進(jìn)程就是一個自動化的過程,現(xiàn)在人類處于決策自動化的階段,這是我們的終極目標(biāo),機(jī)器學(xué)習(xí)的范疇則遠(yuǎn)遠(yuǎn)大于深度學(xué)習(xí)。
而英特爾公司軟件與服務(wù)事業(yè)部副總裁兼系統(tǒng)技術(shù)和優(yōu)化部門大數(shù)據(jù)技術(shù)總監(jiān)馬子雅則分享了英特爾在開源方面做的努力,以及與開源社區(qū)間的合作。
馬子雅回憶到,作為 AI 民主化戰(zhàn)略的重要實(shí)踐之一,除了和 Cloudera 合作,為企業(yè)用戶部署 Hadoop 的大數(shù)據(jù)基礎(chǔ)架構(gòu)之外。2016年12月30日,英特爾開源了基于 Apache Spark 的分布式深度學(xué)習(xí)框架 BigDL 。
BigDL 0.1 版本主要專注在怎樣提高深度學(xué)習(xí)在數(shù)據(jù)科學(xué)家中的易用性,比如對組件的支持、對 Notebook 可視化的編程的環(huán)境支持和谷歌 Tensorboard 可視化的支持,以及更多的 RNN 功能的支持。做到更加健壯、容易擴(kuò)展以及對大規(guī)模、分布式訓(xùn)練的支持,是 BigDL 0.1 版本的主要功能體現(xiàn)。
正因?yàn)?BigDL 是跑在 Spark 上的深度學(xué)習(xí)的框架,和大數(shù)據(jù)的架構(gòu)和云的架構(gòu)高度契合,所以它在包括AWS、微軟Azure、阿里云、Cloudera的 Data Science workbench、DataBricks 以及 Lightbend 等在內(nèi)的重要公有云平臺、大數(shù)據(jù)分析平臺上都得到了非常好的支持。這些網(wǎng)站也提供了各種教程,幫助用戶在自己的大數(shù)據(jù)平臺或云服務(wù)上來使用 BigDL 。
英特爾首席架構(gòu)師戴金權(quán)也曾在近日透露,BigDL 0.2版本即將發(fā)布。BigDL 0.2提供了更加豐富、更加易用的分布式深度學(xué)習(xí)的支持,包括對功能性的 API 的支持。新版本還支持對 TensorFlow 的模型的導(dǎo)入以及 TensorFlow 模型定義。
同時,雷鋒網(wǎng)了解到,英特爾已成為 Linux、Tizen、Yocto 最大貢獻(xiàn)者之一,同時與 Google 在 Android 開發(fā)領(lǐng)域已有很多合作, Linux 內(nèi)核 3.4 版本中,英特爾成為第一貢獻(xiàn)者。此外,英特爾也是 Hadoop 社區(qū)的重要貢獻(xiàn)者之一,在 Open Stack 云平臺管理項(xiàng)目中,英特爾作為提供底層硬件平臺和軟件優(yōu)化的合作伙伴也參與其中。
就與 Cloudera的合作而言,目前雙方推出的數(shù)據(jù)分析解決方案已經(jīng)在金融、電信、交通等不同行業(yè)進(jìn)行應(yīng)用。馬子雅表示:“未來與 Cloudera 等生態(tài)合作伙伴建立更深入的合作關(guān)系,共同推動多元應(yīng)用的開發(fā),從而幫助企業(yè)實(shí)現(xiàn)業(yè)務(wù)上的變革和創(chuàng)新,驅(qū)動未來數(shù)據(jù)分析與人工智能的進(jìn)一步發(fā)展?!?/p>
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。