大數(shù)據(jù)，被認(rèn)為是繼云計算之后，IT領(lǐng)域的又一大浪潮。對于各大IT廠商而言，布局大數(shù)據(jù)意味著在未來的競爭中占據(jù)主動。這點連芯片廠商英特爾也不例外，在花費巨資入股大數(shù)據(jù)領(lǐng)導(dǎo)廠商Cloudera之后，英特爾公司攜手Cloudera共同亮相中國市場，希望通過聯(lián)合兩家公司的優(yōu)勢，共同開拓中國市場，為中國用戶提供最好的大數(shù)據(jù)解決方案。

英特爾吳甘沙：讓大數(shù)據(jù)說人話

作為芯片廠商，英特爾公司對于大數(shù)據(jù)有著前所未有的重視。在英特爾看來，大數(shù)據(jù)需要強大的計算能力和開放的架構(gòu)平臺來支撐，英特爾的目標(biāo)就是讓大數(shù)據(jù)的應(yīng)用能夠盡快走向平民化。“要讓大數(shù)據(jù)說人話，讓數(shù)據(jù)工具與跟我們的人、終端實現(xiàn)天人合一。” 英特爾中國研究院院長吳甘沙表示道。

在英特爾看來，大數(shù)據(jù)的發(fā)展也符合摩爾定律，指數(shù)級的增長會帶來一系列的連鎖效應(yīng)，而大數(shù)據(jù)將會是當(dāng)前指數(shù)社會的蛋白質(zhì)，在將來會成為社會的物質(zhì)基礎(chǔ)。吳甘沙表示道：“有人說大數(shù)據(jù)是新的原材料，有人說大數(shù)據(jù)是新的原油，有人說大數(shù)據(jù)是新的資產(chǎn)，甚至是新的貨幣。這些比喻都反應(yīng)出數(shù)據(jù)光大沒有用，而是需要挖掘出它們的價值。數(shù)據(jù)洪流帶來的挑戰(zhàn)首先是思維的改變，我們需要用數(shù)據(jù)全集的完備性去替代過去的數(shù)據(jù)采樣，這樣我們可以避免小概率事件被過濾；第二，數(shù)據(jù)價值和壽命成反比，當(dāng)數(shù)據(jù)剛剛產(chǎn)生時，價值往往是最大的，所以數(shù)據(jù)的實時分析以及和歷史結(jié)合會是大數(shù)據(jù)又一大挑戰(zhàn)；第三就是算法，傳統(tǒng)算法往往會把小概率事件過濾掉，現(xiàn)在要我們用分期算法去權(quán)衡精確性和可擴展性。”

圖一：英特爾中國研究院院長吳甘沙。

在商業(yè)社會發(fā)展到今年，數(shù)據(jù)洪流所帶來的效應(yīng)正在日益顯現(xiàn)，對于數(shù)據(jù)價值的挖掘已經(jīng)不僅僅是某些特殊行業(yè)、特殊公司的“專利”，如何應(yīng)對數(shù)據(jù)洪流、如何利用數(shù)據(jù)洪流、如何利用數(shù)據(jù)技術(shù)來推動業(yè)務(wù)必然會成為現(xiàn)在以及將來所有企業(yè)需要面臨的挑戰(zhàn)。英特爾的大數(shù)據(jù)平民化觀點就是在這種趨勢下產(chǎn)生。吳甘沙表示：“大數(shù)據(jù)應(yīng)用的平民化就是指要降低數(shù)據(jù)分析的門檻，把高級的數(shù)據(jù)分析功能平民化，使得它能夠邁入主流的應(yīng)用，使得它能夠?qū)崿F(xiàn)規(guī)模的經(jīng)濟效應(yīng)。”

英特爾針對大數(shù)據(jù)的策略就是提供強大的且能夠進行軟件定義的計算力，并在此基礎(chǔ)上攜手盡可能多的合作伙伴，打造出一個開放的，激勵創(chuàng)新的大數(shù)據(jù)平臺。“我們提出了大數(shù)據(jù)的分析框架，在最底層的是我們的開放架構(gòu)基礎(chǔ)設(shè)施，而且是可以實現(xiàn)軟件定義計算、存儲和網(wǎng)絡(luò)的基礎(chǔ)設(shè)施，我們把它們做成開放式的構(gòu)建模塊，使得整個行業(yè)進入大數(shù)據(jù)創(chuàng)新領(lǐng)域的門檻得以降低，讓更多的創(chuàng)新者能夠一起參與，一起構(gòu)建標(biāo)范性的解決方案，再把它變成可擴展的參考架構(gòu)，使其能夠被復(fù)制到每一個行業(yè)，每一家企業(yè)中去。”

英特爾還介紹了其大數(shù)據(jù)研究方面的布局，通過與世界領(lǐng)先大學(xué)緊密合作，加快大數(shù)據(jù)研究到應(yīng)用的轉(zhuǎn)變過程。據(jù)悉，英特爾目前跟卡內(nèi)基梅隆、MIT、斯坦福等大學(xué)進行緊密合作，研究方向包括Spark、Graphlab、開源列式數(shù)據(jù)庫、Datahub、復(fù)雜分析算法、機器深度學(xué)習(xí)等大數(shù)據(jù)領(lǐng)域。

Hadoop之父Doug：與英特爾合作提供更多大數(shù)據(jù)工具

Hadoop之父、Apache Hadoop社區(qū)的發(fā)起者和領(lǐng)導(dǎo)者，現(xiàn)任Cloudera公司首席架構(gòu)師的Doug Cutting作為大數(shù)據(jù)領(lǐng)域的意見領(lǐng)袖，認(rèn)為大數(shù)據(jù)在根本性改變社會，現(xiàn)在需要將所有數(shù)據(jù)考慮在其中，隨著越來越多人開始認(rèn)識到大數(shù)據(jù)的價值，并且開始采用大數(shù)據(jù)工具，英特爾與Cloudera可以提供更多的大數(shù)據(jù)工具給用戶，以彌補用戶在項目中間的空缺。

圖二：Hadoop之父、Apache Hadoop社區(qū)的發(fā)起者和領(lǐng)導(dǎo)者，現(xiàn)任Cloudera公司首席架構(gòu)師的Doug Cutting

Doug Cutting表示：“手腕設(shè)備、機器、各種傳感器、攝像頭等等，使用計算能力的這些設(shè)備無處不在、無所不在。這種趨勢會持續(xù)下去，越來越多的設(shè)備他們需要使用計算能力，同時產(chǎn)生更多的數(shù)據(jù)。數(shù)據(jù)是有價值的，了解到底這些設(shè)備處理什么樣的業(yè)務(wù)，能夠幫助完成什么工作，如果把數(shù)據(jù)收集起來，還可以把數(shù)據(jù)進行整合，然后就可以創(chuàng)造出來一個高清晰度的圖像，企業(yè)的業(yè)務(wù)到底是怎么樣進行的，這可以幫助我們的企業(yè)進一步改善和優(yōu)化流程，擴展發(fā)展。”

Doug Cutting還表示2006年他加入雅虎后開始Hadoop項目的早期研發(fā)時，就與英特爾開展了合作：“英特爾給我了我們一些技術(shù)支持，再經(jīng)過我們不斷的嘗試和試驗，才獲得了一些顛覆式的進展，重大的突破。”

據(jù)悉，隨著今年3月份英特爾斥資7.4億美元投資Cloudera，英特爾與Cloudera之間的合作就會更加緊密。也讓Doug Cutting在推動Cloudera公司及Apache Hadoop開源社區(qū)的技術(shù)創(chuàng)新上，能持續(xù)得到英特爾的支持：“我們期望能通過Cloudera與英特爾的合作，來為大家開發(fā)更多的大數(shù)據(jù)工具，實現(xiàn)更為豐富的功能，彌補各個創(chuàng)新項目的空缺和彼此間的差距，讓用戶能夠更有效地整合和利用數(shù)據(jù)，并從中獲益。”

“我們兩家公司三月份宣布合作后，五月份就把英特爾分發(fā)版的Hadoop中的領(lǐng)先技術(shù)和特性融合到了Cloudera分發(fā)版的Hadoop中，讓后者能對英特爾平臺實現(xiàn)充分優(yōu)化，”Cloudera公司副總裁苗凱翔最后補充道。

Cloudera：與英特爾共同開拓中國大數(shù)據(jù)市場

據(jù)悉，Cloudera公司于今年12月初正式進入中國市場。成立于2008年的Cloudera公司在短短六年時間就獲得了飛速發(fā)展，形成了全球大數(shù)據(jù)生態(tài)鏈，目前擁有1200多個合作伙伴，并且為全球培養(yǎng)了超過5萬名Hadoop專家。

Cloudera公司副總裁苗凱翔表示：“從大數(shù)據(jù)角度來講，中國市場擁有天然的環(huán)境，人口眾多、終端、網(wǎng)絡(luò)等帶來的數(shù)據(jù)非常之多。大數(shù)據(jù)概念進入中國市場已經(jīng)有好幾年了，但是大數(shù)據(jù)在中國的商用發(fā)展滯后美國大概兩年時間，尤其是部署和應(yīng)用狀態(tài)等方面。”

圖三：Cloudera公司副總裁苗凱翔 

苗凱翔表示Cloudera非�？粗嘏c英特爾的合作，他表示：“Cloudera在軟件層面和應(yīng)用場景上是領(lǐng)先的，Cloudera結(jié)合英特爾大數(shù)據(jù)底層架構(gòu)非常好，兩者結(jié)合是最好的搭檔，能夠為中國用戶帶來最有價值的大數(shù)據(jù)解決方案。除了技術(shù)合作外，雙方還會在智慧城市、平安城市、金融、電信等領(lǐng)域做共同的拓展。”