技術(shù)
導(dǎo)讀:企業(yè)數(shù)據(jù)量不斷攀升的今天,成就了大數(shù)據(jù)的發(fā)展。隨著企業(yè)數(shù)據(jù)量的攀升,大數(shù)據(jù)時(shí)代已經(jīng)全面爆發(fā),而企業(yè)用戶對(duì)大數(shù)據(jù)的認(rèn)識(shí)日漸成熟,由被動(dòng)承受轉(zhuǎn)向主動(dòng)“掘金”。企業(yè)該如何接受大數(shù)據(jù)的洗禮呢?
企業(yè)數(shù)據(jù)量不斷攀升的今天,成就了大數(shù)據(jù)的發(fā)展。隨著企業(yè)數(shù)據(jù)量的攀升,大數(shù)據(jù)時(shí)代已經(jīng)全面爆發(fā),而企業(yè)用戶對(duì)大數(shù)據(jù)的認(rèn)識(shí)日漸成熟,由被動(dòng)承受轉(zhuǎn)向主動(dòng)“掘金”。企業(yè)該如何接受大數(shù)據(jù)的洗禮呢?大數(shù)據(jù)發(fā)展何去何從,企業(yè)用戶如何掘金?在日前英特爾主辦的“芯動(dòng)大數(shù)據(jù) 智領(lǐng)大機(jī)遇”英特爾大數(shù)據(jù)論壇中,IDC中國(guó)企業(yè)級(jí)系統(tǒng)與軟件研究部高級(jí)研究經(jīng)理周震剛先生發(fā)表主題演講,展望大數(shù)據(jù)未來。
IDC將大數(shù)據(jù)、云和移動(dòng)以及社交這四個(gè)主題當(dāng)做未來IT的主要方向。IDC中國(guó)從去年開始對(duì)大數(shù)據(jù)市場(chǎng)做了深入研究。IDC的大數(shù)據(jù)定義是四個(gè)“V”(如上圖),大數(shù)據(jù)不僅僅指數(shù)據(jù)量的龐大,主要包括四個(gè)方面,高容量的數(shù)據(jù),數(shù)據(jù)類型多樣化,持續(xù)性不斷刷新的數(shù)據(jù),以及為用戶帶來最終的價(jià)值。相應(yīng)的,大數(shù)據(jù)之于整個(gè)IT市場(chǎng)包括了四個(gè)層面: IT基礎(chǔ)架構(gòu)層面,包括服務(wù)器、存儲(chǔ)、網(wǎng)絡(luò)、I/O等等方面的硬件的設(shè)施以及相關(guān)的基礎(chǔ)架構(gòu)軟件,還有上層數(shù)據(jù)的組織和管理,更上層對(duì)數(shù)據(jù)的組織,以及更上層的分析和挖掘的市場(chǎng),包括對(duì)最終用戶提供的最上層的決策的支持,數(shù)據(jù)展現(xiàn)的市場(chǎng)。
2010年全球大數(shù)據(jù)以及相關(guān)的硬件、軟件和服務(wù)市場(chǎng),大概是30億美元以上的市場(chǎng),IDC對(duì)大數(shù)據(jù)市場(chǎng)未來的預(yù)測(cè)是到 2015年整個(gè)市場(chǎng)將超過170億美元,平均增長(zhǎng)速度每年超過50%。同時(shí),IDC對(duì)大數(shù)據(jù)有如下十大預(yù)測(cè):
1、在未來兩三年當(dāng)中,大數(shù)據(jù)的平臺(tái)Hadoop會(huì)有一個(gè)很明顯的商業(yè)化的過程。
2、在2006、2007年的時(shí)候,很早期的Hadoop項(xiàng)目也面臨著種種挑戰(zhàn),也就是說這頭大象在跑的過程中也遇到一些障礙,值得我們?cè)谖磥黻P(guān)注。
3、Hadoop是完全開源的市場(chǎng),開源的市場(chǎng)很可能只是一個(gè)完全免費(fèi)的市場(chǎng),和免費(fèi)競(jìng)爭(zhēng)并不是不可能的,另外在免費(fèi)的市場(chǎng)帶來的機(jī)會(huì),絕不僅僅是免費(fèi)的一小塊市場(chǎng)。
4、大數(shù)據(jù)會(huì)帶來更多的軟件公司之間的收購(gòu)。大數(shù)據(jù)軟件市場(chǎng)的生態(tài)系統(tǒng)有很多類型的軟件廠商,包括傳統(tǒng)的關(guān)聯(lián)數(shù)據(jù)庫(kù)廠商,以及多維展現(xiàn)做分析的軟件廠商,對(duì)Hadoop分析包括管理,包括Hadoop應(yīng)有的廠商,我們不太熟悉的公司很可能在未來被大公司所并購(gòu)。
5、在Appliance的市場(chǎng),包括傳統(tǒng)的DataWareHouse的時(shí)候,還有NoSQLAppliance,未來有兩個(gè)方向,一是更為開放的架構(gòu),通過開放的架構(gòu)減低自己的成本,另外也有很多企業(yè)級(jí)的廠商會(huì)采購(gòu)很多打包的產(chǎn)品,實(shí)現(xiàn)它的功能,這種Appliance Server實(shí)際上就是未來的趨勢(shì)之一。
6、大數(shù)據(jù)將在未來一兩年從我們看到的傳統(tǒng)的互聯(lián)網(wǎng)和電信方面的應(yīng)用,現(xiàn)在看到大數(shù)據(jù)都集中在互聯(lián)網(wǎng),現(xiàn)在看到聯(lián)通、電信也在著手做很多大數(shù)據(jù)的開發(fā),未來幾年我們將會(huì)看到這個(gè)大象逐漸向更多行業(yè)發(fā)展。
7、大數(shù)據(jù)創(chuàng)造新的細(xì)分市場(chǎng)。在數(shù)據(jù)未來多種多樣的情況下,可能有些統(tǒng)一的信息訪問平臺(tái)的細(xì)分市場(chǎng),這個(gè)細(xì)分市場(chǎng)用來把大數(shù)據(jù)做統(tǒng)一管理和分析組件。
8、打包的大數(shù)據(jù)行業(yè)分析應(yīng)用出現(xiàn)。從傳統(tǒng)概念來講,大數(shù)據(jù)太復(fù)雜了,無法形成打包好的分析應(yīng)用,但是在未來幾年中,某一個(gè)行業(yè)的應(yīng)用會(huì)形成一定的共性,將會(huì)有廠商根據(jù)行業(yè)的分析應(yīng)用,打包好一些分析的應(yīng)用,基于大數(shù)據(jù)的分析應(yīng)用推廣到行業(yè)方面,這不僅是做數(shù)據(jù)分析的專長(zhǎng),也需要很多行業(yè)方面的專業(yè)專長(zhǎng),將會(huì)有很多行業(yè)的ISV加入到大數(shù)據(jù)行列中,基于大數(shù)據(jù)平臺(tái)開展他們的開發(fā)應(yīng)用。
9、大數(shù)據(jù)推動(dòng)基礎(chǔ)架構(gòu)向Scale-out發(fā)展。結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)方式不一樣,更多的大數(shù)據(jù)采用分析存儲(chǔ)的方式更有效率。在對(duì)數(shù)據(jù)進(jìn)行處理的時(shí)候,因?yàn)榇髷?shù)據(jù)的類型比較復(fù)雜,數(shù)據(jù)量比較大,可以通過分布式的處理方式把應(yīng)用復(fù)雜分散到分布式系統(tǒng)的各個(gè)節(jié)點(diǎn)上,而傳統(tǒng)的數(shù)據(jù)處理將是運(yùn)算能力非常強(qiáng)、CPU主頻非常高的一臺(tái)機(jī)器來處理,而不是大數(shù)據(jù)這種多個(gè)節(jié)點(diǎn)、多個(gè)CPU核數(shù)來處理,這代表了大數(shù)據(jù)時(shí)代發(fā)展方向從Scale-up轉(zhuǎn)向Scale-out。
10、中國(guó)成為全球最重要的大數(shù)據(jù)市場(chǎng)之一。服務(wù)器的出貨量,去年中國(guó)126萬臺(tái),全球第二。而存儲(chǔ)方面兩EB大概兩千個(gè)PB的規(guī)模,只是服務(wù)器端存儲(chǔ)出貨量也是全球第二,所有數(shù)據(jù)都說明,無論是客戶端還是企業(yè)級(jí),中國(guó)都是非常重要的市場(chǎng),這勢(shì)必誕生新的模式來讓全球認(rèn)識(shí)中國(guó)的重要性。
隨著物聯(lián)網(wǎng)、云計(jì)算等技術(shù)的發(fā)展,未來數(shù)據(jù)量將可能比預(yù)測(cè)的更大。這些數(shù)據(jù)量?jī)H僅是數(shù)據(jù),并不能解決問題,它要從數(shù)據(jù)變成信息、變成智能、變成商業(yè)價(jià)值,這才能夠體現(xiàn)出真正的大數(shù)據(jù)的價(jià)值。大數(shù)據(jù)給市場(chǎng)帶來的將是更廣泛的機(jī)會(huì),對(duì)于中國(guó)來說這個(gè)市場(chǎng)是非常有前景的。各行業(yè)的客戶和各行業(yè)的開發(fā)商也應(yīng)該在大數(shù)據(jù)市場(chǎng)抓住機(jī)會(huì),借助自己的優(yōu)勢(shì)創(chuàng)造更多的價(jià)值。