繼物聯(lián)網(wǎng)、云計算之后，“大數(shù)據(jù)”已迅速成為近期市場爭相傳誦的熱門科技概念。根據(jù)維基百科的定義，大數(shù)據(jù)是指無法在可承受的時間范圍內(nèi)用常規(guī)軟件工具進行捕捉、管理、處理的數(shù)據(jù)集合。從產(chǎn)業(yè)角度，常常把這些數(shù)據(jù)與采集它們的工具、平臺、分析系統(tǒng)一起被稱為 “大數(shù)據(jù)” 。

IDC認(rèn)為，某項技術(shù)要想成為大數(shù)據(jù)技術(shù)，必須滿足IBM所描述的三個 “V”：多樣性(variety)、大容量(volume)和時效性高(velocity)。多樣性是指數(shù)據(jù)應(yīng)包含結(jié)構(gòu)化的和非結(jié)構(gòu)化的數(shù)據(jù);大容量是指聚合在一起供分析的數(shù)據(jù)量必須是非常龐大的;時效性高則是指數(shù)據(jù)處理的速度必須很快。

在2011年，“大數(shù)據(jù)”的概念已經(jīng)賺足了人氣，IDC數(shù)字宇宙在今年6月的報告顯示，全球數(shù)據(jù)量在2011年已達(dá)到1.8ZB，在過去5年里增加了5倍，而到2015年將達(dá)到近8ZB。

2010年以來，全球IT巨頭紛紛通過收購大數(shù)據(jù)相關(guān)廠商來實現(xiàn)技術(shù)整合，亦可見其對大數(shù)據(jù)的重視。其中最大的要數(shù)2011年8月惠普宣布的以103億美元收購英國非結(jié)構(gòu)化信息處理軟件公司Autonomy，包括IBM、EMC、Teradata等公司也相繼進行了數(shù)億至幾十億美元的收購。

Hadoop被認(rèn)為是應(yīng)對大數(shù)據(jù)難題的利器

盡管限于產(chǎn)業(yè)鏈位置等原因，國內(nèi)企業(yè)在大數(shù)據(jù)上的布局尚無法如此全面。但大規(guī)模數(shù)據(jù)處理的代表技術(shù)Hadoop被很多中國最大互聯(lián)網(wǎng)公司所追捧，百度的搜索日志分析，騰訊、淘寶和支付寶的數(shù)據(jù)倉庫都可以看到 Hadoop的身影。而Hadoop也被認(rèn)為是應(yīng)對大數(shù)據(jù)難題的利器。

展望2012年，大數(shù)據(jù)不會放緩增長的腳步，全球IT巨頭通常也會走在技術(shù)發(fā)展的前沿方向。大數(shù)據(jù)的廣闊市場空間，已吸引了眾多全球IT巨頭的青睞，包括惠普、IBM、微軟、Oracle、SAP、Teradata都先后發(fā)布了重量級產(chǎn)品來應(yīng)對大數(shù)據(jù)的挑戰(zhàn)，幾這些巨頭幾乎囊括了所有的服務(wù)器、數(shù)據(jù)庫、存儲設(shè)備、企業(yè)解決方案的主要提供商，足見大數(shù)據(jù)技術(shù)已成為各大IT巨頭爭奪的下一個制高點。