目前業(yè)界和學(xué)界對(duì)“大數(shù)據(jù)”這一概念的定義是:數(shù)據(jù)量的規(guī)模大到無法通過目前主流軟件工具,在合理時(shí)間內(nèi)達(dá)到擷取、管理、處理并整理成為幫助企業(yè)經(jīng)營決策更積極目的的資訊。這里的“數(shù)據(jù)”是一個(gè)廣義的概念,包括數(shù)據(jù)、圖像、視頻、文字等訊息。
如果按上述定義來理解“大數(shù)據(jù)”,那么有些學(xué)者提出的“大數(shù)據(jù)”是一個(gè)過度包裝的概念“、”是個(gè)偽命題“”的說法就很容易理解了。我們現(xiàn)在經(jīng)常遇到并且很容易處理的幾百兆的數(shù)據(jù),在20世紀(jì)90年代就稱得上“大數(shù)據(jù)”了,因?yàn)槟菚r(shí)的PC機(jī)配有40兆的硬盤便屬于高配置,當(dāng)時(shí)幾百兆的數(shù)據(jù)連存貯都做不到,更談不上處理。因此,所謂的“大數(shù)據(jù)”只是一個(gè)相對(duì)概念,隨著計(jì)算機(jī)硬件技術(shù)、計(jì)算機(jī)科學(xué)和統(tǒng)計(jì)科學(xué)的發(fā)展,今天的“大數(shù)據(jù)”也許10年或20年后就是大學(xué)生普通作業(yè)題中所用到的一般數(shù)據(jù)了。
盡管如此,“大數(shù)據(jù)”的正面作用是不可否認(rèn)的。由于數(shù)據(jù)規(guī)模爆炸式增長,以及大數(shù)據(jù)的特點(diǎn)—Volume(大量)、Velocity(高速)、Variety(多樣)、Veracity(真實(shí)性),對(duì)計(jì)算機(jī)工程、計(jì)算機(jī)科學(xué)和統(tǒng)計(jì)科學(xué)提出了新的挑戰(zhàn)。正是這些挑戰(zhàn),促使計(jì)算機(jī)工程、計(jì)算機(jī)科學(xué)和統(tǒng)計(jì)科學(xué)等領(lǐng)域的數(shù)據(jù)處理的理論、方法和技術(shù)得到快速發(fā)展。
在看到“大數(shù)據(jù)”正面作用的同時(shí),我們更應(yīng)該看到其負(fù)面作用。無論是計(jì)算機(jī)科學(xué)還是統(tǒng)計(jì)學(xué)領(lǐng)域的學(xué)者,如果今天還沒有做有關(guān)“大數(shù)據(jù)”的課題,會(huì)被認(rèn)為落伍了。今天以“大數(shù)據(jù)”為主題的跟風(fēng)、炒作比比皆是,例如以“大數(shù)據(jù)”為主題的學(xué)術(shù)會(huì)議數(shù)不勝數(shù),“大數(shù)據(jù)”中心或基地風(fēng)起云涌,網(wǎng)絡(luò)上與“大數(shù)據(jù)”相關(guān)的條目數(shù)以億計(jì)。似乎“大數(shù)據(jù)”是21世紀(jì)第一個(gè)被發(fā)現(xiàn)的“金礦”,吸引了大批淘金者。而很多有關(guān)“大數(shù)據(jù)”的說法,如“人類已進(jìn)入大數(shù)據(jù)時(shí)代”,“大數(shù)據(jù)”之于經(jīng)濟(jì)社會(huì)發(fā)展的作用以“革命性意義”,甚至把“大數(shù)據(jù)”的作用與第一、二次工業(yè)革命相提并論,“大數(shù)據(jù)”明顯地被用來進(jìn)行商業(yè)炒作。這樣看來,“大數(shù)據(jù)”不僅不是什么金礦,更像是一個(gè)吸金的黑洞。我們永遠(yuǎn)不要忘記美國通過“冷戰(zhàn)”拖垮蘇聯(lián)的教訓(xùn),盡管“大數(shù)據(jù)”問題沒有嚴(yán)重到“冷戰(zhàn)”的程度,但其前兆已經(jīng)顯現(xiàn)。
與“大數(shù)據(jù)”相關(guān)聯(lián)的科學(xué)問題是什么?在科學(xué)問題是什么都不明確的情況下,大筆科研經(jīng)費(fèi)投向“大數(shù)據(jù)”研究,大批“大數(shù)據(jù)”中心和基地在火熱建設(shè),這些現(xiàn)象的存在更像是在搞冒進(jìn),而不是進(jìn)行科學(xué)研究。因此,“大數(shù)據(jù)”的負(fù)面作用要遠(yuǎn)大于其正面作用。今天的“大數(shù)據(jù)”更像是我國20世紀(jì)80年代剛剛建立的股票市場,一開市會(huì)吸引一批投資者,同時(shí)也吸引更多投機(jī)者。
大浪淘沙,理性必然最終回歸。無論業(yè)界還是學(xué)界,在政府相關(guān)機(jī)構(gòu)的正確引導(dǎo)下,隨著時(shí)間的推移,必將回到正確面對(duì)“大數(shù)據(jù)”的軌道上來。