日前發(fā)布的《2017~2022年中國大數(shù)據(jù)產(chǎn)業(yè)發(fā)展前景與投資戰(zhàn)略規(guī)劃分析報(bào)告》顯示,中國大數(shù)據(jù)產(chǎn)業(yè)市場在未來五年內(nèi),仍將保持著高速增長。預(yù)計(jì)2016年年末,市場規(guī)模將達(dá)到2485億元,而隨著各項(xiàng)政策的配套落實(shí)及推進(jìn),到2020年,中國大數(shù)據(jù)產(chǎn)業(yè)規(guī)模或達(dá)13626億元的高點(diǎn)。
前瞻產(chǎn)業(yè)研究院認(rèn)為,通過大數(shù)據(jù)技術(shù)使人們可以利用以前不能有效利用的多種數(shù)據(jù)類型,抓住被忽略的機(jī)遇,使企業(yè)機(jī)構(gòu)變得更加智能和高效。大數(shù)據(jù)的重心將從數(shù)據(jù)的存儲和傳輸過渡到數(shù)據(jù)的挖掘與應(yīng)用,這將深刻地影響企業(yè)的商業(yè)模式,既可直接為企業(yè)帶來利潤,也可通過正反饋為企業(yè)帶來難以復(fù)制的競爭優(yōu)勢。據(jù)麥肯錫測算,大數(shù)據(jù)的應(yīng)用每年潛在可為美國醫(yī)療健康業(yè)和歐洲政府分別節(jié)省3000億美元和1000億歐元,利用個人位置信息潛在可創(chuàng)造出6000億美元的消費(fèi)者剩余。因此大數(shù)據(jù)應(yīng)用有遠(yuǎn)超萬億美元的市場。
大數(shù)據(jù)產(chǎn)業(yè)鏈參與者眾多,覆蓋面廣。按照產(chǎn)品形態(tài),主要分為硬件、基礎(chǔ)軟件和應(yīng)用軟件三大領(lǐng)域。綜合各領(lǐng)域國內(nèi)外競爭態(tài)勢,商業(yè)智能、信息安全和云計(jì)算將是數(shù)據(jù)挖掘和應(yīng)用環(huán)節(jié)國內(nèi)相對受益的三駕馬車。其中國內(nèi)智能市場已步入成長期,“十三五”期間潛在空間將超過300億元;信息安全“十三五”期間潛在空間將超過4000億元;云計(jì)算剛進(jìn)入成長期。
大數(shù)據(jù)在帶來機(jī)遇的同時(shí),也在人才、技術(shù)、信息安全、國家戰(zhàn)略決策等方面帶來了較大的挑戰(zhàn)。
據(jù)IDC測算,到2020年,全球需要管理的數(shù)據(jù)量將達(dá)到35ZB,相較于2011年將增長50倍,而同期IT從業(yè)人員將僅增加1.5倍,意味著人均管理數(shù)據(jù)量將膨脹近33倍。雖然目前看來,人力資源的配給與現(xiàn)有的數(shù)據(jù)庫管理技術(shù)基本是匹配的,但是未來,如果人類管理數(shù)據(jù)的效率不能保持同步提升,在大數(shù)據(jù)時(shí)代將無法對數(shù)據(jù)進(jìn)行有效管理。
傳統(tǒng)數(shù)據(jù)庫的管理能力無法應(yīng)付大數(shù)據(jù)體量的數(shù)據(jù)。人們和機(jī)器制造的越來越多的業(yè)務(wù)數(shù)據(jù)對IT系統(tǒng)帶來了更大的挑戰(zhàn),數(shù)據(jù)的存儲和安全以及在未來訪問和使用這些數(shù)據(jù)已成為難點(diǎn)。目前成熟的經(jīng)典數(shù)據(jù)庫技術(shù)——結(jié)構(gòu)化數(shù)據(jù)查詢語言SQL,在設(shè)計(jì)的一開始是沒有考慮非結(jié)構(gòu)化數(shù)據(jù)的,也就是說以前計(jì)算機(jī)人員討論數(shù)據(jù)的時(shí)候,數(shù)據(jù)的范圍限定在結(jié)構(gòu)化數(shù)據(jù)范疇以內(nèi)。隨著數(shù)據(jù)類別的擴(kuò)大,目前的大數(shù)據(jù)已經(jīng)囊括了半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù),這已超出目前常規(guī)數(shù)據(jù)軟件工具所能承受的極限。