大數(shù)據(jù)經(jīng)歷的這幾年逐漸得到大家認(rèn)可,各個產(chǎn)品領(lǐng)域的每個發(fā)展過程都是從一點一滴走起來的,大數(shù)據(jù)也是一樣的道理,要對大數(shù)據(jù)的未來進(jìn)行探索,首先要對過去進(jìn)行追溯。
大數(shù)據(jù)的存在是一個數(shù)據(jù)的積累的過程,從量變到質(zhì)變不斷的飛躍,其中碎片化的發(fā)展過程不容忽略。
看大數(shù)據(jù)過去
2008年,大數(shù)據(jù)得到了美國知名計算機(jī)科學(xué)研究人員的認(rèn)可,并發(fā)表了具有影響力的文章,這篇文章在思維方面更加具有發(fā)展空間,不再局限于數(shù)據(jù)處理的機(jī)器。
2009年印度在大數(shù)據(jù)方面做了進(jìn)一步探索,疾病爆發(fā)項目分析進(jìn)行探索,通過對身份識別的管理,全方位利用手機(jī)和社交網(wǎng)站的數(shù)據(jù)源進(jìn)行分析。
2011年IBM的沃森超級計算機(jī)每秒可掃描并分析4TB(約2億頁文字量)的數(shù)據(jù)量,并在美國著名智力競賽電視節(jié)目《危險邊緣》“Jeopardy”上擊敗兩名人類選手而奪冠。后來認(rèn)為這一刻為一個“大數(shù)據(jù)計算的勝利。”
如今大數(shù)據(jù)在國內(nèi)和國際的市場中,已經(jīng)全面鋪開,利用大數(shù)據(jù)可以很好的應(yīng)用的企業(yè)和政府部門,一些醫(yī)療領(lǐng)域更是通過對大數(shù)據(jù)的分析,掌握更加具有價值的信息。
智慧不減,看大數(shù)據(jù)未來發(fā)展
大數(shù)據(jù)未來隨著對不同類型、不同體量數(shù)據(jù)的結(jié)構(gòu)化存儲、批量處理以及價值挖掘需求的增多,在2017年將會繼續(xù)增加,通過數(shù)據(jù)平臺幫助的企業(yè),未來將會是大數(shù)據(jù)運(yùn)用的好時機(jī),新的一年它會有哪些發(fā)展的趨勢,這里正是展開今天的話題。
1.數(shù)據(jù)處理更加快速
當(dāng)今世界正在快速向數(shù)字化演進(jìn)。同時,企業(yè)及其業(yè)務(wù)模式和產(chǎn)品也呈現(xiàn)出相同的趨勢。許多企業(yè)已經(jīng)認(rèn)識到這一點,并已在 “數(shù)字化” 時代積極行動起來。在未來大約兩年時間里,預(yù)計將有超過 50% 的中型企業(yè)會廣泛使用數(shù)字核心技術(shù),其中包括移動解決方案(約 54%)、業(yè)務(wù)管理軟件(57%) 和業(yè)務(wù)分析軟件(超過 58%)等。
這種對速度的需求促使用戶采用訪問速度更快和執(zhí)行效率更高的數(shù)據(jù)庫,更快的查詢數(shù)據(jù)的技術(shù)大大的提升,企業(yè)在調(diào)取這些數(shù)據(jù)的時候更為快捷和方便。
2.數(shù)據(jù)湖(DataLake)可以更有價值
這里我們將數(shù)據(jù)比作座水庫,在里面藏滿水,也就是數(shù)據(jù),通過建立水庫來完成后期的日常工作,例如發(fā)電等,也是網(wǎng)絡(luò)安全方面、數(shù)據(jù)分析、機(jī)器學(xué)習(xí)等。
在2017年各個組織要求可重復(fù)的并且敏捷地使用數(shù)據(jù)湖,以便更快地獲得響應(yīng)。在確定對人事、數(shù)據(jù)和基礎(chǔ)設(shè)施的相應(yīng)投資之前,企業(yè)會更加慎重的考慮業(yè)務(wù)成果。這將促進(jìn)業(yè)務(wù)和IT之間的強(qiáng)力耦合。而自助服務(wù)平臺作為分析大數(shù)據(jù)資產(chǎn)的工具將獲得更深入的認(rèn)可。
3.機(jī)器學(xué)習(xí)助力大數(shù)據(jù)發(fā)展
IT對大數(shù)據(jù)的推動方面是非常廣泛的,機(jī)器的學(xué)習(xí)有力的提升了這種速度,以大數(shù)據(jù)為基礎(chǔ)的超級計算能力為計算密集型的平臺提供了極大的助力,如:機(jī)器學(xué)習(xí)(ML)、人工智能(AI)、圖形算法等。尤其對于Microsoft Azure機(jī)器學(xué)習(xí),由于上述計算能力也完全適用于初學(xué)者,并能迅速集成到現(xiàn)有的Microsoft平臺。
未來這些智能系統(tǒng)方面將會有更好的發(fā)展方向,在技術(shù)領(lǐng)域做出貢獻(xiàn)。
4.云服務(wù)器和大數(shù)據(jù)的聯(lián)合
IoT正在生成大量的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù),而且越來越多的數(shù)據(jù)部署在云服務(wù)上。未來將是云計算發(fā)展的有利于階段,各個大型數(shù)據(jù)中心的建立,結(jié)合國際云計算市場的發(fā)展提升技術(shù),云服務(wù)器和大數(shù)據(jù)的結(jié)合可以為企業(yè)提供更為先進(jìn)的管理,同時挖掘更多潛在客戶。
5.開放代碼
Apache Hadoop、Spark等開源應(yīng)用程序已經(jīng)在大數(shù)據(jù)領(lǐng)域占據(jù)了主導(dǎo)地位。一項調(diào)查發(fā)現(xiàn),預(yù)計到今年年底,近60%企業(yè)的Hadoop集群將投入生產(chǎn)。佛瑞斯特的研究顯示,Hadoop的使用率正以每年32.9%的速度增長。專家表示,2017年許多企業(yè)將繼續(xù)擴(kuò)大他們的Hadoop和NoSQL技術(shù)應(yīng)用,并尋找方法來提高處理大數(shù)據(jù)的速度。
6.智能安保
許多企業(yè)也將大數(shù)據(jù)分析納入安全戰(zhàn)略。企業(yè)的安全日志數(shù)據(jù)提供了以往未遂的網(wǎng)絡(luò)攻擊信息,企業(yè)可以利用這些數(shù)據(jù)來預(yù)測并防止未來可能發(fā)生的攻擊,以減少攻擊造成的損失。一些公司正將其安全信息和事件管理軟件(SIEM)與大數(shù)據(jù)平臺(如Hadoop)結(jié)合起來。還有一些公司選擇向能夠提供大數(shù)據(jù)分析能力產(chǎn)品的公司求助。
隨著這幾年中國的在技術(shù)方面的不斷提升和發(fā)展,未來的大數(shù)據(jù)將是一個非常有力量的技術(shù)領(lǐng)域,不管是企業(yè)或者是個人都可以在其中找到價值,未來大數(shù)據(jù)將會吃定彩虹,但會綻放永久的美麗。