這篇文章對(duì)大數(shù)據(jù)未來(lái)的發(fā)展趨勢(shì)做了一個(gè)推演,如能對(duì)大家有所啟發(fā)更好,否則權(quán)當(dāng)做一篇碎片化時(shí)代產(chǎn)生的快速消費(fèi)品一看而過(guò)即可。
人類實(shí)現(xiàn)了信息的存儲(chǔ),就像Time Machine一樣,回到任意一個(gè)點(diǎn),通過(guò)已有的數(shù)據(jù)重新構(gòu)建過(guò)去的影像,也能夠預(yù)測(cè)未來(lái),模擬一個(gè)虛擬而準(zhǔn)確的未來(lái)環(huán)境
大數(shù)據(jù)第一重
這是大數(shù)據(jù)的第一階段,也是大數(shù)據(jù)當(dāng)前所處的階段。這個(gè)階段的表象是:
大數(shù)據(jù)部門在大部分公司遍地開(kāi)花,
大家一擁而上
這一階段的必然結(jié)果是:
大家發(fā)現(xiàn)耗費(fèi)了大量人力物力,
終究是收效有限
雖然大部分企業(yè)的消耗了大量的資金,卻沒(méi)有帶來(lái)應(yīng)有的價(jià)值,但帶來(lái)的一個(gè)副產(chǎn)品是
企業(yè)花的錢給工業(yè)界和學(xué)術(shù)界
積累了大量的大數(shù)據(jù)人才
這些人才會(huì)在第二重階段時(shí)產(chǎn)生巨大的價(jià)值。
為什么我會(huì)做出上面的結(jié)論?我先說(shuō)個(gè)例子吧,光是搭建一個(gè)像樣子的數(shù)據(jù)平臺(tái),就需要5-6個(gè)熟練的大數(shù)據(jù)工程師折騰大半年,還不包括真正基于之上的多維分析,機(jī)器學(xué)習(xí)(預(yù)測(cè))等產(chǎn)品,而這些產(chǎn)品的難度也是很大的,需要大量的人力,關(guān)鍵是還不一定能做好。要達(dá)到高效的計(jì)算,以及系統(tǒng)的穩(wěn)定,機(jī)器的數(shù)量也有不少要求,因?yàn)榇蟛糠执髷?shù)據(jù)組件都是分布式的。
與此同時(shí),很多人已經(jīng)意識(shí)到了大數(shù)據(jù)的實(shí)施難度,一些專門服務(wù)于大數(shù)據(jù)產(chǎn)業(yè)的公司也開(kāi)始慢慢誕生成長(zhǎng),這些公司覆蓋了從大數(shù)據(jù)組件開(kāi)發(fā),到大數(shù)據(jù)平臺(tái)構(gòu)建,再到基于大數(shù)據(jù)平臺(tái)的上層解決方案,并且在各個(gè)行業(yè)慢慢伸出了自己的觸角。
譬如:當(dāng)前比較火熱的互聯(lián)網(wǎng)金融,其實(shí)就是依托于大數(shù)據(jù),做各種原先金融行業(yè)很看重的信征,欺詐檢測(cè),自動(dòng)放貸等。這些基于大數(shù)據(jù)而帶來(lái)的技術(shù)變革大大提高了金融行業(yè)的效率,為資金更快的流轉(zhuǎn)提供了基礎(chǔ),從而對(duì)所有行業(yè)都會(huì)產(chǎn)生深遠(yuǎn)影響。
然而這些公司在當(dāng)前階段還沒(méi)有形成主流,各個(gè)公司依然是偏向于選擇自建數(shù)據(jù)平臺(tái)。
大數(shù)據(jù)第二重
進(jìn)入到第二重時(shí),會(huì)有明顯的四個(gè)特征:
在大量的中小企業(yè)碰壁之后,他們意識(shí)到,自己做大數(shù)據(jù)并不是最明智的選擇,轉(zhuǎn)而尋方案解決提供商。
大量的大數(shù)據(jù)服務(wù)公司開(kāi)始已經(jīng)做好原始積累。在技術(shù)和行業(yè)經(jīng)驗(yàn)上得到充分的發(fā)展,并且在行業(yè)形成較好的口碑,其行業(yè)觸角也已經(jīng)覆蓋大部分產(chǎn)業(yè)
大公司發(fā)現(xiàn)畢竟自己的主業(yè)不是去做大數(shù)據(jù),而是基于大數(shù)據(jù)的結(jié)果更好的幫助自己已有的產(chǎn)品或者導(dǎo)向做好新的產(chǎn)品。這個(gè)時(shí)候大公司本身也開(kāi)始慢慢尋求一些第三方大數(shù)據(jù)公司的支持。
更好的數(shù)據(jù)法規(guī)支持,保證行業(yè)內(nèi)的數(shù)據(jù)隱私,安全等
此時(shí),整個(gè)大數(shù)據(jù)行業(yè)開(kāi)始慢慢恢復(fù)到理性成熟階段,大家各司其職。BAT依然會(huì)以自己的主業(yè)為主,大數(shù)據(jù)雖然是一個(gè)產(chǎn)生變革的技術(shù),然而終究是為了產(chǎn)品服務(wù)的,應(yīng)該讓擁有大數(shù)據(jù)基因的公司去做更好些。這也是人類分工體系下必然產(chǎn)生的。
這個(gè)時(shí)候由于有了第一重階段的人才積累,很多人會(huì)出來(lái)創(chuàng)業(yè),大數(shù)據(jù)創(chuàng)業(yè)會(huì)成為潮流,并且枝繁葉茂,漸漸覆蓋各個(gè)行業(yè)的各個(gè)領(lǐng)域。隨著時(shí)間推移,一些公司在各自的領(lǐng)域深耕,漸漸形成一些領(lǐng)域內(nèi)的重量級(jí)解決方案公司,而不管是中小型企業(yè),還是大企業(yè),慢慢都會(huì)將大數(shù)據(jù)業(yè)務(wù)慢慢轉(zhuǎn)移到更專業(yè)的大數(shù)據(jù)公司。
此階段,可能私有部署依然是主流。
大數(shù)據(jù)第三重
到第三重的時(shí)候,也會(huì)有幾個(gè)特點(diǎn):
大數(shù)據(jù)企業(yè)也會(huì)形成三極,類似現(xiàn)在的BAT,擁有了產(chǎn)業(yè)里的哥斯拉
云計(jì)算的發(fā)展已經(jīng)到了
中小型公司,絕大多數(shù)都已經(jīng)在云端
大型公司,已經(jīng)完全普及混合云架構(gòu)
這個(gè)時(shí)候,大數(shù)據(jù)領(lǐng)域的幾家巨頭公司,慢慢將自己的業(yè)務(wù)場(chǎng)景抽象和覆蓋的差不多,慢慢成為了大數(shù)據(jù)云服務(wù)公司。
此時(shí)可能會(huì)產(chǎn)生如下的幾個(gè)有意思的情況:
這幾家大數(shù)據(jù)公司會(huì)在幾家主流云平臺(tái)搭建各自的大數(shù)據(jù)平臺(tái),方便企業(yè)的數(shù)據(jù)接入
大部分企業(yè)內(nèi)部可能只有分析師,不再有數(shù)據(jù)平臺(tái)架構(gòu)師等。具體情形和現(xiàn)在使用公有云,一些基礎(chǔ)運(yùn)維可能慢慢都挪騰到公有云企業(yè)去了。
3.對(duì)應(yīng)的大數(shù)據(jù)公司,產(chǎn)生的效益應(yīng)該要遠(yuǎn)遠(yuǎn)好于用戶自己搞,因?yàn)樗麄兎e累的大量的行業(yè)共通經(jīng)驗(yàn),節(jié)約了大量的企業(yè)和社會(huì)成本。
后話
云化是整個(gè)IT產(chǎn)業(yè)的趨勢(shì),而在其上的各個(gè)產(chǎn)業(yè),譬如大數(shù)據(jù)產(chǎn)業(yè),也終究是逃不掉這個(gè)大趨勢(shì)的。 大數(shù)據(jù),還有云計(jì)算,是整個(gè)新的信息革命的基礎(chǔ),所以也必然是一個(gè)趨勢(shì)。