不久前,路透社的獨家新聞揭披露,惠普有意以100億美元的價格出售旗下軟件部門,逐步將發(fā)展中心向網(wǎng)絡(luò)、存儲及數(shù)據(jù)中心相關(guān)技術(shù)服務(wù)轉(zhuǎn)移。雖然惠普的軟件業(yè)務(wù)去年營收僅有36億美金,這個消息還是震動了整個IT界。
惠普并非第一間這樣做的大型高科技企業(yè)。今年六月,戴爾也賣出了旗下的軟件部門。在出售軟件部門之前,戴爾大手筆的收購了存儲行業(yè)的龍頭企業(yè)EMC,大舉進軍數(shù)據(jù)存儲及數(shù)據(jù)中心業(yè)務(wù)。
數(shù)據(jù),正帶來無數(shù)的全新市場機遇,并隨之對業(yè)界乃至社會產(chǎn)生深重的影響。而中國作為數(shù)據(jù)中心市場發(fā)展最快的地區(qū)之一,是否能領(lǐng)跑全新數(shù)據(jù)時代,也成為了業(yè)界的焦點。
海量數(shù)據(jù)帶來全新市場
近年來,移動應(yīng)用、物聯(lián)網(wǎng)技術(shù)、視頻VR技術(shù)不斷迭代。社會運行以及個人生活中的大量活動,都會引起數(shù)據(jù)的采集、分析、梳理、傳輸?shù)刃袨椤?/p>
新的數(shù)據(jù),正以前所未有的速度產(chǎn)生。
“從人類文明的起始到2003年,我們一共創(chuàng)造了5EB(百億億字節(jié))的數(shù)據(jù)。而如今,每兩天我們都在創(chuàng)造同樣數(shù)量的數(shù)據(jù)。到2020年,這個數(shù)字可能會變成53ZB(十萬億億字節(jié)),是現(xiàn)在的50倍。”Google的首席經(jīng)濟學(xué)家Hal Varian預(yù)測道。
數(shù)據(jù)的增長帶來了數(shù)據(jù)存儲、處理、交換等業(yè)務(wù)的蓬勃發(fā)展,也引發(fā)了業(yè)內(nèi)諸如亞馬遜、惠普、谷歌、戴爾等巨頭的新一輪戰(zhàn)爭。
同樣,數(shù)據(jù)的飛速增長也帶來了數(shù)據(jù)存儲市場的供求不平衡。業(yè)界普遍認為,未來3-5年數(shù)據(jù)存儲缺口將繼續(xù)擴大,帶來新一輪的市場機會。
互聯(lián)網(wǎng)時代下,數(shù)據(jù)產(chǎn)業(yè)正成為一種新的生意
數(shù)據(jù)平臺:非結(jié)構(gòu)化數(shù)據(jù)帶來的全新數(shù)據(jù)模式
在存儲市場飛速增長的同時,這個市場以及其中涉及的技術(shù)也在悄然變化。
過去,絕大多數(shù)數(shù)據(jù)都以結(jié)構(gòu)化數(shù)據(jù)的方式進行存儲。目前,非結(jié)構(gòu)數(shù)據(jù)已經(jīng)占據(jù)數(shù)據(jù)存儲總量的90%。這些變化促成了數(shù)據(jù)的存儲、使用、分享的解決方案的一系列變化。
在未來幾年內(nèi),業(yè)界將要面臨的最大的挑戰(zhàn),就是數(shù)據(jù)使用模式的改變。過去,很多數(shù)據(jù)是同業(yè)務(wù)系統(tǒng)綁定,許多業(yè)務(wù)系統(tǒng)的應(yīng)用底下都有自己的數(shù)據(jù)庫。這些數(shù)據(jù)往往有獨特的格式,很難遷移或者被其他業(yè)務(wù)系統(tǒng)使用。
這也就帶來了我們所知道的數(shù)據(jù)的很多問題,比如“數(shù)據(jù)孤島”——在一個系統(tǒng)或者單位的內(nèi)部,數(shù)據(jù)無法互通。另外,還有數(shù)據(jù)的重復(fù)存儲問題、數(shù)據(jù)的缺失、遺漏、以及不同步等等現(xiàn)象。這些問題不僅廣泛存在,更難以解決。
在創(chuàng)新公司云城數(shù)據(jù)科技有限公司看來,未來以大數(shù)據(jù)為動力的技術(shù)及市場發(fā)展,很可能需要一種新的使用模式,那就是“數(shù)據(jù)平臺”。
數(shù)據(jù)平臺,即以數(shù)據(jù)為中心的新的設(shè)計思路,擁有四個重要特征。
第一,它可以推動數(shù)據(jù)存儲的“虛擬化”。這意味對數(shù)據(jù)的訪問不再受到物理存儲的局限,達到訪問自由。過去“數(shù)據(jù)孤島”問題,就此解決了。
第二,數(shù)據(jù)采集更加完整、統(tǒng)一,數(shù)據(jù)平臺的運行也將會更加平穩(wěn)。在數(shù)據(jù)平臺里,所有有權(quán)限的業(yè)務(wù)系統(tǒng)都能訪問數(shù)據(jù),有效利用存儲空間。目前,數(shù)據(jù)往往屬于某一個業(yè)務(wù)系統(tǒng)。比如當用戶的家庭地址改變時,需要改好幾個業(yè)務(wù)系統(tǒng)里的數(shù)據(jù),如果漏掉了某一個系統(tǒng),就會出現(xiàn)數(shù)據(jù)間的沖突。而完善的災(zāi)備、工作流量管理(workload management)等等工具,也能保證平臺及服務(wù)的順利運行。
第三,數(shù)據(jù)平臺擁有標準的接口,可以更好地支持數(shù)據(jù)分析、挖掘、學(xué)習(xí)等等工具。
第四,明確數(shù)據(jù)的所有權(quán)和使用權(quán),并有相應(yīng)的管理手段,保證數(shù)據(jù)的歸屬權(quán)限和使用權(quán)限明確。歸屬權(quán)可以讓數(shù)據(jù)的所有者合法獲利。也就是說,想用歸屬者的數(shù)據(jù)需要付費。而使用權(quán)同等重要,可以讓使用原始數(shù)據(jù)分析、挖掘產(chǎn)生的商業(yè)見解而獲利。
這個“數(shù)據(jù)平臺”的未來,與谷歌、惠普等業(yè)界巨頭的數(shù)據(jù)存貯戰(zhàn)略是一致的。
在2016年的USENIX會議上,谷歌的數(shù)據(jù)中心基礎(chǔ)建設(shè)副總裁Eric Brewer呼吁業(yè)界共同設(shè)計面向未來的數(shù)據(jù)中心、云服務(wù)所需的磁盤,以解決日趨嚴重的數(shù)據(jù)存儲問題。Brewer指出,隨著數(shù)據(jù)存儲結(jié)構(gòu)的改變,未來的數(shù)據(jù)中心及云服務(wù)的新理念將帶來同過往非常不同的新需求。對于磁盤,我們將不再要求單一磁盤的穩(wěn)定性,而是要從混合管理的角度考慮存儲的成本、容量以及數(shù)據(jù)穩(wěn)定性的最大化問題。
惠普企業(yè)存儲的高級副總裁Bill Hilf也指出,在企業(yè)越來越多地將云計算應(yīng)用到公司層面時,他們同時也在增加自己所能提供的應(yīng)用。通過不同的云服務(wù)(IaaS, PaaS, SaaS),他們能夠為這些應(yīng)用或負載量來找到最適合的配送模型。最終我們可以想象到,企業(yè)的計算機部門就像是各類云解決方案的前端,或“中介”。
而這些戰(zhàn)略也意味著一件事:大數(shù)據(jù)的核心,其實在于數(shù)據(jù)的流動。
在可預(yù)見的未來,海量的數(shù)據(jù)以及對其的分析能力會大大提高社會的運行效率,但是也會帶來一系列的問題。而數(shù)據(jù)平臺這個概念以及它的種種特點,對于數(shù)據(jù)的安全性和可控性等問題,也有著積極作用。
清華信息科學(xué)與技術(shù)國家實驗室常務(wù)副主任李軍評論道:“開放與安全,既是一對矛盾,也是相輔相成的。只有通過數(shù)據(jù)平臺技術(shù)的不斷創(chuàng)新,保障數(shù)據(jù)在存取、流動和應(yīng)用中所有權(quán)和使用權(quán)的明確歸屬、嚴格審計,全面落實私密、完整、可用等管控要求,才會有更多的個人和機構(gòu)用戶擁抱數(shù)據(jù)的開放,共享數(shù)據(jù)的紅利。”
數(shù)據(jù)時代的中國速度
在過去的科技發(fā)展進程中,發(fā)達國家,尤其是硅谷,往往引領(lǐng)著新科技的誕生、乃至廣泛應(yīng)用。然而在這場數(shù)據(jù)浪潮中,以中國為首的快速發(fā)展國家成為了新的亮點。
首先,從數(shù)據(jù)的增長速度來看,這些快速發(fā)展國家的的數(shù)據(jù)增長速度大大超越全球數(shù)據(jù)增長速度。業(yè)界預(yù)測,在2017年快速發(fā)展國家(中國、印度、俄羅斯、巴西、墨西哥)的數(shù)據(jù)總量將超過發(fā)達國家的數(shù)據(jù)總量。而中國無論從數(shù)據(jù)總量,數(shù)據(jù)增量,還是從上層應(yīng)用的生態(tài)系統(tǒng)的活躍度,都引領(lǐng)快速發(fā)展國家甚至全球的發(fā)展。
互聯(lián)網(wǎng)時代下,數(shù)據(jù)產(chǎn)業(yè)正成為一種新的生意
今年八月,ResearchandMarkets的一份報告指出,中國的數(shù)據(jù)中心市場將以每年13%的復(fù)合增長率持續(xù)增長,成為增長最快的市場之一。
“類似貴州等多個城市大數(shù)據(jù)的戰(zhàn)略定位,表明中國大數(shù)據(jù)的市場教育已經(jīng)成熟,數(shù)據(jù)應(yīng)用市場發(fā)展正在提速。而應(yīng)用的深化必然對大數(shù)據(jù)的基礎(chǔ)設(shè)施提出新的需求,數(shù)據(jù)的平臺化勢在必行,也是一個極有潛力的投資方向。” TEEC天使基金創(chuàng)始合伙人夏淳說道。
互聯(lián)網(wǎng)時代下,數(shù)據(jù)產(chǎn)業(yè)正成為一種新的生意
雖然在數(shù)據(jù)存儲行業(yè),從磁盤、閃存、到系統(tǒng)集成商基本被歐美國家壟斷。但是如今的中國擁有著得天獨厚的優(yōu)勢。如今的中國擁有世界最多的網(wǎng)民和世界最大的手機用戶群體,中國的互聯(lián)網(wǎng)行業(yè)孵化的一些新的商業(yè)模式,也走在了世界的前列。這些都給中國的大數(shù)據(jù)發(fā)展帶來了極大的動力。
同以往的技術(shù)迭代相比,大數(shù)據(jù)相關(guān)技術(shù)的迭代有其獨特的特性——從基礎(chǔ)架構(gòu)到上層應(yīng)用及業(yè)務(wù)系統(tǒng),大數(shù)據(jù)的生態(tài)系統(tǒng)里存在大量開源的系統(tǒng)及工具。這也就給中國大數(shù)據(jù)產(chǎn)業(yè)的迅速發(fā)展帶了了良好的環(huán)境。
從長遠的角度來看,以開源為基礎(chǔ)或以開源為參考,建立自主可控的大數(shù)據(jù)產(chǎn)業(yè),是中國亟需的戰(zhàn)略投資。
“在當今時代,數(shù)據(jù)的戰(zhàn)略直接關(guān)系社會和國家的發(fā)展和安全。我們需要自主可控的解決方案,在支持發(fā)展的同時,也保證安全。從技術(shù)上來看,開源一方面促進了大數(shù)據(jù)的發(fā)展,一方面也給我們提供了一個非常好的機遇,可以有效的進行行業(yè)合作,甚至國家之間的合作。”
工信部CSIP前副總工及開源中心負責人、中國開源軟件推進聯(lián)盟專家委員會委員劉明說:“未來是數(shù)據(jù)的年代,數(shù)據(jù)將無疑成為衡量一個國家的實力的最重要的指標之一。中國必須建立自主可控的數(shù)據(jù)解決方案,我們認為行業(yè)合作以及國家間的合作也會進一步推動技術(shù)的發(fā)展。”