物聯網產生的大數據處理過程可以歸結為三個基本步驟:數據采集、數據存儲和數據分析。數據采集和存儲是基本的功能,而大數據時代真正的價值蘊含在數據分析中。對于大數據時代的到來,有專家曾經估計有半數以上的大數據公司可能夭折,而原因是他們未能掌握數據采集相關技術。當然也并不是說過了數據采集這個難關就可以萬事大吉,接下來在數據存儲方面仍有一連串的挑戰。比如,公司必須掌握如分布式計算、并行計算等先進的存儲計算方法。
具有“大數據時代預言家”之稱的維克托·邁爾曾經在自己的著名論著《大數據時代》中預言——物聯網(IOT)技術的發展將極大地改變傳統數據存儲分析領域。這就難怪有那么多的公司正試圖投身物聯網大潮。據麥肯錫全球研究院的最新報告顯示:到2025年,物聯網行業的總營收將達6.2萬億美元。
但正如維克托擔心的一樣——這些弄潮兒們真的為物聯網將造就的大數據時代做好準備了嗎?
當然,除了技術層面的考慮,安全問題也不容忽視。但是,筆者更關心的是:全球大多數的數據中心(包括那些專門非盈利性的數據存儲和分析機構)對由物聯網即將帶來的海量數據似乎毫無準備。
當然有一些科技公司仍然堅持認為自己完全有能力管理好自己的數據中心,但是當數據量以PB或者EB為單位增加時,不知道這些公司是否還認為筆者庸人自擾?如果依舊固執己見,那么他們就不得不對相應的基礎設施進行大筆的投資。而相對聰明的公司會選擇業界領先的云存儲公司作為自己的戰略同盟。所以,由物聯網引起的大數據潮流將會助推云存儲和云計算的發展。