2014年,雖然大數據應用還沒有深入普及,但是已經有越來越多的行業用戶嘗試引入大數據相關技術解決如何管理、利用日益增長的各類數據,而往往這樣的技術引入都或多或少伴隨著IT產品和方案(如中高端存儲系統)的更新換代。特別是像互聯網、金融、電信、政府這樣的行業,對于客戶行為分析、信息甄別、影像對比等方面的需求日益增加,在最近一兩年和未來兩三年,都已經或計劃應用更多的大數據技術,并且傾向于采購更加高效和靈活的大數據系統,使得大數據市場投資規模迅速增長,計世資訊出版的《2014-2015年中國大數據市場現狀與發展趨勢研究報告》表明,2014年中國大數據市場達到了5.8億元,增長率為48.7%。
2012年-2014年中國大數據市場規模
在這樣的高速增長形勢下,大數據市場帶給人們的既有欣喜,也有教訓;既有成功,也有失敗。總體來看,2014年中國大數據市場主要凸顯了兩大亮點和兩大問題。
亮點一:傳統行業熱烈擁抱大數據
2014年,雖然大數據的應用還沒有深入普及,但是已經有越來越多的行業用戶引入大數據相關技術,管理、利用日益增長的各類數據提升企業競爭力。例如,銀行在業務集中處理中心應用大數據技術,以減少人為干預,提升工作效率和減低審計風險;電力行業在安監系統中應用大數據技術,以增強事故預警的準確性;制造行業應用大數據技術來優化生產流程,提升產品治療;交通部門利用大數據技術檢測一場交通流量變化,調配公共交通資源等等。
計世資訊認為,這種應用將會繼續深入發展,更多的行業會引入大數據技術,特別是互聯網、電子商務、金融、電信、公共事業、醫療等行業。
亮點二:大數據催熱一體機等細分市場高速增長
早期的大數據實施給用戶帶來的體驗并不令人滿意。項目的實施周期和成本都高于預期,投資回報率(ROI)的目標鮮有實現。熟練人才的缺乏以及為了獲得和保留這些人才而投入的成本被認為是項目拖延的主因。硬件和軟件的融合,以及與特定應用更為緊密的集成成為數據中心的一個主要趨勢。這一趨勢又會進一步受到客戶愿望的推動,將更具有可管理性、高效、靈活和成本效率高的一體機等產品需求明顯增加。2014年,中國大數據一體機市場增長率達到了55.6%。
問題一:全國在建大數據園區突破100家,數據共享率嚴重不足
2014年開始,“大數據”不再作為概念進行傳播,而是作為戰略布局深入各地區引領社會經濟發展,隨著各省大數據產業園區建設步伐的加快,我國大數據產業布局即將形成。十月以來,隨著重慶仙桃數據谷正式啟動建設,新疆與阿里巴巴戰略合作,至此,全國在建的各種大數據園區已經突破100家,
通過對這些大數據園區進行系統研究發現,這些園區存在著資源共享率低、利用率低、信息采集重疊率高,信息不一致、不完整等諸多問題。其中,數據共享率低的問題尤為嚴重,初步統計,目前單個園區內的各大數據平臺數據共享率不足20%
一些城市大數據園區的相關負責人普遍認為,在智慧城市中,大數據正扮演越來越重要的角色。如何有效挖掘、分析大數據,是高效解決城市運營問題的關鍵。在實際智慧城市建設的基本操作層面,必須要十分強調數據的共享共用。當前,由于受多種利益驅動等因素的影響,數據共享共用的瓶頸制約在很大程度上尚未真正突破。
以現在各地各級政府各個部門都在大力建立和應用各自專屬的信息系統,一個人口數據庫,公安部門、計生部門、民政部門都有各自的信息平臺,甚至省、市、區各有不同的平臺,平臺間、系統間缺乏融合的載體,數據不能共享共用,形成了很多信息孤島。要解決這個問題,就要打破信息壁壘,進行信息系統的整合,讓已有的數據通起來。
問題二:部分行業Hadoop項目面臨失敗的危險
2014年,很多金融企業內部早期的大數據項目面臨這失敗的危險,原因很明確,這些項目往往是在企業剛做完數據倉庫之后,在大數據概念剛剛進入國內時,有些企業的IT部門為了爭取更多的預算和體現效績,倉促上馬,只是在原有數據倉庫基礎上做了簡單的資源共享,隨著業務的不斷擴大,這些早期的大數據項目遇到了成本、運維經驗等方面的多重壓力。
“部署大數據是要有成本的,購買軟件許可的費用、實施費用和因為大數據而添置的硬件費用等都不是一個小數目,起步成本是比較高的。大數據的收益是逐漸體現的,例如因為資源整合和縮減的空間占用,維護費用的減低都需要一定時間才能體現。更重要的是,用戶經驗的積累也需要時間,對初期的困難準備不足或者遇到困難就退縮,必然導致大數據項目的失敗。”這位負責人表示。