隨著大數據炒作期的結束,國內外大量企業開始投入大數據實戰,大數據生態產業鏈逐漸形成。整體而言,全球的大數據應用處于發展初期,中國大數據應用才剛剛起步。目前,大數據應用在各行各業的發展呈現“階梯式”格局:互聯網行業是大數據應用的領跑者,金融、零售、電信、公共管理、醫療衛生等領域積極嘗試大數據。現階段制約大數據發展的因素有三方面,分別是數據、技術和應用。
大數據產業鏈的參與者主要包括:
數據提供商、分析技術提供商、基礎設施提供商、業務應用提供商。
基礎設施提供商在基礎設施方面,非關系型數據庫和高擴展性、高性能數據庫發展迅猛,競爭十分激烈,例如Redis、SkySql、Cassandra、 CouchDB、MongoDB等,Hadoop平臺部署市場由于門檻較高,除了Cloudera、Hortonworks等少數幾家由大型互聯網公司高管創建的新興公司外,其他市場均被微軟、IBM、Amazon等傳統巨頭所占據。
Cloudera 是一家Hadoop數據管理軟件與服務的提供商,為企業搭建和使用分布式平臺提供服務,是大數據領域最強的解決方案服務商之一。公司目前的業務主要分為三大部分:Hadoop發行版(軟件、一體機、云服務),Hadoop專業服務和Hadoop技術培訓。讓Hadoop變得更簡單,Cloudera一直走在最前面,包括提供了第一個基于開源Hadoop的商業發行版,第一個添加NoSQL(HBase)到Hadoop平臺,第一個在HDFS上提供SQL查詢能力的平臺(Impala),第一個將流數據處理能力(Spark)添加到Hadoop發行版的廠商。
Amazon 是一家通過云基礎構架服務支撐其零售業務的大數據公司,其網絡服務為客戶提供基礎設施產品。提供服務包括:亞馬遜彈性計算網云(Amazon EC2)、亞馬遜簡單儲存服務(Amazon S3)、亞馬遜簡單隊列服務(Amazon Simple QueueService)以及Amazon CloudFront等。其優勢是:1)用低廉的月成本替代前期基礎設施投資;2)持續成本低:縮減您的 IT 總成本;3)靈活性:消除您對基礎設施容量需求的猜想;4)速度和靈敏性更快地開發和部署應用程序;5)應用而非運營;6)全球性覆蓋。
數據和數據能力提供商阿里巴巴則是手握海量數據的大數據參與者,擁有淘寶、天貓海量的在線交易數據,并融合微博、高德、友盟、UC瀏覽器、快的等各種應用數據,涉及金融、旅游、健康、物流等方方面面數據。旗下的淘寶網提供的淘寶賣家服務通過出售這些數據幫助淘寶店鋪進行基礎經營分析、商品優化分析、訂單分析以及營銷效果分析。產品包括數據魔方、淘寶指數、阿里經濟云圖、螞蟻金融、淘數據等。
分析技術提供商在分析工具領域,Splunk 是最成功的新興企業之一。該公司機器數據的搜索引擎,可收集所有應用程序、服務器和移動設備設備(包括物理、虛擬和云端),生成索引,從一個位置快速搜索并分析所有實時和歷史數據。該公司已經取得巨大成功,是全球十家最有競爭力的大數據公司之一。
拓爾思(TRS)是中國最大的搜索技術和內容管理技術供應商,非結構化信息處理技術領域的領導企業。其數據中心具有強大的數據采集能力和強大的運算能力,以“平臺+行業解決方案+服務綜合”的產品線,為廣大政府和企業用戶提供產品和服務。
統計分析領域的Matlab、SAS,數據可視化領域的Visual.ly、Zoomdata、Chart.io分別提供可視化設計平臺、分布式數據展示工具和數據庫分析工具。
業務應用提供商在行業應用方面,廣告優化、市場營銷和金融等行業應用最為活躍。DOUBLECLICK是美國網絡廣告服務商,其核心技術是其專有的動態廣告報告與目標定位(DART)技術,企業可以通過中央服務器管理各自的廣告服務及統計報告。
互聯網廣告領域的最新模式——實時競價(RTB)與大數據關系密切,Google等公司的廣告平臺已經充分利用其自身數據來優化廣告效果,提升廣告收入。 Lattice Engines聚焦于B2B銷售行業的大數據應用,該公司的SalesPrism數據分析平臺能夠通過分析消費者消費傾向,向銷售人員提供營銷建議。金融領域大數據信用評估也開始流行,這讓Lenddo等非傳統金融企業也可以大規模開展貸款業務,該公司基于人們在社交媒體上的表現,將貸款服務拓展到了新興市場上。
國內大數據市場與國外還存在一定差距,從市場規模來看,國內的大數據產業鏈還只是初具雛形。目前全球最具影響力的前15家大數據企業中還沒有出現中國企業的身影,這也從宏觀上表明當前國內大數據市場仍處在發展初期。
從發展特點來看,國內大數據企業更依賴于數據資源,而新技術、新商業模式的突破則相對緩慢。例如在基礎設施領域,無論是百度、騰訊,還是淘寶、中國移動都推出了各自數據中心項目,通常以容量來衡量成就,而國外企業則已經把主要目光投向整體解決方案的設計,已經具備了較為清晰的、取得市場認可的大數據盈利模式。