摘要：大數據技術現如今已經發展到了炙手可熱的地步，而種種的跡象顯示，這一趨勢在2015年還將持續下去。為此，MapR公司首席執行官兼共同創始人約翰·施羅德將在本文中將為我們預測在新的一年里，在該領域占主導地位的五項大數據技術。

在短短的幾年內，大數據技術已經從單純的炒作發展成為了一個新的數字時代的核心。在過去的2014年，我們看到大數據項目紛紛大舉進入到企業內部從測試到生產的各個環節。2015年，大數據將進一步推進到企業更多的使用案例，特別是實時應用案例。MapR公司首席執行官兼共同創始人之一約翰·施羅德表示。

“今年對于那些遷移到大數據項目的企業而言，除了數據的遷移之外，他們還將成為首批能夠實現實時部署的企業。”施羅德說。“而這是由現有的行業領導和未來的新領導們充分意識到新的大數據平臺及大數據分析能夠給企業業務帶來巨大影響所推動的。”

施羅德表示，五大主要的技術發展趨勢將主導2015年。

1、數據的靈活性成為最大的焦點

隨著傳統遺留數據庫和數據倉庫的進程已被證明太慢，而且對于現如今的多業務需求缺乏靈活性，數據的靈活性已然成為企業部署大數據技術背后的一大重要驅動因素了。施羅德說，在2015年，隨著企業將關注焦點從簡單的捕捉和管理數據轉移到積極的使用數據，數據的靈活敏捷性將變得更加重要。

“傳統的數據庫和數據倉庫的成本是如此的昂貴，以至于DBA的資源將需要用來平衡總結和全面結構化的數據，”他說。“前期的DBA費用延遲訪問新的數據源和剛性結構很難隨著時間的推移而改變。最終的結果是，傳統的數據庫不夠靈活，無法滿足目前大多數企業的需要。”

“最初的大數據項目將重點集中在目標數據源的存儲方面。”他補充道。“而不是有多少數據被進行了集中管理，企業將把他們的重點轉移到測量數據的靈活性方面。數據的處理能力如何，以及數據分析對于業務操作的影響怎樣?在瞬息萬變的市場競爭條件下，他們如何能夠迅速調整以應對客戶的喜好?這些問題將直接影響2015年大數據項目的投資范圍。”

2、企業將從數據湖轉移到數據處理平臺

從某些方面而言，2014年是數據湖年(或data hub)，這是一個基于對象的存儲庫，以原生格式存儲原始數據——無論是結構化，非結構化或半結構化的，直到其準備被使用。數據湖有一個強大的價值主張，代表了一個可擴展的基礎設施，在經濟上極富吸引力(降低每TB的存儲成本)，且具有靈活性。

施羅德說，數據湖在2015年將繼續發展，使多計算和執行引擎能夠在數據湖就地處理數據。這不僅更高效，而且還創建了一個單點管理和單點安全。

“在2015年，數據湖將隨著企業從批量處理轉移到實時處理和整合基于文件的處理，以及采用Hadoop和數據庫引擎到其大規模處理平臺一同演變。”他說。“換句話說，關鍵并不在于數據湖大規模的存儲以支持更大的查詢和報告;2015大趨勢將是獲得持續的訪問。實時處理事務和數據，以獲得連續的感知并立即采取行動。”

3、自助服務的大數據成為主流

大數據工具和服務方面的進步意味著2015年IT將不再成為企業用戶和數據科學家進行數據訪問的瓶頸，施羅德說。

“在2015年，IT將迎來大數據自助服務，讓企業用戶實現大數據的自助服務，”他說。 “自助服務將大大有助于開發人員，數據科學家和數據分析人員，使它們能夠直接進行數據探索。”

在此之前，需要IT建立統一的數據結構。他補充道。“這是一個相當耗時和成本昂貴的步驟。Hadoop使企業在一些應用案例中適應了structure-on-read的結構模式。先進的企業轉移到執行數據綁定，并遠離中心結構以滿足持續的需求。這種自助服務加快了企業利用新的數據源的步伐和應對機遇和威脅的能力。”

4、Hadoop供應商的整合：新的商業模式的演變

2013年初，英特爾發布了其Hadoop的分發版引起了業界的轟動，該公司表示，他們采用了直接將 Hadoop整合到芯片的一種全新的方法。但僅僅一年后，英特爾就放棄了其分布式版本，并迅速被Hadoop分布供應商Cloudera所取代。

當時，英特爾公司指出，客戶對于Hadoop市場將如何洗牌都還處于觀望狀態。而市場上Hadoop產品的數目也是魚龍混雜。施羅德認為，在2015年，隨著市場優勝劣汰，失敗的企業不再繼續推出其Hadoop分發版，轉而將關注其他領域，Hadoop供應商的整合還將繼續。

“開源軟件(OSS)的采用到現在已經有20年了，其提供了巨大價值的市場。”施羅德說。“在技術成熟階段。該技術的生命周期開始于創新和創造的高度差異化的產品，并結束于產品最終商品化。科德通過創新，在1969年創建了關系數據庫的概念，從而導致了甲骨文于1986年IPO，并從1995年開始商品化其第一款MySQL版本。所以從歷史上看，數據庫平臺技術從創新到最后的商品化成熟經歷了26年的時間。”

“而Hadoop技術還處于其技術發展成熟的早期，自從MapReduce白皮書由谷歌發布以來，僅僅才經歷了10年的時間。” 他補充道。“Hadoop在全球范圍內的采用和規模遠遠超出了任何其他數據平臺在其最初的概念提出僅僅10年后的狀況。Hadoop仍處在創新階段，所以供應商誤用“紅帽Hadoop”策略這種現象正在退出市場，最值得關注的是英特爾和EMC Pivotal。”

施羅德認為，2015年，我們將會看到一個新的，更精細的OSS模型系統，該模型系統將結合社區發展的深刻創新變革。“開源社區對于建立標準和共識是最重要的，”他說。“競爭是Hadoop從最初的批量分析處理器轉化發展到功能全面的數據平臺的催化劑。”

5、企業架構師將不再炒作大數據

2015年，隨著企業架構師們提高了對于Hadoop技術堆棧的認知，他們將發揮中心作用，將帶來更好的大數據需求定義和更先進的大數據應用程序，包括高可用性和業務連續性。

“隨著企業在數據中心從實驗階段到實際部署階段步伐的加速，企業架構師將逐步走向大數據項目的前端和中心。”施羅德說。IT領導的基礎架構決策對于滿足SLA，提供高可用性，業務連續性和滿足關鍵任務需求是至關重要的。2014年， Hadoop蓬勃發展，并由此產生了大量的應用程序、工具和組件。2015年，市場將集中于跨平臺的差異，整合Hadoop到數據中心，以便滿足業務需求交付方面。