Hadoop大數據部署軟件供應商CEO John Schroeder關于2014年大數據發展的8個預測,John Schroeder認為在新的一年里企業主管的主要發展思路是將大數據變成為企業必須具備的基礎設施,以下是有關技術發展和市場走向的8個預測:
預測一:SQL依然是大數據發展的一個矛盾點,首先SQL依然是Hadoop的業務分析師以及項目的開發人員的首選工具,開發人員可以選擇hive、drill和impala等apache項目,以及選擇Hadapt、Hawq和Splice Machine等公司的專有技術。但是SQL還面臨著一個嚴峻的挑戰——那就是SQL需要數據結構,而集中的結構化數據可引起延遲并且需要人工管理。SQL還限制分析類型。過分強調SQL將延遲機構全面利用其數據價值的腳步和延遲反應。
預測二:在2014年安全問題依然是制約技術發展一個難題,其中身份識別、認證是主要的數據安全問題,隨著Hadoop(分布式計算)中提供的接入控制能力的猛烈攻擊,機構迅速認識到線路級身份識別是必要的基礎。沒有充分的身份識別與認證機制,任何更高級的控制都很容易被繞過,妨礙預定的安全計劃。
預測三:眾所周知數據的不斷發展中,總會有一些錯誤的數據,這些錯誤的數據可能導致中下游的分析出現偏差,導致跨部門或者業務部門的操作缺乏一致性等等,那么如何將錯誤的數據變成對企業有幫助的東西呢?2014年我們將會看到數據異常問題的解決方案。
預測四:Hadoop即將入戶各大企業,2014年將看到Hadoop在各個行業中的生產部署顯著增加。這將顯示出Hadoop在運營中的實力。在那里,生產應用與分析結合在一起能夠提供可以衡量的商業優勢,如在客戶化零售建議、詐騙檢測和試驗傳感器數據進行規范的維護等場景。
預測五:更多的數據倉庫將部署企業數據中心,2014年將會看到大多數公司的數據中心把數據提取處理和數據從企業數據倉庫卸載到Hadoop,這樣Hadoop將成為企業中心,并且能夠對額外的處理或者新的應用進行更多的分析,同時還可以大幅度的降低數據中心的成本。
預測六:每個行業都會部署一個新的以數據為中心的應用,因為在2014年大數據的利用能力將會是企業間競爭的核心武器,更多的公司將使用大數據和Hadoop準確地針對個人消費者的偏愛追逐追加銷售和交叉銷售的機會,更好地緩解風險以及減少生產和開銷成本。
預測七:數據成為每個數據中心的重中之重,在2014年,it部門將越來越多地擔負定義支持多種應用的數據基礎設施的任務,把重點集中在部署、處理和保護一個機構的核心資產所需要的基礎設施方面。
預測八:2014年非結構化的查詢語言將會成為搜索的中堅力量,同時由于2013年有大量的用于Hadoop的SQL計劃。2014年將是這種非結構化查詢語言成為重點的一年。把搜索集成到Hadoop將為查找重要信息的企業用戶提供一種簡單和直觀的方法。搜索引擎還是包括推薦引擎在內的許多發現和分析應用的核心。