企業網D1Net 2014年2月11日:
目前大數據市場日益升溫,由此大數據驅動了巨大的消費增長。
研究公司IDC預計大數據技術和服務市場將以27%的速度逐年增長,到2017年達到324億美元。
盡管資金是流動的,但是并不總是很清楚在經過了早期的采用階段企業是否獲得了成功。為了確定這一點,研究者調查了一些IT決策者和經理,這些人分享了他們企業關于大數據計劃、投資和重點的細節。
這項調查的對象是處于大數據部署各個階段的一些公司。已經部署了大數據項目的公司占19%,正在部署大數據項目的公司占25%。在未來12個月將部署大數據項目的公司占16%,在未來13-24個月將部署大數據項目的公司占16%。剩下的23%將在較長的時間段內部署大數據項目;這些受訪者在未來可能部署大數據項目,但都在努力尋找正確的戰略和解決方案。
下面的圖片中顯示,大數據在各行業各種規模的企業中的地位正在變得越來越重要。當被問及大數據計劃在其企業的重要級別時,53%的人認為他們的項目至關重要或處于高等優先級,另有34%的人表示其項目處于中等優先級,僅有12%的人表示其項目處于低等優先級。
下面是受訪者關于大數據部署的一些經驗和觀點:
1.企業想做更好的決策,想更快地做決策
為什么要部署大數據項目?因為它在企業做出決策的質量和做決策的速度方面起著至關重要的作用。驅動企業投資大數據項目的兩個最流行的目的是提高決策的質量(在受訪者中占59%)和加快做決策的速度(在受訪者中占53%)。
緊隨其后的部署大數據項目的目的是改善規劃和預測(在受訪者中占47%);開發新的產品/服務和收入來源(在受訪者中占47%);提高獲得新客戶和留住老客戶的能力(在受訪者中占44%);建立新的業務合作伙伴關系(在受訪者中占34%)。
2. PB級數據?對于大公司來說已經成為現實
公司已經積累了巨量關于其客戶和業務的數據集。在所有的受訪者中,其所在的公司要處理的數據量平均為164TB。當問到他們在未來的12-18個月中估計要處理多少數據時,受訪者的預計的數據量平均為289TB,這就意味著比之前增長了76%。
如今,有6%的受訪者表示現在管理的數據已經超過了1PB;在未來的12-18個月中,這一比例將上升到14%。在最大的公司(年收入至少10億的公司)中,有31%預計管理超過1PB的數據。
3.公司感受到了數據負載的壓力
當有巨大數量的數據涌入公司時,公司將受到嚴重的影響。例如:由于無法迅速地找到所需要的信息而丟失業務(11%的受訪者表示經常發生,31%的受訪者表示偶爾發生);重要決策的延遲(14%的受訪者表示經常發生,39%的受訪者表示偶爾發生);面臨大量數據,用戶變得不堪重負(19%的受訪者表示經常發生,46%的受訪者表示偶爾發生);數據安全過失(4%的受訪者表示經常發生,15%的受訪者表示偶爾發生)。
4.公司準備投資大數據項目;目前投資回到率不是主要障礙
調查發現,有限的預算是部署大數據項目面臨的最大挑戰。在受訪者中,不同的市場,投資額度會有不同。在低端市場,19%的受訪者表示明年在大數據計劃上的投資不到10萬美元。在高端市場,29%的受訪者表示他們的投資將超過100萬美元(其中有2%的受訪者聲稱他們在大數據項目上將投資1億美元或更多)。
公司在大數據項目上的投資領域有很多,其中包括:
開發或購買應用軟件(占38%)
投在另外的服務器或存儲硬件/軟件(占37%)
使用開源軟件框架(如Apache Hadoop)(占30%)
將存儲遷移到云端(占28%)
增加網絡帶寬(27%)
將數據分析遷移到云端(26%)
雖然預算是最大的問題,但是投資回報率不那么緊迫。僅有26%的受訪者表示將投資回報率看成主要障礙。
5.公司感覺到了大數據人才的短缺
公司擔心他們是否有合適的員工——例如大數據科學家——在公司實施他們大部分的大數據計劃。在公司職員的雇傭方面,34%的公司招聘有數據分析技巧的人員,26%的公司招聘的人員需要具備大數據專業知識。
當被問及在未來12-18個月中,他們計劃招聘哪些職員時,他們的答案是:數據科學家(占27%)高居榜首,其次是:數據架構師(占24%),數據分析師(占24%),有數據可視化技能的人員(占23%),業務分析師(占21%),研究分析師(占21%),數據分析總監或經理(占19%),數據庫程序員(占19%)。
6.數據安全性是一個問題,但不是最大的問題
調查結果顯示,有限的預算和人才短缺是公司部署大數據項目時面臨的兩個最大的挑戰。關于公司部署大數據項目時遇到的問題,受訪者還提到了安全問題(占35%),開發時間(占35%),遺留問題,如與現有工具的集成(占33%),糟糕的數據質量(占32%),整合或分析實時數據的困難(占30%)。
關于安全話題,接近一半的受訪者(49%)表示他們現有的安全解決方案和產品為其大數據項目提供了足夠的安全保障。29%的受訪者表示他們現有的安全解決方案和產品沒有為其大數據項目提供足夠的安全保障,22%的受訪者不清楚。
7.業務集成和文化接受,哪個更難?
研究者向受訪者調查了將大數據計劃融入企業的業務流程和文化中的困難程度。按照極具挑戰性或非常有挑戰性來劃分,文化接受(占54%)要比業務流程集成(占50%)困難一些。
8.IT部門主導大數據計劃,但是大數據項目是否成功取決于跨部門的合作
受訪者表示,大數據項目一般由IT部門主導:46%的受訪者表示在他們的企業由高層或執行IT部門主導大數據計劃,44%的受訪者表示IT管理部門運行他們的大數據項目。但是不是他們單獨做:36%的受訪者表示其執行企業領導也參與其中。此外,受訪者表示他們的大數據工作獲得了CEO(占47%)或LOB(占34%)的支持和贊助。IT部門和企業領導都同意,當通過共同實施來解決具體的業務挑戰時,大數據項目就獲得了最大的成功。
9.對于許多公司來說,大數據的發展勢頭將繼續高漲
展望未來,接近一半(占48%)的受訪者預計,在未來三年內,大數據在企業中將被廣泛使用,另有26%的受訪者預計,在企業的一個或多個業務單元,部分或分部,大數據的使用將成為主流。僅有5%的受訪者認為他們的大數據計劃在大數據的鼓吹停下來之后將平靜下來,另外的5%不清楚。其余16%的受訪者預計,他們仍將使用大數據,但是不會在其主流產品中使用。