我們已經(jīng)進入了大數(shù)據(jù)時代,EMC、甲骨文、SAP相繼推出的內(nèi)存計算就是大數(shù)據(jù)時代下的產(chǎn)物。
云計算時代來了,隨之而來的還有大數(shù)據(jù)時代。
2011年一年產(chǎn)生了大概4個EB的數(shù)據(jù),這個數(shù)據(jù)很可能等于人類從公元前3000年到2000年所產(chǎn)生的全部數(shù)據(jù)的總和。
在數(shù)字化的經(jīng)濟當(dāng)中,每18個月我們的數(shù)據(jù)會翻一番。
內(nèi)存計算時代到來
很多人都在說:“不管磁盤是否消融,閃存都是將來的一個趨勢。”
在2011年,一個名為“內(nèi)存計算”的名詞突然出現(xiàn)在我們的視野中,EMC、甲骨文、SAP都相繼推出內(nèi)存計算的相關(guān)解決方案。
隨著內(nèi)存價格的下降,下一代的內(nèi)存計算時代即將來臨。由于計算速度量變產(chǎn)生的質(zhì)變,也已開始。
早在2008年,EMC就在企業(yè)存儲系統(tǒng)中率先采用了基于閃存的固態(tài)硬盤,去年五月份召開的EMC World 2011更將主題定位“當(dāng)云計算遭遇大數(shù)據(jù)”。EMC信息基礎(chǔ)架構(gòu)產(chǎn)品部總裁帕特·基辛格在EMC World上說明了EMC進一步促進閃存技術(shù)應(yīng)用的戰(zhàn)略,這項戰(zhàn)略涵蓋多個方面,旨在為客戶降低成本,并極大地提高存儲系統(tǒng)和應(yīng)用的性能。
而SAP的內(nèi)存計算產(chǎn)品HANA也從2010年就已傳出風(fēng)聲,去年6月SAP正式宣布內(nèi)存計算產(chǎn)品SAP HANA應(yīng)用軟件正式開始提供給全球客戶使用,SAP正式加入了內(nèi)存計算的戰(zhàn)場。
作為SAP老對手的甲骨文也在Oracle OpenWorld2011上發(fā)布了名為Exalytics的內(nèi)存計算系統(tǒng),作為Oracle的BI即將擁有的智能機,其1TB內(nèi)存的配置也宣示著甲骨文對于內(nèi)存計算領(lǐng)域的不甘人后。
那么內(nèi)存計算究竟能帶給我們什么呢?SAP公司聯(lián)席CEO和執(zhí)行董事會成員孟鼎銘這樣形容SAP內(nèi)存計算技術(shù)的作用:“這是有史以來第一次一個公司可以把銷售以及市場細(xì)分的數(shù)據(jù)帶到云中,而且是以實時方式進行,同時對市場重新細(xì)分,重新調(diào)整企業(yè)的流程、企業(yè)模式,以及企業(yè)營銷模式。”
在一個數(shù)字化的經(jīng)濟體里,智能電表能夠追蹤能源使用量,同時它也能夠?qū)崟r地分析幾十億個數(shù)據(jù)電,通過這種方式,能源可以得到節(jié)約,而可再生能源也能夠得到使用,環(huán)境會變得更好。
就像孟鼎銘所說:“深刻的根本性的變化正在發(fā)生,而這將徹底地改變企業(yè)經(jīng)營的方式。企業(yè)需要更加社會化,更加體貼客戶的需求,以及客戶的客戶的需求”。
大數(shù)據(jù)與云計算
正是基于這樣的需求,在大數(shù)據(jù)的時代背景下,內(nèi)存計算技術(shù)應(yīng)運而生,正如孟鼎銘所說:“我們能夠?qū)Y(jié)構(gòu)性的數(shù)據(jù)和非結(jié)構(gòu)性的數(shù)據(jù)進行整合。我們有各種各樣新的商業(yè)模式可以進行模擬,可以調(diào)整我們的制造結(jié)構(gòu),可以重新考慮我們的市場細(xì)分和價格戰(zhàn)略,所有的這一切,都是在幾秒鐘內(nèi)可以完成的,這個在以前完全是令人難以置信的。”
如果說內(nèi)存計算技術(shù)出現(xiàn)的充分條件是大數(shù)據(jù)時代下,企業(yè)對于數(shù)據(jù)處理的高要求,那么內(nèi)存價格的不斷下降,就是內(nèi)存計算技術(shù)得以發(fā)展的必要條件。
采用內(nèi)存計算,必須把大量的數(shù)據(jù)裝載在內(nèi)存中,對于內(nèi)存的開銷就會比傳統(tǒng)的數(shù)據(jù)庫解決方案要大很多。
幸運的是,IT中間件的發(fā)展仍然按照摩爾定律不斷在前進,內(nèi)存價格也在不斷下降,就像SAP解決方案和架構(gòu)部總經(jīng)理張志琦所說:“十年以前你跟他談1個TB的內(nèi)存,人家會覺得你是一個瘋子;現(xiàn)在4兆內(nèi)存條差不多2萬塊錢,這2萬塊錢對于一個企業(yè)本身的IT投入來說是很小的”。因為最底層的半導(dǎo)體技術(shù)提升,造成軟件行業(yè)的進一步變化,幫助整個產(chǎn)業(yè)進行更大的提升,這也是一個必然的趨勢。
同時相關(guān)技術(shù)的應(yīng)用,也可以降低使用內(nèi)存代替硬盤而提高的成本,比如SAP HANA的內(nèi)存壓縮技術(shù),就可以以超過20倍的方式去壓縮數(shù)據(jù)。一個TB的數(shù)據(jù),以20倍壓縮,只需要50GB就可以,這樣一來,內(nèi)存成本就可以直線下降。
通過加速大數(shù)據(jù)的處理速度,會給我們的商務(wù)活動乃至生活以從量變到質(zhì)變的過程,張志琦給記者舉了農(nóng)夫山泉的例子:“農(nóng)夫山泉是SAP內(nèi)存計算技術(shù)的第一個客戶,其所有的銷售數(shù)據(jù)加載在HANA里面,然后進行分析和計算。在它原來的平臺之上,不可能把所有的歷史數(shù)據(jù)完全加載計算。如果非要計算也可以,但分析的周期可能是以年為單位。HANA使他們有機會把所有的歷史數(shù)據(jù)加載進去,短短的幾秒鐘之內(nèi)完成所有假設(shè)的分析,按照區(qū)域、天氣來進行銷量的分析,這些分析在原來是不可能做到的。”
不只是對于大企業(yè),小型企業(yè)也需要面臨大數(shù)據(jù),也需要內(nèi)存計算,張志琦認(rèn)為:“在整個業(yè)界有這樣一個趨勢,大數(shù)據(jù)不等于大企業(yè)”,任何規(guī)模的企業(yè)都會面臨到大數(shù)據(jù)的話題,張志琦說:“無論多大規(guī)模企業(yè)都會通過網(wǎng)絡(luò)營銷方式接觸更多的客戶。最基本的營銷方式通過微博、論壇,更多媒體廣告進行。比如通過微博的方式,能夠產(chǎn)生的數(shù)據(jù)是幾何級的,這個產(chǎn)品到底賣的好不好,消費者喜歡不喜歡,有沒有提升的空間,都可以通過消費者之間的輿情監(jiān)控方式來很好的獲取,無論企業(yè)規(guī)模多大。”
在大數(shù)據(jù)時代,內(nèi)存計算技術(shù)不只可以應(yīng)用于商業(yè)領(lǐng)域,還可以改變我們的生活,我們國家來的人口政策、臨床醫(yī)學(xué)的科研,乃至民生的工程中,都要牽扯到復(fù)雜計算和運算,而內(nèi)存計算技術(shù)都可以為這些行業(yè)和事業(yè)做出更大的貢獻。
防患于未然
內(nèi)存計算與云計算的結(jié)合無疑令人興奮,基于SAP HANA的新一代內(nèi)存應(yīng)用產(chǎn)品SAP BusinessObjects就可以應(yīng)用在云端。
但如果將內(nèi)存計算技術(shù)應(yīng)用在云端,這里存在一個非常明顯的問題,雖然通過運用內(nèi)存計算可以在云端實現(xiàn)高速的信息提取以及計算,但這些計算后的數(shù)據(jù),最后是要被一個一個分散的終端所使用,WEB模式失利的陰影還籠罩在我們頭上,即信息傳遞到分布式的客戶端是需要時間的,在來回請求的過程中,信息的傳輸速率卻不會因為內(nèi)存計算的應(yīng)用而得到加強,而只會受到帶寬的影響,目前國內(nèi)的帶寬能否負(fù)擔(dān)的起大數(shù)據(jù)的傳輸仍是一個問號,而缺少了足夠帶寬的支持,內(nèi)存計算能夠帶給我們多大的量變還是一個問題。
這樣考慮的話,相比較于那種“一片大云”的模式,蘋果那種“一些小云”的模式可能更適合未來內(nèi)存計算應(yīng)用在云計算領(lǐng)域,依托于蘋果強大的終端計算能力,iCloud形成了類似有服務(wù)器的P2P網(wǎng)絡(luò),這種云計算模式既避免了WEB模式的陰影,又可以充分利用內(nèi)存計算的高速信息處理能力。
在內(nèi)存增大的情況下,如何處理散熱問題也需要及早的注意,全球各大互聯(lián)網(wǎng)企業(yè)為了解決自己數(shù)據(jù)中心的散熱問題,早已無所不用其極,有利用雪山散熱的、也有利用海水散熱的,而大量內(nèi)存產(chǎn)生的熱量如何散去,也是一個難題。
另外,利用內(nèi)存來提取數(shù)據(jù)固然極大地提高了信息處理速度,但緩存的大量占用,需要面臨的首要問題是如何清理臨時內(nèi)存,如果不能及時清理臨時內(nèi)存,運算速度必將受到嚴(yán)重的影響。
同時,目前大部分病毒都是針對內(nèi)存展開攻擊,如果未來內(nèi)存計算技術(shù)大量普及,甚至完全取代了硬盤,那么我們的信息安全如何保證,如此花樣繁多的針對內(nèi)存的攻擊手段,我們?nèi)绾畏纻湟彩切枰⒁獾摹?/p>
總之,內(nèi)存計算在未來是大勢所趨,這個大趨勢是不會變的,目前EMC、甲骨文、SAP都在內(nèi)存計算領(lǐng)域發(fā)力的戰(zhàn)略眼光是正確的,但內(nèi)存計算畢竟是一項較新的技術(shù),如何在以上那些隱患暴露之前做好預(yù)防措施,則是決定未來成敗的關(guān)鍵。