EMC已經開發出一項令人矚目的緩沖技術,能夠將其VNX中端企業級存儲產品轉化為高性能計算級存儲資源,并利用aBBa緩存方案提供原始速度與VNX存儲容量。
高性能計算的計算能力極為可觀,以VNX為代表的現有企業級陣列根本無法滿足其對數據接收乃至數據訪問速率的要求。有鑒于此,DataDirect以及Panasas等專業供應商開始在高性能計算存儲領域贏得優勢地位,而企業系統供應商們則通過OEM或者轉售前者產品的方式努力在高性能計算存儲市場上占得一席之地。
正是出于這樣的考量,惠普公司也開始利用自身銷售渠道向高性能計算市場銷售Data Direct存儲產品。目前EMC已經選擇開發自己的突發式緩沖緩存技術,希望為其現有VNX陣列賦予必要的功能、從而在高性能計算領域與惠普公司一爭高下。
突發式緩沖機制以閃存為基礎,其速度表現非常出色、足以應對處理器在偶爾出現后端陣列寫入數據IO不足時對傳輸能力提出的挑戰。針對這一解決思路,EMC打造出aBBa、而DDN則研發出了IME技術。
(注意:此aBBa非彼ABBA:)
EMC公司在本屆德國萊比錫國際超級計算展會上公開了其演示系統,如果用比較粗糙的語言來形容、這是一套利用融合型基礎設施作為高性能計算級Vblock架構的解決方案。其中包括:
三臺網絡交換機
HSM(即分層式存儲管理)設備
突發式緩沖緩存
VNX Lustre設備
這款全稱為突發式緩沖設備(簡稱aBBa)的產品使用NVRAM,根據EMC的說法,它能夠將檢查點數據吞吐能力提高達十倍,搭配專門為洛斯阿拉莫斯實驗室的文件共享檢查點機制所研發的PLFS虛擬文件系統。PLFS利用aBBa作為其突發式緩沖存儲機制。
VNX Lustre設備在標準機架中能夠提供最高1.44PB存儲容量,傳輸帶寬則為每秒20GB。它集成了開源Lustre并已經能夠支持FDR/QDR InfiniBand、每秒40Gb以太網、SSD以及近線SAS硬盤驅動器。VNX與突發式緩沖技術相結合的產物被EMC公司命名為LustreaBBa或者LaBBa。它屬于Lustre并行文件系統存儲體系當中的閃存層。LaBBa能夠管理從NVRAM緩沖到磁盤的整套自有分層結構,EMC指出它被定位為一套突發式緩沖-加速Lustre對象存儲服務器。另外,從全局角度看它利用分層Lustre對象取代原本的塊存儲機制,從而使Lustre的性能表現提升達4倍。
演示系統當中的另一套aBBa實施方案則利用突發式緩沖設備作為前端Isilon向外擴展文件存儲機制,其具體名稱為GrauXtreemStore分層式存儲管理(簡稱HSM)設備。Grau提供配備軟件以及一款Isilon插件,該插件在系統內部利用PLFS將數據移動的處理速度提升至每天1PB。根據EMC方面的說法,同樣的效果在GPFS以及Lustre上也能夠實現——事實上任何配備有HSM管理方案的并行文件系統都可達到同樣的性能指標。
Lustre文件系統可以在將Isilon節點作為輔助存儲機制的VNX陣列之上正常運作。而Grau HSM技術則被用于處理兩者之間的數據移動任務。
高性能計算就像是采煤工作面,決定作業效率的壓力主要集中在傳輸速度低下的磁盤存儲身上,而且偶爾需要擁有速度更快的其它存儲方案滿足其突發性需求。隨著GPU被逐步添加到CPU計算體系中用以提升處理能力,這樣的狀況顯然正變得越來越糟糕。突發式緩沖機制是高性能計算工程技術人員最為推崇的解決辦法,而且EMC與DDN雙方都拿出了自己的突發式緩沖技術成果。我們可以預期,隨著時間的推移、這項技術將被整合到高性能計算數據存儲體系當中,例如被添加到存儲陣列控制器內。
根據我們掌握的情況,EMC將把DSSD技術、PCIe訪問機架擴展閃存存儲與aBBa混合成一套統一方案。該公司目前正在為其aBBa技術開拓市場業務,而且我們預計實際產品將在未來六到十八個月內正式亮相。在我們看來,面向金融貿易業務的大數據實時分析處理將成為其發揮作用的主要舞臺之一。