在最近的Open Compute Summit 2013大會上,Open Compute Project開源硬件項目的參與者們展示了一些Open Vault JBOD存儲陣列相關的改進。目前,Facebook它最新建成的兩座數據中心內已經使用了Open Vault JBOD存儲陣列,而且預計會添加到現有的數據中心內。
這款Open Vault陣列代號為“Knox”,是Facebook貢獻給Open Compute Project開源硬件設計的。除此之外,Open Vault還被Facebook用作為一種冷存儲,保存它近2400億張的圖片。現在,Facebook的圖片數量以每天增加3.5億張,也就是每個月7PB。
Open Vault是一種JBOD陣列,意味著它只是一堆磁盤,掛載到一臺服務器內部的SAS控制器。而在Facebook,它是一種定制的Open Compute V2服務器,采用英特爾定制的“Windmill”雙路至強E5服務器節點。
Open Vault陣列有2個1U磁盤抽屜,每個抽屜容納15個3.5英寸SAS驅動器,2個SAS擴展器板。4個SAS擴展器板連到服務器,讓Open Vault中所有30個驅動器看起來像是直接連到服務器的。Open Vault的設計讓任何磁盤或者任何一個SAS擴展器都可以更改,而無需讓JBOD離線。
雖然Open Vault很不錯,但是它缺少一個“智能的大腦”。因此,通過代號為“Knockout”的擴展版Open Vault,ARM服務器芯片初創公司Calxeda和英特爾都在開發各種變體版本,將智能功能和互連特性注入到每個JBOD中,把它變成一個更加智能的存儲集群。
Frankovsky展示的第一個計算主板,即將投入生產,它是基于ARM的計算附加卡,同時也是基于Calxeda的32位 ECX-1000處理器。
用于Open Vault JBOD的一個Calxeda ARM服務器節點
Calxeda產品營銷經理Gina Longoria解釋說,這個想法讓那些部署Open Vault存儲的企業,可以在每個Open Vault抽屜中去運行Lustre或者Gluster集群文件系統代碼,也許只使用機架中的一個x86節點去運行一個頭節點。
額外的計算能力還可以用于運行其他存儲軟件,例如Ceph分布式對象存儲——它與Open Stack、甚至是Facebook為了克服MySQL關系數據庫而創建的Cassandra NoSQL有著密切聯系。
究竟什么軟件可以運行在一個智能的存儲服務器上,這并不是問題的關鍵。讓Open Vault變得既廉價,又擁有一些智能特性,這才是關鍵。
英特爾也希望參與其中,同時它也是Open Compute Project的成員之一,因此Frankovsky小心翼翼地拿起另一塊類似的智能轉接卡進行展示。它是基于英特爾未來的“Avoton”Atom S系列處理器,預計將有片上以太網連接特性:
用于Open Vault存儲的一個英特爾“Avoton”Atom服務器節點
Calxeda的板子上有一個ECX-1000處理器,帶有4個Cortex-A9核心,主頻1.4GHz,4GB DDR3主內存,1.33GHz。此外還有2個RJ45端口,支持千兆網速,5個SATA端口增加器,支持一個Open Vault抽屜中的所有驅動器。
這個卡可以用于運行軟件RAID,或者運行iSCSI目標軟件,映射自機架頂部的x86頭節點。你愿意多掏些錢的話,還可以在這個卡上配置SFP+或者QSFP端口。
目前的“Knox”Open Vault和增強了計算能力的“Knockout”
再或者,如果你想要更便宜更好的選擇,你可以使用CX4連接器,在ECX-1000芯片上利用片上分布式Layer 2網絡也是非常聰明的做法。首先,你可以在Windmill頭節點和增強了計算能力的Open Vault JBOD之間放一個24端口的千兆以太網交換機。
這個交換機可以連接JBOD到其他Windmill頭節點以獲得冗余性,避免機架中發生單點故障。然后你可以在本地ARM節點或者基于Atom的節點上,添加數據壓縮、散列、或者其他算法。
不過,通過將ECX-1000服務器節點用于Open Vault JBOD中,你可以做另外一件事:跨機架交叉耦合陣列和他們的計算節點,下面是一個例子:
告訴你如何利用EXC-1000上的互連,去做存儲JBOD之間的2D-Torus網絡
Knockout服務器板有4個萬兆以太網端口和ECX-1000芯片,你可以啟用集成的Fleet Services結構,使用頂架交換機去處理從陣列到網絡的南北流量,運行應用,使用Fleet Services互連在跨多個機架的東西網絡上提供數據復制和其他服務。
所有這一切都發生在Open Vault中,以及存儲集群頭節點一無所知的情況下。這還意味著,x86節點在內存和CPU方面可能不用那么強大,事實上,據Longoria稱,如果你需要的話,甚至可以將一個ARM服務器陣列作為頭節點。
當然,這樣的話,Calxeda肯定很高興。