2016年8月5日,全球開源領導廠商紅帽攜手ZD至頂網、Intel、云達科技共同舉辦的主題為“開放 融合 開源開啟存儲新世界”的2016年中國開源企業存儲峰會在北京富力萬麗酒店隆重召開。Chris Mawer 紅帽亞太區存儲業務總監出席此次峰會,并做了主題為“Gluster存儲:戰略方向、路線圖與集成”的精彩演講。
Chirs Mawer談到了存儲系統的重要性及存儲平臺這幾的變化。他認為,目前在各行各業的應用中,有很多仍然采用傳統存儲,但在拓展性、容量等方面非常有限?;谑袌鲂枨?,紅帽分布式存儲系統使用戶能夠進行拓展,基于現在商用的軟件之上,改變了原有的存儲方式,靈活且拓展性強。隨著傳統市場的逐漸萎縮,數據中心在不斷的演講,而且不斷變化,從源流的瀑布式到敏捷式轉變,這就是分布式的方向發展。
Gluster是紅帽存儲的一個產品,在工作量、工作的負載等方面都能夠滿足網絡方面的運營,比如研發運維一體化等,這些改變了我們云應用的互相方式,而且提升了性能及系統方式。在細節方面,Gluster也做了很多,刪碼、分層、即位衰減檢測等特征。
以下是演講精彩實錄:
存儲平臺跟以前是不一樣的,我們看到30年前存儲的平臺,軟件定義的存儲是一個新技術,我們有了這個新技術有了創新,Intel的伙伴、云達科技等等有很多不同的創新,今天跟大家說一下Gluster,Gluster是我們存儲的一個產品,我們看到了工作量、工作的負載,我們有傳統的一些應用,還有其他的工作量能夠滿足網絡方面的運營,比如研發運維一體化等,這些改變了我們云應用的互相方式,而且提升了我們的性能,提升了系統的方式。
大家看到左手邊的不同模式。大家可能看到視頻安全會有很多要求,但實際上視頻的監控,大家可以拷到今天高性能的視頻,可以實時分析數據,避免對社區的威脅,比如恐怖主義等,可以避免汽車碰到的一些情況。還有Gluster可以提供傳統的計劃,還有傳統的應用,還有Gluster可以進行擴展。
說到備份,任何工作軟件可以存儲、可以擴展,可以將你的系統進行大幅擴展,可以存儲更多的數據。
看一下文件,今天客戶不光有一個文件服務器,而且提供更多的信息。在任何時候任何地點都可以獲取這樣的信息,由Gluster支持這些項目的服務,我們第三方的合作伙伴也可以在Gluster文件基礎之上提供服務。另外我們可以網絡為基礎的網絡服務中使用Gluster等一系列的方法。在擴展方面可以到61 PB的情況下,所以可以想象一下,當前的筆記本是1—4G的內存,但現在61 PB,這里講到的是大量存儲,講到的信息都可以存儲上去,甚至是一些視頻。還可以看一下自動化的分層,例外還是一些比較受歡迎的內容分層存儲,這樣可以獲得規模經濟,同時也可以保證積極的受歡迎的信息放到存儲當中,不見得都要放上去。
另外要保護我們的信息,很多企業關注自己數據的保護,所以可以在一開始出現問題的時候抽取出來。當然如果看當前的存儲,沒有辦法在一個Gluster當中把硬件抽取出來。有了存儲系統的變化,可以把它看作是一個軟件產品,是在Gluster內部運行的,所以可以把當中的產品進行劃分,這樣沒有任何存儲的存儲模式,只是一個只讀的模式。大家看一下視頻監控、閉路電視的系統當中,中國很多城市保證一些城市進行反恐方面的工作。政府也開始對這些系統進行測試,也就是有大規模的投資,看到底在投資當中做怎樣的監控,確保系統的安全性,能看到它的重要性以及信息有多大。非常好的例子是超越存儲本身,可以對存儲信息進行分析。比如車走在路上的方向不對,逆行的時候就可以識別出來。甚至可以具體到看一個車的車牌號,然后給這個人來發罰單。還有其他的一些例子,如面部識別,都可以對每個人貼標簽。這些系統都是為了設計保護我們的夠民更加安全。這些先進的能力完全超過的數據存儲本身,進行數據分析,把存儲的信息拿出來進行分析。
視頻的安全系統通常是這樣的,由攝像頭產生很多信息,數據進入到存儲分析,還有遠程的數據中心,及長期的保存和分析??赡苓€有一些遠程用戶,他們是一些警方,可以通過手機進行IP攝像頭的設置。這改變了我們平時使用數據和分析數據的方式。如果用高清電視擴展到其中,需要很強的系統。另外是高清電視,廣播系統需要高質量的內容,這種內容非常大,我們需要非常強的能力才能夠應對當前數據的需求。這個電視是4K的電視,未來可能是8K的電視,至少要把數據存儲能力拓展一半以上。另外要把高清數據與手機適配,人們移動時可以看一些視頻或者媒體。所以存儲的信息非常多、畫質非常好。有了這樣的Gluster,最新的數據可以放到flash當中,還有各種各樣的視頻和電視,所編輯的過程都可以使用Gluster,跨行業進行服務。
這里是廣播的例子,可以涵蓋不同行業,而且分成多個服務器,運行不同的Gluster,還可以運行在不同的Gluster上。這些信息的復制沒有問題,可以獲得整個云基礎的解決方案,這是非常適合的,如何使用、如何分布、如何虛擬化,這些都可以在云里,是以軟件為基礎的存儲技術。
看一下關于Gluster的細節內容,一些特征在以前可能聽都沒聽過,比如糾刪碼,有時候要把數據復制三次,有時候不只一組數據,三組都需要復制,這樣就變得冗余,效力地下。如何更高效?這時候就要用到糾刪碼了,分析和算法更好的結合,這些數據如果丟失如何創建,使用了糾刪碼不需要三組復制,1.5倍的數據復制就足夠了,可以大量減少重復的數據,但還是有機會進行數據復制的再生。
還有一個例子是分層,讓活躍、不活躍的信息,如對一些客戶來講可能需要8PB的存儲,數據增長力是10%的速度,我們很多的東西需要放在硬盤當中,這時候買8PB的硬盤非常貴,希望有系統,有能夠把8PB的東西在上面用,是比較難的。這時候我們可以把我們發現的數據,由一個工程師組織,他們對數據進行研究,三個月之后搞另外一個項目。所以這個數據可能活躍了90天時間。90天存在方面的需求,可能也就是7PB,相對于原來的8PB少了很多,給你一種經濟性,不需要存儲那么多,在高性能下存儲不會很低,不需要買商業的硬盤。
另外一個特征是在很多企業級存儲當中,即位衰減檢測。這可以保證數據可以正常運行,沒有數據的損失,后臺掃描時確保數據在,確保不會出現任何問題。如果出現任何問題可能會標記紅旗,這樣可以立馬做一個后臺的備用。這是一個非常重要的功能。
而且它也是非常安全的,基于linux技術之上。而且要想加密,在開源系統當中不會看到這些產品,但是對于Gluster來講,如果你想進行數據的加密,比如EMCA,就可以來購買比較特別的硬件級,給你提供加密的方法。但有的Gluster,所有加密在軟件里來做,可以進行硬盤的加密,也可以在任何數據復制當中進行加密,非常安全。同時可以給我們提供非常好的特征,比如出現故障切換的時候,如果進行激活的故障切換或者故障自動恢復都是可以的,我們有專門的紅帽項目支持這方面的功能。這些都是系統當中的功能,驅動創新驅動我們存儲的安全,不需要擔心以社區為主要的數據安全性,想象一下再一個社區里沒有紅帽的支持而建立自己的存儲集群,存在的問題會有多少,如何解決它們?除非得有軍隊專家才行,幫助你支持,但他們可能在幾年時間內解決你的問題,尤其當程序不能正常運行時。作為紅帽可以更好地提供代碼,提供注冊服務,如果遇到問題,或者新的方面問題,可以立馬給你提供服務,并且幫你進行修正,我們的響應非常快速,這也是我們講到企業存儲和社區存儲當中最大的區別,社區里沒有這么強的支持,我相信我們需要確保您企業級的數據是非常安全的,永遠都可以自由地獲取。
有人會問到底是怎樣的配置,為什么不能用戴爾的?到底你的配置是怎樣的?這里給大家舉一個例子,其中一個是高性能計算,HPC是非常好的通量、非常好的性能。我們使用24乘2.5的切換,而且我們的基本配置正常情況下是12乘3.5??赡苡袝r候需要長期的存儲,比如廣播需求,有時候存儲時間比較長,這時候可以用到60乘3.5的服務器,非常密集的存儲,一次使用60個盤,非常深入、非常便宜的一個解決方案。
對于紅帽存儲本身而言,有Ceph方面的存儲,是數據服務當中的一些開源軟件為基礎的系統。另外是Gluster有企業級的虛擬服務,同時整個創新都是在我們社區背后發生的。如果你看一下這些例子,物理存儲可以使用企業級linux,而且有虛擬的存儲放在企業級linux里。還有私有云里,可以將Ceph應用到大型的openstack項目當中?,F在更多人可能會使用Gluster,因為大家希望數據有一定的可視性,所以Gluster是非常好的、非常適合的。
最后看一下公有云的服務,這些都是非常好的選擇,但中國沒有,最后一個適用不了,但我們想辦法和一些公有云的服務商進行合作。
在整個社區背后的增長創新,Ceph的創新引領整個行業,云計算當中它也在發展前沿。這可以看到這么多開發者都在Ceph背后。就Gluster來講,它是一個非常成熟的產品,比如大數據的要求等等都可以滿足,有一些數據的存儲需要很長時間,傳統環境當中目前沒有發生非常大的變化,但還是有很多創新,我們需要知道數據是不是安全,是否是可適應的,我們也可以滿足它的靈活性,這樣Ceph、openstack、Gluster在不同環節中,紅帽都可以提供其靈活性。
如果大家非常想試用一下,如果你本人有工程背景可以來做一個測試,這樣大家可以來掃描一下二維碼,自己適用一下數據,熟悉一下,這是非常好的機會,實地的了解一下,并且了解到Ceph能做什么,在Gluster這里可以了解,如果你有特別的應用級,可以使用它。所有這些都能夠在我們的測試當中使用,非常好的機會讓大家能夠親眼看一看,親手用一下。
剛才給大家做了介紹,如果大家理解不同工作的負載,一會兒可以找我們叫來,非常歡迎大家用到您的環境當中,非常感謝大家的聆聽,非常期望在接下來的時間見到大家。