我們的2016年熱門科技名單又一次跟讀者見面了!在過去13年里,我們一次次地跟讀者分享了新的一年里最好的、前景最光明的技術(shù)。和以往一樣,對于我們介紹的這批技術(shù)將會帶來的深遠影響,我們充滿自信。
我們的名單注重實用性,我們的大部分技術(shù)是“較新”的,而不是面向未來的,我們希望把關(guān)注點放在已經(jīng)被驗證的成熟技術(shù),確保它很快能夠投入實用。
接下來就開始體驗我們?yōu)槟奶暨x的2016年熱門存儲技術(shù)。
數(shù)據(jù)復(fù)制管理
從多種管理工具對相同數(shù)據(jù)的眾多物理拷貝實施管理依然昂貴,讓管理者深感頭疼,并帶來潛在的安全威脅。這就使得數(shù)據(jù)復(fù)制管理(CDM)成為存儲領(lǐng)域2016年可能的技術(shù)發(fā)展趨勢之一。它采用單獨的數(shù)據(jù)副本用于備份,歸檔,復(fù)制和其他數(shù)據(jù)服務(wù)。
該市場包括初創(chuàng)型公司Cohesity和Rubrik,它們都于近期推出自己的產(chǎn)品;還有傳統(tǒng)廠商例如Catalogic Software,CommVault, HDS以及NetApp。據(jù)IDC,預(yù)計到2018年IT企業(yè)在數(shù)據(jù)復(fù)制上的投入將達到510億美元。
Actifi是這個領(lǐng)域的先驅(qū),它的數(shù)據(jù)復(fù)制虛擬化平臺(copy data virtualization platform)實現(xiàn)了數(shù)據(jù)與基礎(chǔ)設(shè)施的解耦,并將相互孤立的數(shù)據(jù)保護流程進行了整合。
Cohesity推出了Cohesity數(shù)據(jù)平臺(Cohesity Data Platform),用于融合所有的二級存儲工作負(fù)載。這是一款基于英特爾芯片的2U設(shè)備,并且可以作為構(gòu)建模塊組建橫向擴展的架構(gòu)。它的可擴展智能存儲開放架構(gòu)(Open Architecture for Scalable, Intelligent Storage, OASIS)軟件,能夠在單一平臺上對融合分析,歸檔和數(shù)據(jù)保護實現(xiàn)服務(wù)質(zhì)量(QoS)管理。
Rubrik在2015年推出了它的數(shù)據(jù)管理產(chǎn)品,這是一個2U的設(shè)備,內(nèi)置軟件進行備份,重復(fù)數(shù)據(jù)刪除,壓縮和版本管理等各種操作。日立公司則利用其Hitachi Data Instance Director(HDID)和日立虛擬存儲平臺,以幫助減少數(shù)據(jù)副本。
數(shù)據(jù)復(fù)制管理與傳統(tǒng)的存儲管理不同,因為它的目的是對客戶使用多個廠商的多種工具進行的某個獨立過程進行簡化,這個獨立過程主要在于數(shù)據(jù)保護。
“今天的二級存儲存在一系列的碎片,”Cohesity首席執(zhí)行官Mohit Aron說。 “客戶從多個廠商購買了一堆不同產(chǎn)品,然后不得不通過某種方式手動實現(xiàn)產(chǎn)品間的對接,并通過多種用戶界面進行管理。這是一個主要的管理痛點。“
Aron認(rèn)為CDM產(chǎn)品的發(fā)展將會具有不同的功能。
“Cohesity數(shù)據(jù)平臺在一臺設(shè)備中包含了所有的數(shù)據(jù)保護流程,”Aron說。 “我們通過單一的操作界面可以處理所有的工作負(fù)載。打個比喻,我們的基礎(chǔ)設(shè)施就類似于蘋果的iPhone。我們生產(chǎn)的基礎(chǔ)設(shè)施和平臺可以針對某些客戶用例部署一些原生應(yīng)用來加以解決。今后,我們要繼續(xù)擴大,容納其他廠商甚至第三方基于我們的平臺編寫軟件。“
“做數(shù)據(jù)復(fù)制管理的公司有三種類型,” Actifio創(chuàng)始人兼首席執(zhí)行官Ash Ashutosh說。“首先,有做備份起家的公司。他們把自己的快照管理功能加以修飾,然后就稱其為數(shù)據(jù)復(fù)制管理。第二種類型公司則會說,'如果你已有14臺存儲設(shè)備,那么購買我們的產(chǎn)品作為第十五臺吧'。我們和前面的兩類截然不同。我們是完全獨立的基礎(chǔ)設(shè)施。可以從數(shù)據(jù)被創(chuàng)建之初就進行管理,并貫穿其整個生命周期。我們提供快速的數(shù)據(jù)訪問,并且無論數(shù)據(jù)身在何處都能進行有效的數(shù)據(jù)擴展管理。“
所有這些產(chǎn)品的目的都是在傳統(tǒng)數(shù)據(jù)保護平臺上,對創(chuàng)建敏感數(shù)據(jù)的無效副本數(shù)量加以管控,從而維護安全性和數(shù)據(jù)訪問之間的平衡。
糾刪編碼
日益普及的對象存儲,基于云的備份存儲以及大容量硬盤(HDD)的出現(xiàn),都使得糾刪編碼在過去幾年里持續(xù)升溫,預(yù)計它將成為2016年的熱門存儲技術(shù)之一。超大存儲容量例如千兆字節(jié)或艾字節(jié)規(guī)模的數(shù)據(jù)集使得RAID技術(shù)的使用越來越勉為其難,IT分析公司存儲瑞士總裁George Crump如是評價。
“當(dāng)我們開始使用6 TB和8 TB的磁盤驅(qū)動器,能夠?qū)Υ髷?shù)據(jù)量提供切實可行數(shù)據(jù)保護的唯一技術(shù)就是糾刪編碼。如果你的陣列中使用了大容量驅(qū)動器,基于RAID的數(shù)據(jù)恢復(fù)將耗費你數(shù)周的時間。而通過糾刪編碼,恢復(fù)時間以小時計,“Crump說。
糾刪編碼應(yīng)用數(shù)學(xué)公式將數(shù)據(jù)分成多個片段,然后把每個片段放置在存儲陣列的不同位置。冗余的數(shù)據(jù)部分會在這個過程中加入,如果數(shù)據(jù)遭到損壞或丟失,冗余數(shù)據(jù)部分的一個子集將會被用于原始數(shù)據(jù)的再生。
糾刪編碼的目標(biāo)是要實現(xiàn)快速的磁盤重建。數(shù)據(jù)復(fù)制并且將其分散到各個驅(qū)動器的過程與RAID相似。然而,糾刪編碼在支持?jǐn)?shù)據(jù)的規(guī)模和數(shù)據(jù)壽命方面與RAID不同。如果數(shù)據(jù)被破壞或丟失,進行驅(qū)動器重構(gòu)只需用到某些“糾刪”片段。該技術(shù)還可以在不降低性能的情況下容忍多個驅(qū)動器故障,保持?jǐn)?shù)據(jù)完整性。
今天,糾刪編碼已經(jīng)成為對象存儲供應(yīng)商的籌碼,其中包括領(lǐng)先的供應(yīng)商例如Amplidata(已被HGST收購),Caringo,IBM Cleversafe和Scality。然而,塊存儲和文件存儲廠商也在加緊行動。超融合陣列廠商Nutanix在七月份將其私有的EC-X糾刪編碼集成到Nutanix操作系統(tǒng)(NOS)的一個升級版本中。縱向擴展存儲廠商Nexenta System則在今年五月NexentaEdge軟件的一個升級版本中添加了對塊和對象存儲的支持。
由于其在保護海量數(shù)據(jù)方面的可擴展性,糾刪編碼是基于云的對象存儲的核心數(shù)據(jù)保護機制。到目前為止,用戶只是在某些具體應(yīng)用場景例如備份和主動歸檔,將數(shù)據(jù)移動到云,這一趨勢有望在新的一年里繼續(xù)升溫。
“糾刪編碼對于對象存儲系統(tǒng)是一種理想的設(shè)計:橫向擴展,多節(jié)點的存儲基礎(chǔ)設(shè)施。它能提供一種跨節(jié)點的類似于RAID的數(shù)據(jù)保護,而不是局限于單個存儲系統(tǒng),”Crump說。
下一代存儲網(wǎng)絡(luò)
下一代存儲網(wǎng)絡(luò)作為存儲技術(shù)新趨勢的主要驅(qū)動力是閃存和虛擬化,無論存儲網(wǎng)絡(luò)是光纖通道(FC),以太網(wǎng)或者InfiniBand的。
16 Gbps的光纖通道交換機和適配器的出貨量在下一年會繼續(xù)保持火爆,而32 Gbps的設(shè)備也將在市場上嶄露頭角。博科和思科的產(chǎn)品路線圖將會集中在32 Gbps交換機。QLogic已經(jīng)推出了他們的16 Gbps第五代FC適配器,并且允許客戶在2016年升級到第六代32 Gbps。
QLogic產(chǎn)品營銷與策劃副總裁Vikram Karvat表示,閃存存儲供應(yīng)商都快“把我們的門敲爛了”,他們急切地需要我們的16 Gbps四端口FC適配器,能提供16通道PCIe 3.0,從而滿足虛擬化、分析和交易繁重型工作負(fù)擔(dān)的許多需求。
“這種性能水平并不是每個客戶都會需要,但是當(dāng)你需要的時候,你就必須得有它,”Karvat說。“以太網(wǎng)是非常好的技術(shù)。我對某些事情絕對沒有抱著偏見。但是,的確有一些類型的工作負(fù)載是光纖通道最適合的。它就是最管用。”
Dell' Oro集團SAN,網(wǎng)絡(luò)安全和數(shù)據(jù)中心設(shè)備市場研究部主管Casey Quillin表示,16 Gbps光纖通道在很大程度上仍然是在發(fā)展變化的,因為今天的服務(wù)器或存儲陣列具備16 Gbps端口的還并不多。他預(yù)計16 Gbps FC適配器將會在下一年快速追趕,并在2016年年底占到FC端口總出貨量的50%。
Quillin表示,博科正在與FC適配器公司致力于打造32 Gbps的生態(tài)系統(tǒng),希望它比16 Gbps的生態(tài)系統(tǒng)更好更成熟。但是,他也預(yù)計遷移到32 Gbps的歷程將比從前遷移到16 Gbps的速度更慢。
而在基于以太網(wǎng)的存儲網(wǎng)絡(luò)方面,主流趨勢是25Gb交換機和配備了適配器芯片的端口,使企業(yè)能夠利用它們已經(jīng)部署的某些類型的10 GBE線纜。原來的以太網(wǎng)發(fā)展路線圖把速率從10 GbE一下跳躍到40 GbE,但40 GbE以太網(wǎng)技術(shù)要求更換更厚,更昂貴的電纜。
面對超大規(guī)模云服務(wù)提供商的需求,網(wǎng)絡(luò)廠商們繼而轉(zhuǎn)向新的單針25 GbE以太網(wǎng)交換機和適配器芯片的標(biāo)準(zhǔn)。新的25 GbE以太網(wǎng)芯片端口使用服務(wù)器PCIe總線上的引腳數(shù)和通道數(shù)都和10 GbE端口完全一樣。并且發(fā)展路線圖延伸到了50 GbE和100 GbE,只是后者使用了四個25 GbE的通道。
“25 GbE到50 GbE的最大優(yōu)點是你不需要更換什么,將來就可以升級到100 GbE。這是無需增加大量成本就能獲得更高性能的最簡單的方式。這就是它將會流行起來的原因,“屠龍咨詢公司總裁Marc Staimer說。 “下一代將從25 GbE到50 GbE,40 GbE可能最終無人問津而被淘汰。“
現(xiàn)在,兩種速度的網(wǎng)絡(luò)在市場上都能見到。Enterprise Strategy Group企業(yè)網(wǎng)絡(luò)分析師Dan Conde說,用戶會根據(jù)供應(yīng)商的支持程度以及成本來決定是上25 GbE還是40 GbE。
與此同時,InfiniBand繼續(xù)專注于高性能計算(HPC)。目前占主流地位的速率是56 Gbps,而隨著高性能計算,大數(shù)據(jù)和Web 2.0應(yīng)用的大熱,從56 Gbps升級到100 Gbps將會在2016年火熱起來,Mellanox Technologies營銷副總裁Kevin Deierling這樣表示。
Gartner研究主任Serais Mushell表示,閃存是用戶升級到下一代存儲網(wǎng)絡(luò)的主要理由。“由于閃存的驅(qū)動,更高的IOPS,帶寬以及更低的延遲正在變得越來越重要。如果你真的希望釋放閃存的價值,你需要更低的延遲和更高的帶寬,“他說。
然而,除了更高的帶寬,存儲網(wǎng)絡(luò)在2016年最突出的趨勢可能是在FC,以太網(wǎng)或InfiniBand上支持NVMe的產(chǎn)品的出現(xiàn)。Mushell表示,輕量級的NVMe協(xié)議層減少了陣列操作的相關(guān)命令集并提高了性能。
Deierling還表示,不斷增加而且必須實時可用的數(shù)據(jù)量使得軟件定義的閃存存儲系統(tǒng)開始利用遠程直接內(nèi)存訪問(RDMA)。閃存存儲系統(tǒng)需要快速的RDMA互連,從而需要更高速的網(wǎng)絡(luò)來發(fā)揮作用。
對象存儲
我們首次將對象存儲納入年度熱點技術(shù)是在2012年,現(xiàn)在,它更加熱門了。隨著廠商提供的完整產(chǎn)品和具體應(yīng)用場景越來越多,對象存儲技術(shù)將在2016年的市場上掀起更大波瀾。
和文件系統(tǒng)不一樣,對象存儲系統(tǒng)將數(shù)據(jù)存儲在一個扁平的命名空間里,通過唯一標(biāo)識符進行數(shù)據(jù)檢索,而無需服務(wù)器知道數(shù)據(jù)具體存放在哪兒。扁平化的命名空間允許保存的元數(shù)據(jù)量比傳統(tǒng)文件系統(tǒng)存儲所能支持的元數(shù)據(jù)量大得多,這使得像自動化和存儲管理這類管理員任務(wù)變得更加簡單。現(xiàn)在,對象存儲技術(shù)主要被用于長期數(shù)據(jù)保存,備份和文件共享。
直到最近,對象存儲系統(tǒng)的選擇依然有限,大多數(shù)系統(tǒng)都采用基于REST的協(xié)議搭載專有硬件。“而現(xiàn)在,對象存儲系統(tǒng)廠商開始將系統(tǒng)包裝成傳統(tǒng)IT部門可以直接利用的形式,”Crump說。“他們開始支持更多的接入?yún)f(xié)議,如NFS,CIFS和iSCSI等,他們提供的系統(tǒng)后端性價比也越來越高。”
今天,某些廠商更加注重軟件,讓用戶可以選擇他們自己的硬件,實現(xiàn)更低的成本以及更容易集成到主數(shù)據(jù)中心。例如,對象存儲軟件廠商Caringo,9月份推出的FileFly軟件,允許用戶在對象存儲和文件系統(tǒng)之間移動他們的數(shù)據(jù)。
“更廣泛的采用還是會在傳統(tǒng)數(shù)據(jù)中心,而傳統(tǒng)數(shù)據(jù)中心正緊盯著云服務(wù)提供商正在做的,并且準(zhǔn)備將該功能也應(yīng)用到相應(yīng)的應(yīng)用場景里,”Crump說。
HGST三月份收購了對象存儲供應(yīng)商Amplidata,IBM十月份收購了Cleversafe ——這些跡象都在表明,傳統(tǒng)廠商已經(jīng)意識到對象存儲技術(shù)對于備份和歸檔策略是多么重要。
對象存儲技術(shù)的一個主要缺點是由于元數(shù)據(jù)量引起的系統(tǒng)延遲。而最明顯的應(yīng)用場景是在那些性能不是主要關(guān)注點的地方。例如,內(nèi)部文件同步和共享正變得越來越流行,它可以減少影子IT,并提高業(yè)務(wù)效率。
過去一年里我們也看到對于大數(shù)據(jù)湖的興趣正在增加。多廠商對于多協(xié)議支持的優(yōu)點使得對象存儲特別適合容納該數(shù)據(jù),由于它的低成本和可擴展特性。
“阻礙對象存儲進一步壯大的最大問題是, 沒有人僅僅因為它是對象存儲而購買對象存儲產(chǎn)品。它必須要能解決客戶都某個具體問題,對于這些問題的認(rèn)識,我們已經(jīng)做得比以前更好了。“Crump說。
軟件定義存儲設(shè)備
軟件定義的存儲經(jīng)過兩年喋喋不休的爭吵,廠商們都意識到即使是最好的存儲軟件也需要良好的硬件與之配合工作。
2015年,鐘擺開始理性回歸到硬件。我們看到初創(chuàng)企業(yè)Savage IO推出可以運行其他家存儲軟件的硬件陣列。而像EMC ScaleIO和Cloudian HyperStore這些軟件定義的存儲產(chǎn)品都紛紛推出實體設(shè)備。戴爾的Blue Thunder項目,使其硬件可以搭載其他廠商的存儲軟件,并與VMware,微軟,Nutanix,Nexenta和Red Hat等一眾廠家結(jié)成合作伙伴。SanDisk推出InfiniFlash IF100,這是一個運行其他供應(yīng)商軟件的閃存陣列,軟件定義存儲供應(yīng)商Nexenta成為其第一個簽約合作伙伴。
成為這種趨勢一部分的硬件并不一定是新型硬件。Curvature Solutions甚至?xí)N售二手存儲硬件,搭載DataCore的SANsymphony-V,這家公司在軟件定義存儲流行以前,就一直從事這方面的研發(fā)。
隨著更多硬件的出現(xiàn), 廠商們毫不掩飾地聲稱自己是軟件定義的趨勢開始消退。 “我們當(dāng)然不是軟件定義的存儲,因為我們包括機架式設(shè)備,” Datrium創(chuàng)始人和首席執(zhí)行官Brian Biles說,這家初創(chuàng)企業(yè)剛剛在七月份發(fā)布了其DVX服務(wù)器閃存存儲系統(tǒng)。想想看你上一次聽到存儲廠商這樣說是什么時候? Datrium確實有DVX軟件,但它只能運行在它的存儲設(shè)備上。然而,在過去幾年中廠商們卻總是試圖把這樣的設(shè)置稱作軟件定義存儲。
Savage IO則把存儲設(shè)備的概念又向前推進了一步。SavageStor 4800是一款4U的設(shè)備,包含48個驅(qū)動器和12核處理器,支持光纖通道,InfiniBand和固態(tài)硬盤。它是專為高性能計算,大數(shù)據(jù)分析和云存儲而設(shè)計。然而,Savage IO并不開發(fā)軟件,它必須運行商用存儲管理軟件或者開源應(yīng)用程序,例如Lustre,OpenStack或CentOS。 “這就是一個法拉利的動力系統(tǒng),你可以根據(jù)你所需要的性能搭配你的軟件,” Savage IO業(yè)務(wù)發(fā)展主管John Fithian如此評價SavageStor。
EMC ScaleIO節(jié)點設(shè)備和Cloudian HyperStore FL3000設(shè)備最初是被設(shè)計為軟件定義存儲,專為那些不想自己搭建存儲硬件的客戶。顯然絕大多數(shù)客戶均屬此列。
“主流存儲買家仍然希望是一個集成的設(shè)備,” IDC企業(yè)存儲和服務(wù)器項目主管Ashish Nadkarni說。“他們希望從軟件定義的存儲中受益,但不希望因此而犧牲掉一個盒子里什么都有的便利與舒適。”
當(dāng)然,我們還沒有聽到軟件定義的存儲,或者軟件定義的技術(shù)將要走向尾聲的消息。但我們預(yù)計作為實際存儲數(shù)據(jù)的硬件,將會受到與之相匹配的關(guān)注。