多年來,我設(shè)計了好幾個數(shù)據(jù)中心,幫助企業(yè)應(yīng)對災(zāi)難恢復(fù)和災(zāi)難避免。這些IT設(shè)施,可以在建筑物的任何區(qū)域找到,從地下兩層,地下三層,到每個樓層。經(jīng)驗(yàn)告訴我,數(shù)據(jù)中心的災(zāi)難會以任何可以想象,甚至無法想象的類型出現(xiàn)。
下面這個案例,數(shù)據(jù)中心位于一棟六層樓高建筑的二樓。
下了一場暴雨,但并沒有將建筑周圍淹沒。但是,毫無征兆的,位于二樓的數(shù)據(jù)中心,CIO認(rèn)為是安全的,卻被淹沒。由水引起的電涌使建筑的電力中斷–數(shù)據(jù)都丟失了。
經(jīng)過檢查,公司發(fā)現(xiàn)大約一英尺的水幾乎灌滿數(shù)據(jù)中心的活動地板。由于水位于活動地板下,運(yùn)營人員沒有發(fā)現(xiàn)問題,直到裝有線纜的線槽里的報警器響。(線槽是大型布線管,數(shù)據(jù)中心通常在活動地板下使用,但是不能完全密封。)
令人費(fèi)解的是:一樓沒有進(jìn)水,除了從二樓滴下來的水。停車場和地下室是干的。二樓以上的所有樓層都沒有問題- 沒有損壞的管道。但是數(shù)據(jù)中心幾乎都?xì)Я恕?/p>
我們調(diào)查發(fā)現(xiàn),事件發(fā)生的幾個月前,該公司安裝了一臺新的主機(jī)。為了安裝,拆下了一扇窗戶,起重機(jī)被用來運(yùn)送主機(jī),然后將窗戶重新安裝,并重新密封。計算機(jī)的水冷卻器工作正常,線槽中有水檢測裝置。這樣看來,數(shù)據(jù)中心的規(guī)劃,沒有問題。
進(jìn)一步調(diào)查,我們的一個團(tuán)隊(duì)成員注意到,二樓有一條裝飾狹窄走道,向內(nèi)傾斜(這是一個潛在問題)但是有排水管,可以將水從建筑物中排出。那么水從何而來?
搬離數(shù)據(jù)中心設(shè)備之后,我們發(fā)現(xiàn)更換的窗戶的填縫有問題。事實(shí)證明,裝飾走道上的排水管被堵塞,水在走道的外側(cè)聚集,從更換的窗戶的填縫縫隙中倒灌。這是一連串不可能發(fā)生事件的連鎖反應(yīng):大樓物業(yè)沒有檢查,以確保走道上的排水管是暢通的,重新密封窗戶的劣質(zhì)施工,讓暴雨有了可乘之機(jī)。
醫(yī)療中心災(zāi)難另一起案例,發(fā)生在美國中部一所高校內(nèi)的醫(yī)療中心。校園有多個設(shè)施。IT位于醫(yī)院對面街道上的一棟建筑內(nèi)。IT運(yùn)營在地面上。保護(hù)電纜埋在地下,連接校園內(nèi)的所有建筑。多年來,沒有發(fā)生過問題。某個夏日,一場暴風(fēng)雨,閃電擊中了數(shù)據(jù)中心和醫(yī)院中間的街道,就位于醫(yī)院的電纜上方。
發(fā)生災(zāi)難幾率有多大?這不重要,就是發(fā)生了,閃電將街道下的電纜直接融化。在電纜熔化之前,通過它的電涌摧毀了數(shù)據(jù)中心和醫(yī)院的電腦 ——所有這些電腦都被融化或燒毀。沒有什么還能使用。我要告訴你,電涌保護(hù)器,也會不起作用。噴嘴融化并掉落,釋放煤氣,有些東西真的會爆炸。
為數(shù)據(jù)中心災(zāi)難做好準(zhǔn)備這些數(shù)據(jù)中心的災(zāi)難發(fā)生在幾年前。今天,有不同的工具來幫助應(yīng)對長時間的數(shù)據(jù)中心中斷所帶來的影響,包括位于云端的災(zāi)難恢復(fù),以及自動將受損服務(wù)器的處理轉(zhuǎn)移的分布式服務(wù)器群組。然而,即使在今天,我們也會遇到可能導(dǎo)致意想不到的麻煩的災(zāi)難。比如Irma和Harvey颶風(fēng),以及墨西哥的8.2和7.1級地震,災(zāi)難隨時可能發(fā)生。
所以,假設(shè)你有一個災(zāi)難恢復(fù)計劃,這里有一些建議來減輕數(shù)據(jù)中心災(zāi)難的影響:
你是否加固了數(shù)據(jù)中心或公司的工作設(shè)施?有沒有人想過可以造成數(shù)據(jù)中心災(zāi)難的所有常見的情況,和低概率事件?颶風(fēng),龍卷風(fēng),雷暴以及一輛卡車撞倒裝卸碼頭邊的變壓器,只是摧毀數(shù)據(jù)中心的其中一些可能。
當(dāng)災(zāi)難發(fā)生時,就是啟動災(zāi)難恢復(fù)的時候。你的恢復(fù)計劃是不是最新的?自從上次測試以來,是否足以應(yīng)對公司的增長,及其IT支持?誰能宣布災(zāi)難,并啟動恢復(fù)計劃?你的通訊錄是最新的嗎,其中有一些人已經(jīng)離開公司了嗎?如果你依賴云備份,你確定自己和其他必要人員,可以在斷電或風(fēng)暴災(zāi)難中訪問資源嗎?
總是有不可預(yù)見的危險。加固建筑物是昂貴的。當(dāng)你認(rèn)為你已經(jīng)覆蓋了所有的情況,想想那些低概率事件,然后計算成本效益數(shù)字,來確定最佳的行動方案。
災(zāi)難預(yù)防和恢復(fù)是一種保險。這是概率與影響和損害程度之間的權(quán)衡。這顯然是董事會層面的決策。但是,我相信預(yù)防是首要的,然后是快速恢復(fù)。