冗余，這兩個字貫穿了數(shù)據(jù)中心每一個子系統(tǒng)的設(shè)計過程，是高頻關(guān)鍵詞。

 

得益于2N或N+m的完美冗余，數(shù)據(jù)中心像一個冷冰冰的鋼鐵巨人一般，變得日益健壯。

 

地震可以有，只要烈度不超8，能扛;斷電、停水，即便兩個一起來，兩三天內(nèi)，能扛;臺風(fēng)，有預(yù)案，能扛;雷暴，有防雷接地系統(tǒng)呢，能扛……

 

至于設(shè)備級的故障，那更是數(shù)據(jù)中心設(shè)計中“并行維護”的起步要求，甚至允許多臺設(shè)備故障神奇地同時發(fā)生。

 

數(shù)據(jù)中心是具備自愈能力的

 

病毒進入人體，就是考驗人體自愈能力的時候。自愈能力不夠，又沒有特效藥幫助，只好選擇送人頭;自愈能力強，病毒不知不覺就被干掉了。

 

那么，既然有這么強大的自愈能力，數(shù)據(jù)中心還怕什么呢?

 

當(dāng)然怕。最怕那種不在應(yīng)急預(yù)案覆蓋范圍內(nèi)的、起源于外部的不可抗力事件。

 

五年前發(fā)生在天津的812大爆炸，以及眼下的新冠病毒之戰(zhàn)，就屬于這類事件。

 

關(guān)于812事件詳情這里就不再贅述了，有興趣的同學(xué)可以通過《沒有觀眾的裸奔》重溫一下痛苦記憶。天津數(shù)據(jù)中心離爆炸核心不到1.5公里，受到極大破壞。

 

爆炸聲落，數(shù)據(jù)中心內(nèi)即發(fā)現(xiàn)8處故障點，其中包括冷水機組停機、爆管、地下室水浸這樣的嚴重故障。

 

只要應(yīng)急預(yù)案能覆蓋的場景，處理起來就可以有條不紊。80分鐘后，8處故障全部處理完畢，各系統(tǒng)運行平穩(wěn)。當(dāng)然，光有預(yù)案還不夠，就像我們在事后反復(fù)強調(diào)的，應(yīng)急預(yù)案和平時不折不扣的演習(xí)，關(guān)鍵時候才是救命稻草。

 

第一時間處理好故障，是數(shù)據(jù)中心的本分，也是其自愈能力的展示舞臺。但第一天還遠不是高潮，隨后發(fā)生的一系列事情，才讓這一天天的值守，變得特別漫長。

 

絕大多數(shù)情況下，數(shù)據(jù)中心依靠自身的自愈能力來消除風(fēng)險，是不需要外部幫助的。但到了“大敵當(dāng)前大局為重”的關(guān)口，一旦事件升級，當(dāng)政府不得不上門來“幫助”你時，問題就來了。

 

清場之后，偌大的天津數(shù)據(jù)中心沒有一個人影;我們經(jīng)常掛在口邊的“無人值守”，陡然一下成為了現(xiàn)實。

 

此情此景，如何自救?很顯然，有一個完整、精確、隨時隨地可登入、允許關(guān)鍵運行參數(shù)遠程修正的數(shù)據(jù)中心監(jiān)管控系統(tǒng)，此時顯得多么的重要……此處省略666字。關(guān)于當(dāng)年天津是怎么做的，可參閱上述文章《沒有觀眾的裸奔》。

 

天津數(shù)據(jù)中心雖然扛過了812的考驗，但也暴露出若干問題。尤其是無人值守的全面管控能力。

 

我們常說，教訓(xùn)比經(jīng)驗更值得珍視。經(jīng)此一役，騰訊在數(shù)據(jù)中心自動化系統(tǒng)方面加大投入，集中優(yōu)勢兵力很快推出了“騰訊智維”監(jiān)管控平臺，并開源共享給全行業(yè)。詳情請了解《助力產(chǎn)業(yè)互聯(lián)網(wǎng)升級 騰訊推出數(shù)據(jù)中心智慧運維全棧解決方案》。

 

因此，在年前新冠病毒還沒有真正爆發(fā)的時候，我們在全國每一個數(shù)據(jù)中心，已經(jīng)提前做好了無人值守的準備。極端情況下政府干預(yù)清場后，可能會有一段不短的時間需要啟動“無人預(yù)案”。

 

類似的極端場景，可能還包括化工廠泄漏、監(jiān)獄暴動等只能靠想象預(yù)判的不可抗力事件。

 

這一年的春節(jié)，每個中國人都過得不凡。

 

丑陋的半獸人“新冠”攜病毒大軍兵臨城下，全國的數(shù)據(jù)中心和中土所有部落一起，都在打一場保衛(wèi)戰(zhàn)。

 

信息報備、100%跟蹤、無死角消殺、內(nèi)外物理隔離、一級無差別嚴控……只要能想到的，只要病毒有可乘之機的，一定可以做到極致的嚴防死守。

 

但也有些地方可能被我們忽視了。比如數(shù)據(jù)中心值守人員的心理狀態(tài)。我們說數(shù)據(jù)中心的自救，除了無人值守能力，其實也包括心理干預(yù)。

 

尤其是時間越拖越長，保衛(wèi)戰(zhàn)變成巷戰(zhàn)，甚至進一步變成持久戰(zhàn)的情況下。外面謠言滿天飛，里面的人這一天天的，就會變得焦慮、敏感、消沉。

 

當(dāng)然，“咱們運維團隊心理素質(zhì)過硬著呢，請全國人民放心”。這是兩回事。“扛”是決心，可對數(shù)據(jù)中心來說，主觀上要保證團隊每一個人的健康完好，客觀上更要保障數(shù)據(jù)中心的安全運行;畢竟，人在焦躁狀態(tài)下，很容易出現(xiàn)誤操作……

 

至于怎么做心理干預(yù)，我黨我軍有很多行之有效的辦法，就不在這里班門弄斧了。該政委上場了。

 

戰(zhàn)疫之下的數(shù)據(jù)中心自救，自然是各有各的做法，各自各精彩。騰訊數(shù)據(jù)中心友情提醒各位同行：做好無人值守技術(shù)準備;關(guān)注值守人員心理健康。