衣荷華州火災(zāi)、三星大火、焊工引起的癱瘓……本文介紹的這幾種隨機(jī)性事件讓數(shù)據(jù)中心運(yùn)營者夜不能寐。雖然是“小概率”事件,卻因?yàn)槠錇?zāi)難性后果而不能不防。貴公司的災(zāi)難恢復(fù)計(jì)劃是否準(zhǔn)備好處理這些突如其來的奇怪事件呢?他山之石,可以為鑒,希望本文可以給各位數(shù)據(jù)中心運(yùn)營者敲響警鐘。
1. 衣荷華州火災(zāi)
2014年2月18日下午,那也是衣荷華州平時(shí)制作全州工資單的工作日,主數(shù)據(jù)中心發(fā)生了一場電氣火災(zāi)。衣阿華州CIO Robert von Wolffradt在GovTech.com上發(fā)布的一篇博客中回憶道,IT工作人員事先根本普沒有料到會發(fā)生這種事,他們之前一直在為預(yù)報(bào)當(dāng)天晚上會來襲的那場暴風(fēng)雪準(zhǔn)備應(yīng)急計(jì)劃。
火警在下午3點(diǎn)拉響后,數(shù)據(jù)中心斷了電,整幢大樓里面煙霧彌漫,工作人員只好疏散。火警觸發(fā)了數(shù)據(jù)中心以天然氣為燃料的FM-200滅火系統(tǒng),大火被控制在壁掛式瞬態(tài)電壓抑制盒(如上圖)里面。該裝置控制著進(jìn)入數(shù)據(jù)中心的電流,因過熱而熔化。該州的總務(wù)管理團(tuán)隊(duì)拉了一條旁路,幾小時(shí)電又恢復(fù)了。
電力恢復(fù)正常后,大門可以打開,風(fēng)扇可以開啟,大樓可以通風(fēng),不過警察和消防人員不愿意允許IT工作人員回到大樓?;馂?zāi)發(fā)生后過了三個(gè)半小時(shí),州政府官員確定可以重新進(jìn)入數(shù)據(jù)中心
Wolffradt不得不決定是否可以繼續(xù)處理該州付給公民和供應(yīng)商的1.62億美元連同員工工資。全體工作人員馬上展開工作,清理掉了數(shù)據(jù)中心的殘留物,IT工作人員在晚上9點(diǎn)之前恢復(fù)了存儲連接網(wǎng)絡(luò)、防火墻和網(wǎng)絡(luò)核心系統(tǒng)。如果不更換瞬態(tài)電涌抑制盒,重新開啟這些系統(tǒng)會讓設(shè)備處于險(xiǎn)境。Wolffradt于是決定無論如何要更換抑制盒,不過他為備用數(shù)據(jù)中心配備了人手,作為一項(xiàng)防范措施。
到了晚上11點(diǎn),另外的系統(tǒng)恢復(fù)上線,包括服務(wù)臺和交通運(yùn)輸部在即將到來的暴風(fēng)雪中監(jiān)測橋梁和公路所需的攝像頭。
另外恢復(fù)的還有財(cái)務(wù)系統(tǒng)和虛擬化應(yīng)用軟件。到了晚上,額外的系統(tǒng)投入運(yùn)行,到了早上備用數(shù)據(jù)中心不需要接過處理全州工資的工作。Wolffradt回憶道:“我們在那次事件當(dāng)中充分利用了國土安全部的語音通知系統(tǒng),兩次向政府部門主管和重要的工作人員通報(bào)最新情報(bào)。”他特別指出,數(shù)據(jù)中心火災(zāi)過后,傳聞四起;因此,CIO必須與其他責(zé)任方經(jīng)常溝通。隨著事態(tài)的進(jìn)一步發(fā)展,他本人隨時(shí)向州長和重要政府官員匯報(bào)情況。
Wolffradt在博文中透露的一個(gè)教訓(xùn)是,讓主要的企業(yè)系統(tǒng)放在彼此不同的地方,比如將電子郵件放在與工資單不同的設(shè)施(數(shù)據(jù)中心)。另一個(gè)教訓(xùn)就是:一旦發(fā)生火災(zāi),總務(wù)管理和人力資源部門“是你最好的朋友”,會幫助你順利渡過難關(guān)。他寫道,想恢復(fù)數(shù)據(jù)中心運(yùn)營,最棘手的障礙之一就是,說服警察和消防人員:IT工作人員可以重新進(jìn)入數(shù)據(jù)中心。數(shù)據(jù)中心所在的大樓里面共有1000名州雇員,大多數(shù)人等待的時(shí)間比IT工作人員還長,等警報(bào)解除后,才重新進(jìn)入大樓。
2. 三星大火
不,這里說的不是什么新智能手機(jī)的名稱,而是三星遭遇的大火。
2014年4月20日,韓國果川市一幢辦公樓的中間層燃起了大火。大火是從三星在這幢大樓的SDS數(shù)據(jù)中心開始冒出來的。ZDNet韓國特約撰稿人Jaehwan Cho在其推特帳號(@hohocho)上發(fā)布了來自韓國聯(lián)合通訊社的圖片,圖片顯示煙霧和火焰從大樓側(cè)面冒出來,熱浪導(dǎo)致碎片從外面不斷墜落下來。
據(jù)Data Center Knowledge報(bào)道,三星的IT工作人員和大樓住戶迅速被疏散,只有一名工作人員因墜落的碎片而受到割傷、擦傷及其他輕傷。
那場大火導(dǎo)致三星設(shè)備(包括智能手機(jī),平板電腦和智能電視)的用戶們無法訪問他們一直試圖獲取的數(shù)據(jù)。在果川市第二個(gè)數(shù)據(jù)中心的恢復(fù)系統(tǒng)恢復(fù)服務(wù)之前,廣大設(shè)備用戶一度數(shù)小時(shí)無法訪問內(nèi)容,最后三星工作人員只好開博客致歉。
3. 焊工引起的癱瘓
2015年1月9日,由于一名焊工的吹管不小心引燃了旁邊的建筑材料,原準(zhǔn)備作為亞馬遜網(wǎng)站未來數(shù)據(jù)中心的一幢大樓發(fā)生了火災(zāi)。這場大火很快變成了維吉尼亞州阿什本一處地方的三級大火。幾英里開外的地方也能見到滾滾濃煙。亞馬遜發(fā)言人告訴美國廣播公司新聞網(wǎng)駐地方辦事處:這場大火造成約10萬美元的損害,不過補(bǔ)充說“沒有影響亞馬遜運(yùn)營的風(fēng)險(xiǎn)”,因?yàn)樵摂?shù)據(jù)中心還沒有投入使用。
蘇州飛瑞致力于為廣大客戶提供樓宇管理及創(chuàng)新的一體化機(jī)房整體解決方案。 主要板塊有:樓宇自控,UPS電源,精密空調(diào),動力配電,動環(huán)監(jiān)控,防雷接地,氣體消防,綜合布線,機(jī)房一體化等產(chǎn)品解決方案。聯(lián)系熱線:400-110-3938。