【熱】機(jī)房應(yīng)急預(yù)案15篇
在日常生活或是工作學(xué)習(xí)中,難免會突發(fā)一些事故,為了避免事情往更壞的方向發(fā)展,很有必要提前準(zhǔn)備一份具體、詳細(xì)、針對性強(qiáng)的應(yīng)急預(yù)案。那么應(yīng)急預(yù)案應(yīng)該怎么編制才合適呢?下面是小編整理的機(jī)房應(yīng)急預(yù)案,歡迎閱讀,希望大家能夠喜歡。
機(jī)房應(yīng)急預(yù)案1
機(jī)房是我單位的重要場所,重要儀器、設(shè)備相對集中,一旦發(fā)生事故,會造成嚴(yán)重后果 。為此特制定本應(yīng)急預(yù)案。
一、觸電
(1) 一旦發(fā)生觸電事故,應(yīng)迅速安全切斷電源,切忌直接接觸觸電者。
(2) 即刻撥打緊急電話120并通知相關(guān)領(lǐng)導(dǎo),同時開展現(xiàn)場應(yīng)急救護(hù) 。
二、火災(zāi)
1、報警程序:
即刻通知領(lǐng)導(dǎo)及相關(guān)部門,根據(jù)火情大小如需報警立即就近用電話或手機(jī)報告消防中心(電話119).。
2、組織實施:
機(jī)房管理員一旦發(fā)現(xiàn)火情后,應(yīng)即刻切斷電源,并使用滅火器撲救起火設(shè)備。
三、空調(diào)漏水
若空調(diào)系統(tǒng)出現(xiàn)滲漏水,應(yīng)立即安排停用故障空調(diào),清除機(jī)房積水,并及時聯(lián)系設(shè)備供應(yīng)方處理,同時臨時用電扇進(jìn)行降溫。
四、設(shè)備發(fā)生被盜或人為損害事件
( 1)發(fā)生設(shè)備被盜或人為損害設(shè)備情況時,使用者或管理者應(yīng)立即報告中心負(fù)責(zé)人,同時保護(hù)好現(xiàn)場。
( 2)中心負(fù)責(zé)人接報后,通知保衛(wèi)處,一同核實審定現(xiàn)場情況,清點被盜物資或盤查人為損害情況,做好必要的影像記錄和文字記錄。
( 3)當(dāng)事人應(yīng)當(dāng)積極配合公安部門進(jìn)行調(diào)查, 并將有關(guān)情況向領(lǐng)導(dǎo)匯報。
五、機(jī)房停電
(1)接到長時間停電通知后,應(yīng)及時發(fā)布相關(guān)信息,部署應(yīng)對具體措施。
(2)如遇臨時停電,且停電時間在3小時之內(nèi),管理員要檢查UPS是否正常工作,以確保機(jī)房設(shè)備的正常運(yùn)行。。
六、網(wǎng)絡(luò)故障
(1)發(fā)生通信線路中斷、路由故障、流量異常等故障后,網(wǎng)絡(luò)管理員應(yīng)及時查清通信網(wǎng)絡(luò)故障位置,隔離故障區(qū)域,組織相關(guān)技術(shù)人員檢測故障區(qū)域,逐步恢復(fù)故障區(qū)與服務(wù)器的網(wǎng)絡(luò)聯(lián)接,恢復(fù)通信網(wǎng)絡(luò),保證正常運(yùn)轉(zhuǎn)。
(2) 事態(tài)或后果嚴(yán)重的,應(yīng)及時報告領(lǐng)導(dǎo)并請求協(xié)助解決。
七、不良信息和病毒事件
(1)發(fā)現(xiàn)不良信息或網(wǎng)絡(luò)病毒時,管理員應(yīng)立即斷開網(wǎng)線,終止不良信息或網(wǎng)絡(luò)病毒傳播,并報告。
(2)中心負(fù)責(zé)技術(shù)人員應(yīng)采取隔離網(wǎng)絡(luò)等措施,及時殺毒或清除不良信息,并追查不良信息來源。
(3)事態(tài)或后果嚴(yán)重的',應(yīng)及時報告相關(guān)領(lǐng)導(dǎo)以及相關(guān)部門。
八、服務(wù)器軟件系統(tǒng)故障
(1)發(fā)生服務(wù)器軟件系統(tǒng)故障后,在確認(rèn)安全的情況下,重新啟動故障服務(wù)器系統(tǒng);重啟系統(tǒng)成功,則檢查數(shù)據(jù)丟失情況,利用備份數(shù)據(jù)恢復(fù);
(2)若重啟失敗,應(yīng)立即安排備份服務(wù)器啟用,并請求技術(shù)人員支援,作好技術(shù)處理。
九、注意事項:
第一、機(jī)房管理員要加強(qiáng)日常監(jiān)控,及時處理、消除及上報安全隱患。
第二、備齊安全相關(guān)裝備。
第三、及時做好備份。
機(jī)房應(yīng)急預(yù)案2
一、為認(rèn)真貫徹落實《國務(wù)院關(guān)于特大安全事故行政責(zé)任追究的規(guī)定》,積極提高我公司重點要害部位特大安全事故應(yīng)急處理能力,努力減少各類特大安全事故所造成的損失,消除火災(zāi)事故的隱患,保障公司財產(chǎn)和員工的生命安全,特制定本預(yù)案。
二、本預(yù)案針對我公司通信機(jī)房的火災(zāi)而制定。
移動通信機(jī)房滅火流程如下:
(一)值班人員發(fā)現(xiàn)機(jī)房火情(包括監(jiān)控中心人員)要立即到現(xiàn)場查看。
(二)如果是個別電路盤著火,應(yīng)拔出著火的電路盤,用1211或二氧化碳滅火器將火撲滅。
(三)某機(jī)柜幾塊電路盤及電纜著火,應(yīng)立即拔出著火的電路盤,用1211或二氧化碳滅火器噴射滅火劑將火撲滅。
(四)如果機(jī)房的機(jī)架機(jī)柜著火,值班人員無力自滅自救時,監(jiān)控中心應(yīng)切斷機(jī)架機(jī)柜電源或樓層電源,關(guān)閉空調(diào),嚴(yán)禁開窗,及時向公司安全生產(chǎn)管理領(lǐng)導(dǎo)小組報告。
(五)公司安全生產(chǎn)管理領(lǐng)導(dǎo)小組指揮機(jī)關(guān)義務(wù)消防隊隊員進(jìn)行滅火,組織值班人員立即撤離現(xiàn)場,封閉門窗,按下區(qū)域自動滅火按鈕滅火,同時撥打119報警,大聲呼救,報告公司主管領(lǐng)導(dǎo)或安保值班室,監(jiān)控室廣播火警。
(六)在消防隊到達(dá)后,應(yīng)積極配合,簡明扼要說明著
火位置,火勢情況和已采取的補(bǔ)救措施。
(七)用1211或二氧化碳滅火器噴射滅火劑能把火撲滅的`,應(yīng)配合消防隊保護(hù)現(xiàn)場和消除隱患,防止再次著火。
(八)用1211或二氧化碳滅火器不能把火撲滅時,為防止煙熏引起人員中毒,應(yīng)組織人員有序疏散,使用相應(yīng)的滅火器材滅火,盡快將火撲滅。
(九)應(yīng)保護(hù)好現(xiàn)場,按照事故調(diào)查處理辦法執(zhí)行。
(十)火災(zāi)報警電話: 119
三、本預(yù)案應(yīng)注意的特別事項
1、當(dāng)發(fā)生火災(zāi)情況,進(jìn)行處理并保證人身安全的同時, 根據(jù)設(shè)備的重要性進(jìn)行相應(yīng)的搶救措施,保證重要設(shè)備,特別是直通電話,以及與冀北、華北相應(yīng)數(shù)據(jù)的上傳,保證通道暢通。
2、搶救完主要設(shè)備,在進(jìn)行次要的設(shè)備搶修,待事故處理完畢后,進(jìn)行相應(yīng)的實驗,保證設(shè)備的運(yùn)行性,并進(jìn)行設(shè)備的可行性分析。
機(jī)房應(yīng)急預(yù)案3
計算機(jī)機(jī)房作為所有業(yè)務(wù)、應(yīng)用系統(tǒng)的核心,一旦計算機(jī)機(jī)房發(fā)生突發(fā)事件,將對單位的數(shù)據(jù)等造成嚴(yán)重?fù)p失。為此,特制訂機(jī)房突發(fā)事件應(yīng)急預(yù)案。
一、機(jī)房突發(fā)事件定義
機(jī)房突發(fā)事件是指由特殊原因引發(fā)威脅機(jī)房安全并且不能通過日常維護(hù)手段解決的事件。比如,火災(zāi)、漏電、斷電等非人為或者人為的事件,重大突發(fā)事件發(fā)生后,應(yīng)立即組織現(xiàn)場救護(hù)或臨時處置,控制事態(tài)發(fā)展,最大限度地減少損失和影響。
二、機(jī)構(gòu)和職責(zé)
機(jī)房突發(fā)事件應(yīng)急小組單位領(lǐng)導(dǎo):
機(jī)房突發(fā)事件應(yīng)急小組部門領(lǐng)導(dǎo):
機(jī)房突發(fā)事件應(yīng)急小組成員:
各責(zé)任人職責(zé):
應(yīng)急小組單位領(lǐng)導(dǎo):負(fù)責(zé)單位層面及范圍內(nèi)的決策與領(lǐng)導(dǎo)。
應(yīng)急小組部門領(lǐng)導(dǎo):負(fù)責(zé)部門層面及范圍內(nèi)的決策與領(lǐng)導(dǎo)并組織實施突發(fā)事件預(yù)案。
應(yīng)急小組成員:按崗位職責(zé)分工,聽從指揮,服從安排全力以赴解決突發(fā)事件。
三、突發(fā)事件報警
應(yīng)區(qū)分原因在第一時間報警。
自然災(zāi)害(火災(zāi)),撥打火警電話:119人為事件(非法盜取、攻擊等)撥打匪警電話:110人員傷亡,撥打急救電話:120其他時間(斷電等),撥打值班電話:
四、突發(fā)事件處理
突發(fā)事件發(fā)生后,應(yīng)立即啟動應(yīng)急預(yù)案。
1、失火、漏水:
視事件的緊急程度,應(yīng)急小組成員要在領(lǐng)導(dǎo)的指揮下,有組織、有順序的`備份數(shù)據(jù)、關(guān)閉服務(wù)器的電源;組織人力轉(zhuǎn)移設(shè)備。如果自動設(shè)備未能正常啟動,應(yīng)在組長安排下首先切斷機(jī)房的水、電路,組織人力采用滅火器等滅火設(shè)備人工滅火,同時要在第一時間報警。
2、斷電:
在城電斷電的情況下,機(jī)房的備用電力將發(fā)揮作用,電力供應(yīng)最長可持續(xù)4小時。由于機(jī)房空調(diào)沒有備用電力,如確認(rèn)是供電局?jǐn)嚯姡瑧?yīng)立即聯(lián)系發(fā)電機(jī)發(fā)電;如果不是供電局?jǐn)嚯姡怯捎谵k公樓電力線路故障引起的斷電,應(yīng)立即通知電工查找原因,盡快排出故障。如果無法盡快恢復(fù)供電,在電力延續(xù)期間,應(yīng)盡快結(jié)束未執(zhí)行完畢的任務(wù),如無法完成需及時備份數(shù)據(jù),同時應(yīng)關(guān)閉所有非必須服務(wù)器,盡量不讓機(jī)房溫度過高,保證網(wǎng)絡(luò)設(shè)備的正常運(yùn)行,以便保障集中在單位的應(yīng)用系統(tǒng)能正常使用。
五、恢復(fù)生產(chǎn)
突發(fā)事件結(jié)束后,有關(guān)人員應(yīng)首先對現(xiàn)場進(jìn)行清理,匯總損失情況并上報各級領(lǐng)導(dǎo)。緊急召開專項會議分析損失情況,制定數(shù)據(jù)恢復(fù)計劃。設(shè)備損失的要及時更換設(shè)備,保證恢復(fù)計劃的順利進(jìn)行。
恢復(fù)生產(chǎn)后,系統(tǒng)管理員應(yīng)對各系統(tǒng)進(jìn)行自查,上報書面報告,并由部門領(lǐng)導(dǎo)匯總后上報單位領(lǐng)導(dǎo)。
機(jī)房管理員在恢復(fù)生產(chǎn)后要及時檢查各項維持系統(tǒng),如UPS、滅火器、漏水、漏電探測器等是否正常運(yùn)行,應(yīng)及時更換受損的元器件,補(bǔ)充滅火器的填充物。
機(jī)房應(yīng)急預(yù)案4
沙溝中學(xué)實施營養(yǎng)午餐突發(fā)斷水?dāng)嚯姷纫馔馐鹿侍幚響?yīng)急預(yù)案水、電是實施營養(yǎng)午餐改善計劃學(xué)校食堂正常供餐必備的最基本的條件,是食品安全工作的重要組成部分,也是保障師生正常生活的重要基礎(chǔ)。斷水?dāng)嚯姷纫馔馐鹿试趯W(xué)校時有發(fā)生,為進(jìn)一步加強(qiáng)學(xué)校食堂水、電等設(shè)施的管理,保障學(xué)校斷水?dāng)嚯姷纫馔馐鹿拾l(fā)生時能正常為學(xué)生提供圖紙等的營養(yǎng)午餐,維護(hù)學(xué)校正常的教育教學(xué)秩序,特制定本預(yù)案
一、組織機(jī)構(gòu)
(一)成立學(xué)校突發(fā)斷水?dāng)嚯姷纫馔馐鹿蕬?yīng)急成立領(lǐng)導(dǎo)小組。
組長:王鵬程
副組長:馬紅治
馬志銳
組員:馬強(qiáng)
呂宗仁
王繼祖
陸巖
馬萬喜
各班主任
指揮部的工作職責(zé)是:
(1)啟動學(xué)校斷水?dāng)嚯姷纫馔馐鹿侍幚響?yīng)急預(yù)案。
(2)領(lǐng)導(dǎo)、組織、協(xié)調(diào)事故應(yīng)急處理工作。
(3)負(fù)責(zé)事故處理事項的決策。
(4)負(fù)責(zé)上報與事故相關(guān)的重要信息。
(5)審批學(xué)校應(yīng)急處理工作報告。
二、常規(guī)管理
(一)、學(xué)校組織相關(guān)人員定期和吧不定期深入學(xué)校對學(xué)校可能斷水?dāng)嚯姷纫馔馐录碾[患,即使做查漏補(bǔ)缺,做到早發(fā)現(xiàn)、早報告、早治理,不能因為人為因素斷水?dāng)嚯姸V拐I養(yǎng)午餐。
(二)、學(xué)校要與當(dāng)?shù)卣⑺U尽⑥r(nóng)電站等相關(guān)部門保持聯(lián)系,協(xié)調(diào)學(xué)校的用水和用電工作。
(三)、用水緊張或缺水學(xué)校,要想辦法做好學(xué)校用水的儲蓄工作,并邀請相關(guān)部門對學(xué)校用水質(zhì)量檢測,確保水質(zhì)量好,無安全隱患。
(四)、做好學(xué)校食堂用電設(shè)施的改造工程,指定專人經(jīng)常對學(xué)校食堂用電設(shè)施進(jìn)行檢修,維護(hù)。
(五)、對卻因客觀原因二造成的斷水?dāng)嚯姷纫馔馐鹿蕰r應(yīng)立即啟動該預(yù)案。
三、建立報告機(jī)制
1、對學(xué)校發(fā)生臨時斷水?dāng)嚯姷纫馔馐鹿适菍W(xué)校不能對學(xué)生實施午餐時,學(xué)校從業(yè)人員向管理人員報告,管理人員向校長報告,校長協(xié)調(diào)有關(guān)人員檢查檢修,對于用電設(shè)施必須有專業(yè)人員進(jìn)行檢修,確保短時間內(nèi)供水供電。
2、對學(xué)校發(fā)生長時斷水?dāng)嚯姷纫馔馐鹿蕰r,學(xué)校從業(yè)人員向管理人員報告,有管理人員檢查檢修,同時上報縣意外事故應(yīng)急處理協(xié)調(diào)領(lǐng)導(dǎo)小組。
四、事件處理
1、各級領(lǐng)導(dǎo)小組負(fù)責(zé)人接到報告后,及時組織相關(guān)人員趕赴學(xué)校開展事故處理工作
2、學(xué)校應(yīng)及時對學(xué)生做好解釋說明工作,同時采取科學(xué)合理的辦法通過各種途徑解決學(xué)生營養(yǎng)午餐
3、學(xué)校迅速與家長取得聯(lián)系,通過告示等形式給家長做好解釋工作,去的家長的'諒解,保證廣大師生及家長在事故發(fā)生和過程中的知情權(quán),嚴(yán)防事態(tài)擴(kuò)大給學(xué)校教育工作造成不良影響。
4、協(xié)調(diào)各方面力量做好學(xué)校穩(wěn)定工作,保障學(xué)校正常的教育教學(xué)秩序
5、學(xué)校要及早購置手搖鼓風(fēng)機(jī)等應(yīng)急設(shè)備,在學(xué)校斷電時能立即啟用。
6、主動和有關(guān)部門聯(lián)系,及時購買等價等值、衛(wèi)生、營養(yǎng)、可口的熟食品,如牛奶、面包等,及時為學(xué)生供應(yīng)午餐。
7、斷水?dāng)嚯娛鹿侍幚斫Y(jié)束,要認(rèn)真總結(jié)分析事故發(fā)生原因,提出改進(jìn)意見,完成處置總結(jié)報告,報送縣營養(yǎng)辦。
五、責(zé)任追究
對斷水?dāng)嚯娡话l(fā)公共事件的應(yīng)急處置工作中實行領(lǐng)導(dǎo)責(zé)任制和責(zé)任追究。對有突出表現(xiàn)的個人予以鼓勵和表彰;對負(fù)有直接責(zé)任個人依據(jù)有關(guān)法規(guī)和規(guī)定給予行政處分;;對處理不當(dāng),貽誤時機(jī),造成惡劣影響的直接責(zé)任人,要嚴(yán)肅追究責(zé)任。
六、本預(yù)案由學(xué)校突發(fā)斷水?dāng)嚯姷纫馔馐鹿室灰娞幚砉ぷ黝I(lǐng)導(dǎo)小組負(fù)責(zé)解釋。
機(jī)房應(yīng)急預(yù)案5
信息中心機(jī)房是就業(yè)中心開展各項工作的重要保障,也是重點消防部位。為了應(yīng)對消防事故的發(fā)生,特制定以下應(yīng)急預(yù)案:
一、機(jī)房消防安全堅持“標(biāo)本兼治、綜合治理,防消結(jié)合、預(yù)防為主”的基本原則,堅持嚴(yán)防死守,確保萬無一失。
二、加強(qiáng)單位職工的安全教育,全面提高應(yīng)對火災(zāi)的'能力和心理素質(zhì),把損失和危害減少到最低程度。
三、加強(qiáng)領(lǐng)導(dǎo),健全機(jī)構(gòu),成立機(jī)房消防安全責(zé)任小組。 組 長:
副組長:
責(zé)任人:當(dāng)班人員、信息中心工作人員
四、正確處置消防事件:
1、發(fā)現(xiàn)火情后,迅速切斷電源,利用就近滅火器滅火;如不能及時控制、撲滅火災(zāi),立即啟動應(yīng)急預(yù)案,以最快的方式向上級報告,并視火情立即撥打119報警;
2、接到火警后,組長、副組長及工作人員應(yīng)在最短時間內(nèi)迅速趕赴現(xiàn)場進(jìn)行撲救;
3、及時搶救重要設(shè)備,并引導(dǎo)人員疏散自救。
4、一旦有人受傷應(yīng)及時實施搶救,并及時撥打120請求救護(hù)支援;協(xié)助醫(yī)護(hù)人員對受傷人員進(jìn)行緊急救護(hù)等;
5、火警解除后,及時保護(hù)現(xiàn)場,看護(hù)設(shè)備,防止次生事故發(fā)生,并及時向上級匯報火情和損失,配合相關(guān)人員進(jìn)行事故調(diào)查。
五、注意事項
1、避免人身傷害,撲救要在確保人員不受傷害的前提下進(jìn)行。
2、火災(zāi)第一發(fā)現(xiàn)人應(yīng)查明原因,如是電源引起,應(yīng)立即切斷電源。
3、逃生時應(yīng)盡量采取保護(hù)措施,如用濕毛巾捂住口鼻,用濕衣服包裏身體。同時啟用消防應(yīng)急通道,嚴(yán)禁擁擠、阻塞和跳樓、跳窗等事件發(fā)生。
4、堅持預(yù)防為主,堅持安全值班巡查制度,嚴(yán)守機(jī)房消防安全管理制度,保持通信工具暢通,發(fā)現(xiàn)隱患及時上報處理。
6、認(rèn)真分析事故原因,總結(jié)經(jīng)驗教訓(xùn),虛心接受有關(guān)部門的檢查、指導(dǎo)、批評和教育。
機(jī)房應(yīng)急預(yù)案6
為確保辦公室機(jī)房安全與穩(wěn)定,以保證正常運(yùn)行為宗旨,按照“預(yù)防為主,積極處置”的原則,本著建立一個有效處置突發(fā)事件,建立統(tǒng)一指揮、職責(zé)明確運(yùn)轉(zhuǎn)有序、反應(yīng)迅速處置有力的機(jī)房安全體系的目標(biāo),特制定本預(yù)案。
一、機(jī)房日常維護(hù)
1、建立健全機(jī)房管理制度
(1)在正常工作日內(nèi),信息技術(shù)人員負(fù)責(zé)對機(jī)房進(jìn)行監(jiān)控,主要職責(zé)是:巡視網(wǎng)絡(luò)設(shè)備及系統(tǒng)的運(yùn)行情況,發(fā)生異常情況及時處理,消除網(wǎng)絡(luò)故障隱患。
(2)節(jié)假日期間信息技術(shù)人員輪流值班,負(fù)責(zé)處理有關(guān)異常情況。
(3)機(jī)房采取來人來訪登記制度,未經(jīng)允許,無關(guān)人員不得進(jìn)入機(jī)房區(qū)域。
2、機(jī)房內(nèi)嚴(yán)格采取防雷、防火、防塵、防靜電等措施以及機(jī)房入口處24小時監(jiān)控錄像等措施。
3、認(rèn)真做好數(shù)據(jù)備份工作,定期做一次數(shù)據(jù)庫完全備份,每月檢查服務(wù)器運(yùn)行和備份情況。
4、信息技術(shù)人員對機(jī)房的主要網(wǎng)絡(luò)設(shè)備(路由器、主干交換機(jī)等)進(jìn)行工作時間內(nèi)全程監(jiān)控,發(fā)現(xiàn)異常情況應(yīng)及時進(jìn)行處理,確保辦公室網(wǎng)絡(luò)的正常運(yùn)行。
二、機(jī)房突發(fā)事件應(yīng)急處置方案
1、電源系統(tǒng)應(yīng)急預(yù)案
(1)定期檢查機(jī)房供電設(shè)備的運(yùn)行狀況和電路線纜器材情況,當(dāng)發(fā)生下列突發(fā)事件時,按照以下方案進(jìn)行處置:
(2)當(dāng)機(jī)房發(fā)生市電供電突然停電或是電源異常時。檢查不間斷電源的電池可供電時間,確保設(shè)備正常運(yùn)行,如遇到突然斷電,應(yīng)及時將空調(diào)等設(shè)備及時斷電,預(yù)防突然來電時瞬間電流過大導(dǎo)致設(shè)備損壞等現(xiàn)象。
(3)當(dāng)確定停電原因是在本身供電系統(tǒng)范圍內(nèi),立即匯報給負(fù)責(zé)領(lǐng)導(dǎo),并及時聯(lián)系相關(guān)維護(hù)人員達(dá)到現(xiàn)場檢修。
(4)恢復(fù)供電后,嚴(yán)格按照操作程序逐步恢復(fù)機(jī)房設(shè)備,以防瞬間電流過大造成設(shè)備損壞。
2、網(wǎng)絡(luò)和服務(wù)器絡(luò)系統(tǒng)應(yīng)急預(yù)案
(1)發(fā)生網(wǎng)絡(luò)故障時,首先檢查機(jī)房設(shè)備情況,確定網(wǎng)絡(luò)故障的原因,然后聯(lián)系網(wǎng)絡(luò)維護(hù)人員,及時處理和排除故障。
(2)當(dāng)確認(rèn)原因為短時間無法恢復(fù),應(yīng)該及時向負(fù)責(zé)領(lǐng)導(dǎo)匯報,然后再聯(lián)系維護(hù)人員,及時處理故障。
(3)當(dāng)人為或病毒破壞的故障發(fā)生時,具體按以下順序進(jìn)行:判斷破壞的'來源及性質(zhì),斷開影響安全與穩(wěn)定的信息網(wǎng)絡(luò)設(shè)備,斷開與破壞來源的物理網(wǎng)絡(luò)連接,然后再聯(lián)系維護(hù)人員,及時處理故障。
(4)發(fā)生服務(wù)器系統(tǒng)故障后,應(yīng)立即向相關(guān)領(lǐng)導(dǎo)匯報情況,同時安排人員將故障服務(wù)器脫離網(wǎng)絡(luò),保存系統(tǒng)狀態(tài)不變,保護(hù)原始數(shù)據(jù)。
在確認(rèn)安全的情況下,重新啟動故障服務(wù)系統(tǒng):若重啟系統(tǒng)成功,則檢查數(shù)據(jù)丟失情況,利用備份數(shù)據(jù)恢復(fù);若重啟失敗,立即 聯(lián)系相關(guān)維護(hù)人員,請求技術(shù)支持,做好技術(shù)處理。
處置結(jié)束后,技術(shù)人員應(yīng)將處理過程記錄下來,以方便日后對此問題的處理。
3、消防和防雷應(yīng)急預(yù)案
(1)上班工作時間發(fā)生火警,還在機(jī)房工作的人員應(yīng)及時緊急撤離,并立刻撥打119報警。在確保自身安全的情況下,應(yīng)盡量使用滅火器進(jìn)行滅火,減少電子設(shè)備的損壞。同時采取關(guān)閉電源總閘等措施,盡量減少可能造成的損失和破壞。
(2)非工作時間或節(jié)假日休息時間值班人員發(fā)現(xiàn)火情后,要立刻撥打119報警,并立刻通知相關(guān)部門和領(lǐng)導(dǎo),做好火災(zāi)的處置工作。
(3)火情結(jié)束之后,機(jī)房相關(guān)人員應(yīng)全體趕赴現(xiàn)場,同時立即聯(lián)系相關(guān)網(wǎng)絡(luò)公司和設(shè)備相關(guān)廠家,及時評估事故損失情況,研討恢復(fù)網(wǎng)絡(luò)系統(tǒng)正常運(yùn)行的最佳解決方案。
(4)遇雷暴天氣或接上級部門雷暴氣象預(yù)警,應(yīng)關(guān)閉所有服務(wù)器,切斷電源,暫停內(nèi)部計算機(jī)網(wǎng)絡(luò)工作。雷暴天氣結(jié)束后,及時開通服務(wù)器,恢復(fù)內(nèi)部計算機(jī)網(wǎng)絡(luò)工作。因雷擊造成的損失,應(yīng)及時進(jìn)行核實、報損,并將詳細(xì)情況向部門領(lǐng)導(dǎo)匯報。
4、自然災(zāi)害和盜搶應(yīng)急預(yù)案
(1)發(fā)生自然災(zāi)害后,首先應(yīng)該組織人員撤離現(xiàn)場。當(dāng)確認(rèn)災(zāi)害不會造成人生傷害后,在回到機(jī)房檢查設(shè)備,立刻向上級領(lǐng)導(dǎo)匯報,并聯(lián)系相關(guān)網(wǎng)絡(luò)和設(shè)備廠家,積極做好災(zāi)后恢復(fù)工作,確保在最短時間內(nèi)
恢復(fù)機(jī)房正常運(yùn)行。
(2)發(fā)生盜搶事件后,要保護(hù)好現(xiàn)場然后報警,并向上級領(lǐng)導(dǎo)匯報情況。待現(xiàn)場處理完畢后,要組織相關(guān)人員估計損毀情況,并聯(lián)系相關(guān)網(wǎng)絡(luò)和設(shè)備廠家,積極做好恢復(fù)工作。
機(jī)房應(yīng)急預(yù)案7
第一條:機(jī)房意外停電后,首先確定停電的范圍以及受影響的設(shè)備范圍。
第二條:確認(rèn)停電的范圍為本公司或本機(jī)房,應(yīng)立即聯(lián)系工機(jī)科電話匯報。估算電力可能恢復(fù)的時間,并通知直接上級。
第三條:如果確認(rèn)停電的時間在1個小時內(nèi),可以在UPS正常供電的時間內(nèi),等到電力恢復(fù)。如果不能確認(rèn)在2個小時內(nèi)恢復(fù)供電,需及時到達(dá)現(xiàn)場。做好各設(shè)備的電源停電準(zhǔn)備。在UPS供電達(dá)1.5個小時后,嚴(yán)格按操作手冊停掉存儲和各應(yīng)用服務(wù)器的電源,最后停核心交換機(jī)和路由期。等待電力恢復(fù),電力恢復(fù)供電后轉(zhuǎn)第七條執(zhí)行。如果確認(rèn)停電的范圍僅在于本機(jī)房電源故障,立即匯報給機(jī)房電源維護(hù)負(fù)責(zé)人。
第四條:機(jī)房維護(hù)負(fù)責(zé)人將掉電的電源柜總空開和分空開的狀態(tài)處于下電狀態(tài)。并向直接領(lǐng)導(dǎo)匯報,馬上聯(lián)系相關(guān)廠家,如有可能請廠家立即到現(xiàn)場支持。第五條:將掉電的所有的設(shè)備電源狀態(tài)處于下電狀態(tài),以防止電源柜加電對設(shè)備的.沖擊。
第六條:等各廠家和相關(guān)的人員到齊后,商議設(shè)備恢復(fù)時因注意的事項,并形成相關(guān)文檔。
第七條:電力室恢復(fù)供電后,先不要急于給電源柜加電,等待10—20分鐘后,再開始給電源柜加電,以防止供電不穩(wěn)或再次掉電。
第八條:供電正常后,確定設(shè)備處于下電狀態(tài)后,打開電力柜的總控開。第九條:根據(jù)設(shè)備加電順序,啟動分項空開。第十條:設(shè)備加電順序,網(wǎng)絡(luò)交換類設(shè)備正常后再給磁盤陣列柜加電,存儲狀態(tài)檢查正常后,啟動主機(jī)(以上各設(shè)備務(wù)必按操作手冊的啟動順序上電)。第十一條:設(shè)備啟動正常后,開始啟動數(shù)據(jù)庫。第十二條:數(shù)據(jù)庫啟動正常后,開始啟動中間件服務(wù)器。第十三條:中間件服務(wù)器正常后,啟動應(yīng)用程序。
第十四條:機(jī)房設(shè)備進(jìn)行全面點檢,確認(rèn)所有設(shè)備運(yùn)行和服務(wù)正常。
機(jī)房應(yīng)急預(yù)案8
一制定目的
為應(yīng)對醫(yī)院突發(fā)性大面積停電事故,迅速有序地組織和恢復(fù)供電,確保病人生命安全和減少財產(chǎn)損失,保證醫(yī)院用電暢通,促進(jìn)事故應(yīng)急工作的制度化和規(guī)范化,依據(jù)國家相關(guān)法律法規(guī),結(jié)合我院實際情況,制定本預(yù)案。
二適用范圍
本預(yù)案所稱“突發(fā)性大面積通電事故”(下稱“大面積停電事故”)是指因嚴(yán)重自然災(zāi)害重要設(shè)施損壞或遭受破壞等原因造成突發(fā)性的'全院大面積電力系統(tǒng)安全防線失效,電網(wǎng)發(fā)生大面積瓦解或崩潰的事故。
三應(yīng)急原則
大面積停電事故處理工作貫徹“預(yù)防為主,常備不懈”的方針,遵循“統(tǒng)一領(lǐng)導(dǎo),完善機(jī)制,明確責(zé)任,加強(qiáng)合作,快速發(fā)應(yīng),措施果斷”的原則。
四組織機(jī)構(gòu)
醫(yī)院成立大面積停電事故應(yīng)急領(lǐng)導(dǎo)小組,下設(shè)應(yīng)急搶修隊。
1、醫(yī)院大面積停電事故應(yīng)急領(lǐng)導(dǎo)小組組長:
總經(jīng)理副組長:
院長成員:
人事行政部經(jīng)理后勤主管電維修工職責(zé):
(1)做好日常安全供電工作,落實安全生產(chǎn)責(zé)任制,防范大面積停電事故發(fā)生。
(2)發(fā)生大面積停電事故時,及時做好停電事故應(yīng)急工作,盡快恢復(fù)供電。
(3)根據(jù)大面積停電事故嚴(yán)重程度,決定啟動和終止應(yīng)急預(yù)案。
(4)及時向上級報告事故情況并向社會公布。
(5)必要時請求外力支援。
(6)領(lǐng)導(dǎo)小組組長是履行本預(yù)案規(guī)定的第一責(zé)任人。成員單位應(yīng)在領(lǐng)導(dǎo)小組的統(tǒng)一指揮下,各司其職,各負(fù)其責(zé),通力合作,做好大面積停電事故時的社會綜合應(yīng)急工作。
2、應(yīng)急搶修隊隊長:
后勤主管成員:
電維修工職責(zé):
發(fā)生事故時,組織人員實施救援行動;向指揮小組匯報事故情況,必要時向供電部門發(fā)出求援請求,事后總結(jié)應(yīng)電路還是低壓電路。如果高壓電路出現(xiàn)故障,醫(yī)院電工立即導(dǎo)入備用電源,應(yīng)及時與供電部門搶修班聯(lián)系,盡快恢復(fù),保證用電;如果醫(yī)院抵押電路出現(xiàn)故障時,應(yīng)快速查明原因,按照操作規(guī)定恢復(fù)電路。
(二)部門科室應(yīng)急程序
1、各科室接到停電通知后,應(yīng)該在允許情況下吧所有的及其電源切斷,待電路恢復(fù)正常后再投入使用。
2、接到停電通知后,立即做好停電準(zhǔn)備。如有搶救患者使用備用電源。
3、突然停電后,立即尋找搶救患者及其運(yùn)轉(zhuǎn)的動力方法,維持搶救工作,并開啟應(yīng)急燈照明等。并應(yīng)及時通知電工或總值班。
4、危重患者手術(shù)中使用呼吸機(jī)的患者平時應(yīng)在機(jī)旁備有簡易呼吸器,遇突然停電,醫(yī)護(hù)人員立即將呼吸機(jī)脫開,使用簡易呼吸器維持呼吸。使用電動吸氮的患者,用50ml注射器接吸氮管吸氮。
5、如雙線均突然出現(xiàn)供電故障,院內(nèi)發(fā)電機(jī)供電前,醫(yī)護(hù)人員則應(yīng)首先保證病人搶救;護(hù)士應(yīng)沉著鎮(zhèn)靜,上呼吸機(jī)者采用手抱球法,上監(jiān)護(hù)儀者采用人工測血壓脈搏,電動吸氮者則采用50毫升注射器接吸氮管抽吸等,嚴(yán)密觀察并請變化,其余工作人員則立即電話通知電工,人事行政部,并采用應(yīng)急燈供照明。
6、加強(qiáng)巡視病房,安撫患者,同時注意防火防盜。
7、電梯遇到突然停電后,后勤人員要做好乘客思想工作,向外面打電話,用人工方法把所有乘客放出去。
六保障措施
1、電工日常應(yīng)做好發(fā)電機(jī)的維護(hù)保養(yǎng)工作,保證發(fā)電機(jī)隨時投入使用。
2、電工平時要掌握供電知識和操作規(guī)范,注意操作安全。
3、臨床科室常規(guī)備有應(yīng)急燈電筒等照明用物,定期檢查,保持完好狀態(tài)。
4、后勤部門要組織進(jìn)行應(yīng)急停電演練,每年1-2次,通過演練,使大家熟悉掌握突發(fā)停電的應(yīng)急處置程序,確保病人安全。電路還是低壓電路。如果高壓電路出現(xiàn)故障,醫(yī)院電工立即導(dǎo)入備用電源,應(yīng)及時與供電部門搶修班聯(lián)系,盡快恢復(fù),保證用電;如果醫(yī)院抵押電路出現(xiàn)故障時,應(yīng)快速查明原因,按照操作規(guī)定恢復(fù)電路。
機(jī)房應(yīng)急預(yù)案9
第一條 機(jī)房突發(fā)事件
包括網(wǎng)絡(luò)設(shè)備或服務(wù)器故障、自然災(zāi)害(水、火、電等)造成的物理破壞、人為失誤造成的`安全事件等等。 針對突發(fā)事件的預(yù)防措施如下:
建立安全、可靠、穩(wěn)定運(yùn)行的機(jī)房環(huán)境,防火、防盜、防雷電、防水、防靜電、防塵;建立備份電源系統(tǒng);加強(qiáng)防火、防盜意識。
第二條 機(jī)房漏水應(yīng)急預(yù)案如下:
1、發(fā)生機(jī)房漏水時,第一目擊者應(yīng)立即通知機(jī)房管理人員。
2、若空調(diào)系統(tǒng)出現(xiàn)滲漏水,機(jī)房管理人員應(yīng)立即安排停用故障空調(diào),清除機(jī)房積水,并及時聯(lián)系設(shè)備供應(yīng)方處理,必要情況下可臨時用電扇對服務(wù)器進(jìn)行降溫。
3、若為墻體或窗戶滲漏水,機(jī)房管理人員應(yīng)立即采取有效措施確保機(jī)房安全,同時安排通知工程人員及時清除積水,維修墻體或窗戶,消除滲漏水隱患。
機(jī)房應(yīng)急預(yù)案10
網(wǎng)絡(luò)信息中心機(jī)房環(huán)境主要監(jiān)控目標(biāo)對象為:電力供應(yīng)、火情、空調(diào)異常。監(jiān)控對象表征為:UPS可監(jiān)控數(shù)據(jù)(包括輸入、輸出、負(fù)載等)、煙霧、環(huán)境溫濕度值。
環(huán)境監(jiān)控報警根據(jù)影響范圍不同定為不同級別,予以不同處置,應(yīng)急處置流程如下:
一、 緊急告警
(一) 機(jī)房煙霧告警
1. 如消防系統(tǒng)已啟動,立即通知相關(guān)區(qū)域同志撤離機(jī)房。
2. 如消防系統(tǒng)尚未啟動,立刻調(diào)出該場地視頻監(jiān)控,確認(rèn)是否有火情。一旦確認(rèn)火情,立即疏散,并確認(rèn)消防系統(tǒng)能正確啟動。
3. 火警必須在第一時間電話通知中心主任、相關(guān)機(jī)房安全責(zé)任人、辦公室主任和環(huán)境與設(shè)備工程師。
4. 按消防相關(guān)程序處置。
(二) UPS輸入掉電告警
1. 立刻通知環(huán)境與設(shè)備工程師和相關(guān)機(jī)房負(fù)責(zé)人,環(huán)境與設(shè)備工程師即刻響應(yīng)并處理,通知機(jī)房負(fù)責(zé)人電池放電情況。
2. 相關(guān)機(jī)房負(fù)責(zé)人待命響應(yīng),根據(jù)需要按預(yù)定程序逐級安全關(guān)閉各類系統(tǒng)或設(shè)備,并通知相關(guān)部門及人員。
3. 如影響中心關(guān)鍵業(yè)務(wù),由機(jī)房負(fù)責(zé)人作出判斷,并立即通知業(yè)務(wù)所屬責(zé)任部門。
(三) 機(jī)房地濕告警
立刻通知相關(guān)機(jī)房負(fù)責(zé)人和環(huán)境與設(shè)備工程師,現(xiàn)場查看空調(diào)底下是否有水管爆裂漏水。
備注:漏水事故影響不可輕忽,某些情況下會引起災(zāi)難性事故,請務(wù)必關(guān)注。
(四) UPS輸出故障
1. 立刻通知環(huán)境與設(shè)備工程師和相關(guān)機(jī)房負(fù)責(zé)人,環(huán)境與設(shè)備工程師即刻響應(yīng)并處理,通知機(jī)房負(fù)責(zé)人影響范圍。
2. 相關(guān)機(jī)房負(fù)責(zé)人立即響應(yīng),如影響中心關(guān)鍵業(yè)務(wù),由機(jī)房負(fù)責(zé)人作出判斷,并立即通知業(yè)務(wù)所屬責(zé)任部門。
二、 重要告警
(一) 監(jiān)控數(shù)據(jù)通信中斷告警
發(fā)現(xiàn)監(jiān)控數(shù)據(jù)通信中斷告警,需要綜合查看,首先排查是否網(wǎng)絡(luò)原因,其次排查是否服務(wù)器原因。以下狀況考慮環(huán)境因素:
如果同時有大面積的網(wǎng)絡(luò)故障和服務(wù)器故障,很可能是UPS輸出故障,立即通知環(huán)境與設(shè)備工程師、運(yùn)行部負(fù)責(zé)人和系統(tǒng)部負(fù)責(zé)人。
如果是單純的數(shù)據(jù)數(shù)據(jù)通信中斷,一般是監(jiān)控設(shè)備死機(jī),在工作時間通知環(huán)境與設(shè)備工程師處理。
1. 機(jī)房高溫告警
立刻通知環(huán)境與設(shè)備工程師,如判斷空調(diào)已失效,則需到現(xiàn)場處置。
備注:由于機(jī)柜上的溫濕度儀因熱通道和鐵架的.熱傳導(dǎo)作用使得感應(yīng)溫度偏高很多,只能做參考。因此,如夜間發(fā)現(xiàn)高溫告警,可注意觀察,如有持續(xù)異常升溫則通知環(huán)境與設(shè)備工程師處理。
2. 冷凍水高溫告警
發(fā)現(xiàn)冷凍水高溫告警或空調(diào)進(jìn)水高溫告警,即刻通知環(huán)境與設(shè)備工程師處理。
3. 市電掉電告警
工作時間,立刻通知環(huán)境與設(shè)備工程師處理。非工作時間,如發(fā)生UPS輸入掉電告警,按前述流程處置。
三、 一般告警
其他機(jī)房環(huán)境監(jiān)控告警,考慮都是設(shè)備故障或者部分功能異常,影響面有限,在工作時間通知環(huán)境與設(shè)備工程師處理。
機(jī)房應(yīng)急預(yù)案11
第一條 機(jī)房突發(fā)事件包括網(wǎng)絡(luò)設(shè)備或服務(wù)器故障、自然災(zāi)害(水、火、電等)造成的物理破壞、人為失誤造成的安全事件等等。 針對突發(fā)事件的預(yù)防措施如下: 建立安全、可靠、穩(wěn)定運(yùn)行的機(jī)房環(huán)境,防火、防盜、防雷電、防水、防靜電、防塵;建立備份電源系統(tǒng);加強(qiáng)防火、防盜意識。
第二條 機(jī)房漏水應(yīng)急預(yù)案如下:
1、發(fā)生機(jī)房漏水時,第一目擊者應(yīng)立即通知機(jī)房管理人員。
2、若空調(diào)系統(tǒng)出現(xiàn)滲漏水,機(jī)房管理人員應(yīng)立即安排停用故障空調(diào),清除機(jī)房積水,并及時聯(lián)系設(shè)備供應(yīng)方處理,必要情況下可臨時用電扇對服務(wù)器進(jìn)行降溫。
3、若為墻體或窗戶滲漏水,機(jī)房管理人員應(yīng)立即采取有效措施確保機(jī)房安全,同時安排通知工程人員及時清除積水,維修墻體或窗戶,消除滲漏水隱患。
第三條 機(jī)房火災(zāi)應(yīng)急預(yù)案如下:
1、完善機(jī)房環(huán)境,確保機(jī)房放置滅火器;禁止攜帶易燃易爆物品進(jìn)入機(jī)房。
2、機(jī)房管理人員應(yīng)熟悉機(jī)房內(nèi)部消防安全操作和規(guī)則,了解消防設(shè)備操作原理,掌握消防應(yīng)急處理步驟、措施和要領(lǐng),懂得滅火的方法,會撲救初起火源。
3、一旦發(fā)生火災(zāi),迅速切斷機(jī)房電源,避免災(zāi)情的擴(kuò)散,并迅速和保安部聯(lián)系必要時立即報火警。
第四條 機(jī)房停電應(yīng)急預(yù)案如下:
1、接到停電通知后,應(yīng)及時通過辦公系統(tǒng)、電話等發(fā)布相關(guān)信息,部署應(yīng)對具體措施,要求在停電前停止業(yè)務(wù)、保存數(shù)據(jù)。
2、機(jī)房管理人員每日檢查UPS電源的狀態(tài),確保在突發(fā)停電時,UPS電源能自動供應(yīng)服務(wù)器正常工作15分鐘以上,保證員工工作的'數(shù)據(jù)及時保存。
第五條 通信網(wǎng)絡(luò)故障應(yīng)急預(yù)案如下:
1、發(fā)生通信線路中斷、流量異常等故障后,發(fā)現(xiàn)狀況的員工或部門領(lǐng)導(dǎo)應(yīng)及時通知網(wǎng)絡(luò)管理員。 2、網(wǎng)絡(luò)管理員了解情況后,迅速組織檢測故障區(qū)域,并作相關(guān)故障處理,逐步恢復(fù)故障區(qū)與服務(wù)器的網(wǎng)絡(luò)聯(lián)接,恢復(fù)通信網(wǎng)絡(luò),保證正常運(yùn)轉(zhuǎn)。
第六條 服務(wù)器故障應(yīng)急預(yù)案如下:
1、機(jī)房管理人員每日檢查機(jī)房內(nèi)各服務(wù)器狀態(tài)。
2、定期備份數(shù)據(jù)服務(wù)器數(shù)據(jù)。并將備份資料拷貝到移動設(shè)備。服務(wù)器出現(xiàn)嚴(yán)重硬件故障時啟用備用服務(wù)器以保障正常運(yùn)轉(zhuǎn)。
機(jī)房應(yīng)急預(yù)案12
第一條 機(jī)房突發(fā)事件包括網(wǎng)絡(luò)設(shè)備或服務(wù)器故障、自然災(zāi)害(水、火、電等)造成的物理破壞、人為失誤造成的安全事件等等。 針對突發(fā)事件的'預(yù)防措施如下: 建立安全、可靠、穩(wěn)定運(yùn)行的機(jī)房環(huán)境,防火、防盜、防雷電、防水、防靜電、防塵;建立備份電源系統(tǒng);加強(qiáng)防火、防盜意識。
第二條 機(jī)房漏水應(yīng)急預(yù)案如下:
一、發(fā)生機(jī)房漏水時,第一目擊者應(yīng)立即通知機(jī)房管理人員。
二、若空調(diào)系統(tǒng)出現(xiàn)滲漏水,機(jī)房管理人員應(yīng)立即安排停用故障空調(diào),清除機(jī)房積水,并及時聯(lián)系設(shè)備供應(yīng)方處理,必要情況下可臨時用電扇對服務(wù)器進(jìn)行降溫。
三、若為墻體或窗戶滲漏水,機(jī)房管理人員應(yīng)立即采取有效措施確保機(jī)房安全,同時安排通知工程人員及時清除積水,維修墻體或窗戶,消除滲漏水隱患。
第三條 機(jī)房火災(zāi)應(yīng)急預(yù)案如下:
一、完善機(jī)房環(huán)境,確保機(jī)房放置滅火器;禁止攜帶易燃易爆物品進(jìn)入機(jī)房。
二、機(jī)房管理人員應(yīng)熟悉機(jī)房內(nèi)部消防安全操作和規(guī)則,了解消防設(shè)備操作原理,掌握消防應(yīng)急處理步驟、措施和要領(lǐng),懂得滅火的方法,會撲救初起火源。
三、一旦發(fā)生火災(zāi),迅速切斷機(jī)房電源,避免災(zāi)情的擴(kuò)散,并迅速和保安部聯(lián)系必要時立即報火警。
第四條 機(jī)房停電應(yīng)急預(yù)案如下:
一、接到停電通知后,應(yīng)及時通過辦公系統(tǒng)、電話等發(fā)布相關(guān)信息,部署應(yīng)對具體措施,要求在停電前停止業(yè)務(wù)、保存數(shù)據(jù)。
二、機(jī)房管理人員每日檢查UPS電源的狀態(tài),確保在突發(fā)停電時,UPS電源能自動供應(yīng)服務(wù)器正常工作15分鐘以上,保證員工工作的數(shù)據(jù)及時保存。
第五條 通信網(wǎng)絡(luò)故障應(yīng)急預(yù)案如下:
一、發(fā)生通信線路中斷、流量異常等故障后,發(fā)現(xiàn)狀況的員工或部門領(lǐng)導(dǎo)應(yīng)及時通知網(wǎng)絡(luò)管理員。 二、網(wǎng)絡(luò)管理員了解情況后,迅速組織檢測故障區(qū)域,并作相關(guān)故障處理,逐步恢復(fù)故障區(qū)與服務(wù)器的網(wǎng)絡(luò)聯(lián)接,恢復(fù)通信網(wǎng)絡(luò),保證正常運(yùn)轉(zhuǎn)。
第六條 服務(wù)器故障應(yīng)急預(yù)案如下:
一、機(jī)房管理人員每日檢查機(jī)房內(nèi)各服務(wù)器狀態(tài)。
二、定期備份數(shù)據(jù)服務(wù)器數(shù)據(jù)。并將備份資料拷貝到移動設(shè)備。服務(wù)器出現(xiàn)嚴(yán)重硬件故障時啟用備用服務(wù)器以保障正常運(yùn)轉(zhuǎn)。
機(jī)房應(yīng)急預(yù)案13
為了應(yīng)對各種突發(fā)和緊急事件,特制訂以下方案。
一、突發(fā)和緊急事件指自然因素或其它原因引起(或可能引起)基站財產(chǎn)安全或較多基站中斷的所有事件。
二、啟動基站維護(hù)(緊急)組織實施方案的范圍:梅雨季節(jié)地勢低洼基站的防汛;雷電高峰期基站的動力搶修或搶險;大雪(暴雪)基站房屋及鐵塔的維護(hù)及應(yīng)急搶修工作;臺風(fēng)、地震前中后基站及鐵塔的維護(hù);傳輸或MSC(BSC)故障造成基站大面積故障,故障恢復(fù)后基站網(wǎng)絡(luò)的測試。
三、啟動基站維護(hù)(緊急)組織實施方案的條件:天氣和各種地質(zhì)災(zāi)害預(yù)報或由此可造成(或正在造成)基站的財產(chǎn)安全和網(wǎng)絡(luò)穩(wěn)定運(yùn)行,網(wǎng)管統(tǒng)計發(fā)現(xiàn)大面積網(wǎng)絡(luò)故障時必須立即啟動基站維護(hù)(緊急)組織實施方案。
四、對于由自然因素可能引起的基站及分布系統(tǒng)站點的財產(chǎn)安全和網(wǎng)絡(luò)穩(wěn)定運(yùn)行,得知地質(zhì)或天氣預(yù)報后,立即組織各代維項目部區(qū)和相關(guān)工程施工單位對所在地的站點進(jìn)行預(yù)防性巡檢,對于各種隱患要求各項目部現(xiàn)場及時上報給我公司災(zāi)害預(yù)防和處理應(yīng)急領(lǐng)導(dǎo)小組和各地移動公司應(yīng)急領(lǐng)導(dǎo)小組。
五、我公司應(yīng)急領(lǐng)導(dǎo)小組成員和各代維項目部所有維護(hù)人員在重大災(zāi)害預(yù)防和搶險過程中的的移動電話必須24小時開機(jī),必須無條件服從公司應(yīng)急領(lǐng)導(dǎo)小組和代維項目經(jīng)理統(tǒng)一安排,若某項目出現(xiàn)人員不足的情況下,公司臨時從總部或異地抽調(diào)人員和車輛參加搶險;凡當(dāng)?shù)匾苿庸舅犝军c不是我公司維的護(hù)站點出現(xiàn)重大險情后,我公司抗災(zāi)任務(wù)又不重時,各項目部要主動向移動請纓。
六、公司在每一次抗災(zāi)救險活動結(jié)束后
公司應(yīng)急領(lǐng)導(dǎo)小組應(yīng)對本次活動的成功經(jīng)驗和教訓(xùn)進(jìn)行總結(jié),對表現(xiàn)優(yōu)秀的團(tuán)隊或個人進(jìn)行表彰,表現(xiàn)較差的團(tuán)隊或個人進(jìn)行處罰
七、重大災(zāi)害預(yù)防和搶險的人員組織機(jī)構(gòu):
領(lǐng)導(dǎo)小組由總經(jīng)理,副總經(jīng)理,各部門經(jīng)理及地區(qū)經(jīng)理組成,總經(jīng)理為總指揮,各代維項目部也應(yīng)成立相應(yīng)成立相應(yīng)的抗災(zāi)救險領(lǐng)導(dǎo)小組。
八、抗災(zāi)救險人員安排:
公司總部和各代維項目部應(yīng)包括以下小組
1、通信保障組:在發(fā)生險情時提供移動通信應(yīng)急保障,負(fù)責(zé)實施應(yīng)急通信的詳細(xì)方案、應(yīng)急中所需的備品、備件、測試儀表、工具、技術(shù)資料的保管及預(yù)防性維護(hù)保障工作。
2、物資調(diào)撥組:負(fù)責(zé)所有應(yīng)急物資日常保管、定期檢查、更新以及應(yīng)急時的.調(diào)撥和運(yùn)送。
3、搶險救災(zāi)組:負(fù)責(zé)應(yīng)急時的搶修和救災(zāi)方案的實施
九、值班制度
1、各代維項目部在啟動抗災(zāi)救險預(yù)案后應(yīng)實行24小時值班制度,設(shè)立固定值班地點和24小時值班熱線。
2、全體應(yīng)急人員保持24小時開機(jī)。
3、在接到上級關(guān)于進(jìn)入應(yīng)急狀態(tài)的通知后,即由領(lǐng)導(dǎo)小組成員組成指揮中心。
十、體保障措施細(xì)則:
1、根據(jù)每年的雨情在進(jìn)入梅雨季節(jié)后將基站及分布系統(tǒng)代維的工作重點轉(zhuǎn)為重點機(jī)房、基站等重點防汛場所的巡視,故障處理。在遇到突發(fā)或緊急時間期間,加強(qiáng)對重點基站、低洼基站及傳輸機(jī)房的巡視,確保環(huán)境監(jiān)控系統(tǒng)工作正常。重點基站及傳輸機(jī)房一周一次,低洼基站二周一次。臺風(fēng)期間每天對拉線塔進(jìn)行巡檢,并填寫基站巡檢表。
2、重點保障地點預(yù)置好防汛搶險物資。并給各維護(hù)小組配備部分隨車搶險物資。如編織袋、鐵鍬、雨衣、雨靴、防火泥、防火包、手電等。對抽水泵,移動油機(jī)進(jìn)行保養(yǎng),確保其工作正常。對應(yīng)急燈、應(yīng)急手機(jī)定期充電。
3、出現(xiàn)連續(xù)暴雨或臺風(fēng)情況時,維護(hù)人員每天對重點站點及所有拉線塔進(jìn)行巡視,填寫基站巡檢表。發(fā)現(xiàn)緊急情況立即通知我公司地區(qū)經(jīng)理和移動代維管理人員,由代維管理人員上報移動部門領(lǐng)導(dǎo),并趕赴現(xiàn)場確認(rèn),視情況確定是否安排專人(人員由綜合部安排)進(jìn)行24小時值守。
4、網(wǎng)管值班人員對環(huán)境監(jiān)控設(shè)備出現(xiàn)的告警密切觀察并記錄,若確有異常情況發(fā)生,立即通知我代維人員趕赴現(xiàn)場檢查。并追蹤代維人員的處理情況和反饋結(jié)果,若發(fā)現(xiàn)代維人員未及時處理,我網(wǎng)管值班人員應(yīng)立即向我公司和移動公司匯報。
5、進(jìn)入汛期后由各項目部負(fù)責(zé)每天了解所在區(qū)域的水位情況,并通知網(wǎng)管值班人員,由網(wǎng)管值班人員通知我代維人員及移動代維管理人員,根據(jù)水位情況合理調(diào)度巡視隊伍與車輛。
6、收到臺風(fēng)警報后,各項部項目經(jīng)理立即組織代維人員對全區(qū)拉線塔進(jìn)行巡檢,發(fā)現(xiàn)異常發(fā)現(xiàn)緊急情況立即通知移動代維管理人員和我公司應(yīng)急領(lǐng)導(dǎo)小組,視情況確定應(yīng)急措施。
7、收到大雪或暴雪預(yù)報,組織維護(hù)人員對所轄基站中拉線塔基站、彩鋼瓦基站進(jìn)行重點巡檢,當(dāng)?shù)玫骄W(wǎng)管或其他人員通知所轄基站中有拉線塔基站、彩鋼瓦基站出現(xiàn)故障或非正常情況,立即派搶修人員奔赴現(xiàn)場,并逐級上報。
機(jī)房應(yīng)急預(yù)案14
由于機(jī)房內(nèi)部用電設(shè)備多,供電線路復(fù)雜,電器設(shè)備連續(xù)運(yùn)轉(zhuǎn),導(dǎo)致線路設(shè)備發(fā)熱量大,甚至出現(xiàn)線路設(shè)備提前老化,極易發(fā)生供電線路和電氣設(shè)備起火現(xiàn)象,任何人員一旦發(fā)現(xiàn)火情,要沉著冷靜視火情情況進(jìn)行操作:
1:“先斷電,后滅火”是撲滅電氣火災(zāi)的基本原則,在切斷電源時要根據(jù)現(xiàn)場火勢、著火設(shè)備進(jìn)行判斷,考慮重要負(fù)荷、消防電源的影響以及配電系統(tǒng)回路的分布,防止火災(zāi)未救,人員先被電擊或灼傷。如果發(fā)現(xiàn)機(jī)柜內(nèi)設(shè)備出現(xiàn)內(nèi)部打火、冒煙但沒有明火出現(xiàn)時,要立即拔掉該設(shè)備的電源插頭,并把該設(shè)備拿離機(jī)柜,防止危害其他設(shè)備;發(fā)現(xiàn)局部輕微著火不危機(jī)其他設(shè)備的情況下,要立即斷開該設(shè)備電源,并組織人員利用就近消防器材進(jìn)行滅火,防止火勢蔓延擴(kuò)大,并向領(lǐng)導(dǎo)報告;發(fā)現(xiàn)設(shè)備火勢大危機(jī)整個機(jī)柜但不危機(jī)人員生命還能控制時,立即對應(yīng)機(jī)柜編號,斷開整個機(jī)柜電源,并組織人員使用氣體滅火器進(jìn)行撲火,發(fā)現(xiàn)UPS電池組著火時先斷開電池組箱體上的控制開關(guān),必要時再斷開電源室控制UPS的總斷路器,用氣體滅火器滅火,如果火勢大不能控制應(yīng)立即向負(fù)責(zé)人匯報、撥打119報警,根據(jù)情況切斷機(jī)房總電源再進(jìn)行組織滅火。
2:組織實施:在消防車來之前,先盡力使用現(xiàn)有消防設(shè)備將火勢控制在最小范圍。 消防車來之后,值班人員配合消防專業(yè)人員撲救或作好輔助工作。 迅速組織人員逃生,原則是“先救人,后救物”, 及時安全地疏散人員和財產(chǎn)轉(zhuǎn)移。火勢大時可用滅火器邊噴邊撤退,確保人員安全。
3:注意事項:發(fā)現(xiàn)火災(zāi)撥打火警電話119報警時要講清詳細(xì)地址、起火部位、著火物質(zhì)、火勢大小、報警人姓名電話、并派人到路口迎候消防車。火災(zāi)事故首要的一條是保護(hù)人員安全,撲救要在確保人員不受傷害的前提下進(jìn)行。 發(fā)現(xiàn)火災(zāi)時應(yīng)掌握的原則是邊救火,邊報警。人員在逃生時應(yīng)掌握正確的逃離方法。救火時不要冒然開窗,以免空氣對流,加速火勢蔓延。
4:滅火器材:電氣火災(zāi)隱患存在具有一定的隱蔽性,它的發(fā)生來得快具有突發(fā)性,促成火災(zāi)發(fā)生的原因受多因素影響而且各因素之間具有關(guān)聯(lián)性,火災(zāi)形成后的分解物中有毒氣,容易蔓延,即使斷電也可能有殘留電壓存在,所以撲滅電氣火災(zāi)應(yīng)用氣體滅火器,“二氧化碳”滅火器主要適用于撲滅貴重設(shè)備、檔案資料、電氣設(shè)備和其他一般物質(zhì)的.初期火災(zāi)。不導(dǎo)電,電壓超過600v時,應(yīng)切斷電源;“1211”滅火器是一種具有高效、低毒、腐蝕性小、滅火后不留痕跡、不導(dǎo)電、使用安全、儲存期長的新型優(yōu)良滅火劑,特別適用于撲滅油類、電氣設(shè)備、精密儀器及一般有機(jī)溶劑的火災(zāi);
值班人員應(yīng)經(jīng)常開展事故預(yù)想、安全活動討論、學(xué)習(xí)消防知識、模擬消防演練等多種形式的活動,增強(qiáng)對火災(zāi)事故處理方法的認(rèn)識,在火災(zāi)事故發(fā)生時能做到頭腦清晰、有條不紊,提高火災(zāi)事故處理的效率。同時還要對已發(fā)生的火災(zāi)事故的原因進(jìn)行認(rèn)真分析,調(diào)查處理,做到四不放過:
(1)事故原因不查清不放過;
(2)事故責(zé)任者得不到處理不放過;
(3)整改措施不落實不放過;
(4)教訓(xùn)不吸取不放過,預(yù)防火災(zāi)事故再次發(fā)生。
機(jī)房應(yīng)急預(yù)案15
高性能計算技術(shù)及應(yīng)用水平已成為顯示綜合國力的一種標(biāo)志。高性能計算機(jī)持續(xù)不間斷地為用戶提供高性能計算服務(wù),而運(yùn)維應(yīng)急預(yù)案是主機(jī)運(yùn)行中處理突發(fā)事件的依據(jù)和方法,是主機(jī)系統(tǒng)穩(wěn)定運(yùn)行的保障。本文簡要介紹上海超級計算中心主機(jī)運(yùn)維應(yīng)急預(yù)案,供同行參考。
1.主機(jī)和運(yùn)維管理制度簡介
超級計算機(jī)是功能最強(qiáng)、運(yùn)算速度最快、存儲容量最大的一類計算機(jī)。目前只有少數(shù)國家掌握研發(fā)技術(shù),系統(tǒng)造價非常昂貴,多用于國家高科技領(lǐng)域和尖端技術(shù)研究,是國家科技發(fā)展水平和綜合國力的重要標(biāo)志。上海超級計算中心作為上海信息港主體工程之一,國家和上海市政府投資先后引進(jìn)神威-I超級計算機(jī)、神威-64P集群計算機(jī)、曙光4000A超級計算機(jī)系統(tǒng)并投入商業(yè)化運(yùn)行。
上海超級計算中心自20xx年正式開通至今,這些高性能計算機(jī)系統(tǒng)已安全、穩(wěn)定運(yùn)行七年多時間,上機(jī)用戶取得了豐碩的科研成果和社會效益。在這七年中,為保障這些高性能計算機(jī)系統(tǒng)安全、穩(wěn)定、不間斷地運(yùn)行,技術(shù)支持部在中心引進(jìn)第一臺高性能計算機(jī)--神威-I超級計算機(jī)系統(tǒng)的同時,建立了機(jī)房應(yīng)急預(yù)案、運(yùn)行記錄、設(shè)備運(yùn)行參數(shù)等基礎(chǔ)運(yùn)維制度,在二期引進(jìn)曙光4000A超級計算機(jī)系統(tǒng)過程中,不斷完善原有運(yùn)維制度,并針對該主機(jī)系統(tǒng)特點編寫了大量操作方法和應(yīng)急預(yù)案。
中心自20xx年獲得ISO27001(BS7799)信息安全認(rèn)證以來,技術(shù)支持部根據(jù)其要求規(guī)范了文檔體系建設(shè),形成了機(jī)房管理制度、應(yīng)急預(yù)案、操作方法、運(yùn)行情況記錄的四大類運(yùn)維文檔。
正是這些運(yùn)維管理制度的不斷完善和有效執(zhí)行,才確保了資產(chǎn)價值高、服務(wù)對象廣、社會影響大的中心主機(jī)系統(tǒng)安全、穩(wěn)定運(yùn)行,保障重點項目、用戶服務(wù)的連續(xù)性。
2.應(yīng)急預(yù)案重要性
上海超級計算中心機(jī)房運(yùn)維管理文檔劃分為機(jī)房管理制度、應(yīng)急預(yù)案、操作方法、運(yùn)行記錄共四大類(如圖1所示)。
圖1應(yīng)急預(yù)案分類
應(yīng)急預(yù)案在應(yīng)急系統(tǒng)中起著關(guān)鍵作用,它明確了在突發(fā)緊急情況發(fā)生之前、發(fā)生過程中以及剛剛結(jié)束之后,誰負(fù)責(zé)做什么、何時做,以及相應(yīng)的策略和資源準(zhǔn)備等。它是針對可能發(fā)生的重大事故,按照其影響和后果嚴(yán)重程度,在應(yīng)急準(zhǔn)備、響應(yīng)、操作各個方面預(yù)先做出的詳細(xì)安排,是開展及時、有序和有效事故應(yīng)急工作的行動指南。因此,應(yīng)急預(yù)案在這四類運(yùn)維管理文檔中處于最為重要的地位。
3.應(yīng)急預(yù)案分類
應(yīng)急預(yù)案按重要性和事件種類,可以劃分為消防預(yù)案、斷電預(yù)案、空調(diào)預(yù)案、其他預(yù)案共4種,預(yù)案各文檔之間彼此獨立又互為關(guān)聯(lián),具有非常強(qiáng)的可操作性。制定預(yù)案的指導(dǎo)原則是盡一切可能,最大限度地確保向用戶提供的服務(wù)不中斷。在緊急事件發(fā)生的情況下,保證核心設(shè)備連續(xù)運(yùn)行,避免存儲數(shù)據(jù)丟失。在事件處置完成后,能快速恢復(fù)高性能計算服務(wù)。
3.1消防預(yù)案
消防預(yù)案是主機(jī)房最重要的應(yīng)急預(yù)案。該類預(yù)案根據(jù)《上海超級計算中心滅火和應(yīng)急疏散預(yù)案》的原則并結(jié)合主機(jī)房主機(jī)設(shè)備和消防設(shè)備的運(yùn)行特性而制定。主要由《主機(jī)房消防應(yīng)急預(yù)案》和《主機(jī)房氣體噴淋消防系統(tǒng)啟動撤離及處置應(yīng)急預(yù)案》2個文檔組成。
消防應(yīng)急預(yù)案:該預(yù)案著重規(guī)范了火警事件發(fā)生后,所有主機(jī)維護(hù)人員如何根據(jù)所屬區(qū)域和現(xiàn)場情況,判斷和選擇正確的處理方法,同時配合中心物業(yè)人員處置,降低事件帶來的影響。
對于設(shè)備發(fā)生煙霧,主機(jī)維護(hù)人員協(xié)同物業(yè)人員尋找煙霧點予以切斷相關(guān)區(qū)域電源;當(dāng)設(shè)備發(fā)生可以控制火情,協(xié)同物業(yè)人員滅火;當(dāng)主機(jī)房發(fā)生火災(zāi)而無法控制,應(yīng)采取施救方法等措施。
氣體噴淋預(yù)案:該預(yù)案描述主機(jī)房氣體噴淋系統(tǒng)啟動的響應(yīng)和確認(rèn)并具體規(guī)定了撤離機(jī)房路線、善后處置。
這兩個預(yù)案中,消防應(yīng)急預(yù)案作為消防預(yù)案的`主體,涉及到如何處理與消防有關(guān)情況的各個方面。氣體噴淋預(yù)案是主機(jī)房發(fā)生重大火災(zāi)時應(yīng)對的最終滅火手段和人員撤離引導(dǎo)方法。
3.2斷電預(yù)案
斷電預(yù)案的重要性僅次于消防預(yù)案。該類預(yù)案根據(jù)中心供配電系統(tǒng)實際情況和各種斷電影響范圍下對主機(jī)運(yùn)行的最小保障要求而制定的。主要由《主機(jī)房斷電應(yīng)急預(yù)案》、《曙光4000A超級計算機(jī)系統(tǒng)緊急關(guān)機(jī)操作方法》、《曙光4000A超級計算機(jī)系統(tǒng)雙路斷電關(guān)機(jī)操作方法》等多個文檔組成主機(jī)房斷電應(yīng)急預(yù)案:該預(yù)案用于斷電情況下,主機(jī)維護(hù)人員如何與中心物業(yè)部門聯(lián)系控制主機(jī)房供電情況,并且負(fù)責(zé)對主機(jī)系統(tǒng)運(yùn)行受斷電影響程度做出正確判斷。指導(dǎo)維護(hù)人員按影響程度,分別選用預(yù)案中對應(yīng)的操作方法。本預(yù)案在所有斷電預(yù)案中起指導(dǎo)思想作用。緊急關(guān)機(jī)操作方法:該預(yù)案制定了主機(jī)系統(tǒng)在緊急情況下,最快速度關(guān)機(jī)的操作步驟。主要用于發(fā)生煙霧、明火或消防、斷電預(yù)案需在數(shù)分鐘內(nèi)關(guān)機(jī)斷電的事件。
雙路斷電關(guān)機(jī)操作方法:該緊急操作預(yù)案主要用于在外界雙路供電全部中斷情況下的操作。
該預(yù)案的關(guān)機(jī)原則是:根據(jù)實際電力供應(yīng)考慮操作步驟,寧慢勿快,在時間允許的情況下,最大程度保證存儲節(jié)點、SAN和SCSI存儲設(shè)備、工程用戶的計算節(jié)點的運(yùn)行,盡可能減少關(guān)閉范圍,以確保能在恢復(fù)供電的情況下,主機(jī)盡快恢復(fù)正常運(yùn)行狀態(tài),減少影響范圍。
3.3空調(diào)預(yù)案
超級計算機(jī)系統(tǒng)在運(yùn)行中消耗大量電能,在
提供高性能的計算能力同時產(chǎn)生大量的熱量,必須采用專用空調(diào)系統(tǒng),以保持主機(jī)系統(tǒng)適當(dāng)?shù)臏亍穸取⒖諝鉂崈舳鹊冗\(yùn)行環(huán)境需求。因此,專用空調(diào)系統(tǒng)與主機(jī)系統(tǒng)密切相關(guān),空調(diào)預(yù)案是主機(jī)房必備的應(yīng)急預(yù)案。
制定該預(yù)案的原因在于,斷電情況下,空調(diào)與主機(jī)系統(tǒng)存在互相牽制的現(xiàn)狀。主機(jī)和空調(diào)系統(tǒng)均為外界雙路供電,主機(jī)系統(tǒng)配有UPS不間斷電源系統(tǒng),而空調(diào)系統(tǒng)無UPS支持。在雙路停電情況下,主機(jī)系統(tǒng)可獲得UPS電池組支持運(yùn)行若干分鐘,空調(diào)系統(tǒng)無UPS支持只能停機(jī)。由于在無空調(diào)冷卻情況下,主機(jī)系統(tǒng)會在短時間內(nèi)積聚大量熱量導(dǎo)致超過運(yùn)行警戒溫度,主機(jī)系統(tǒng)在有可供電余量的情況下,仍將被迫關(guān)機(jī)。因此,確保空調(diào)中斷情況下的主機(jī)運(yùn)行環(huán)境是該預(yù)案的制定原則。
預(yù)案根據(jù)各臺主機(jī)配備的空調(diào)系統(tǒng)特點制定,由《曙光機(jī)房空調(diào)系統(tǒng)故障應(yīng)急預(yù)案》和《神威機(jī)房空調(diào)系統(tǒng)應(yīng)急預(yù)案》2個文檔組成,這里僅介紹曙光機(jī)房空調(diào)系統(tǒng)應(yīng)急預(yù)案。
該預(yù)案的第一步:考慮增強(qiáng)主機(jī)系統(tǒng)散熱效果,采用打開主機(jī)機(jī)柜前后門,和機(jī)房周邊木門,在通風(fēng)道上布置有UPS支持的應(yīng)急風(fēng)扇,形成空氣對流,帶走熱空氣,從而增強(qiáng)主機(jī)系統(tǒng)散熱效果,降低升溫速度。
該預(yù)案的第二步:在采取上述措施并持續(xù)升溫到一定溫度之上的情況下,考慮緊急關(guān)閉部分或全部計算節(jié)點,減少熱量生成,確保主機(jī)系統(tǒng)的核心存儲和網(wǎng)絡(luò)系統(tǒng)不受影響,確保空調(diào)系統(tǒng)修復(fù)后,主機(jī)系統(tǒng)能快速恢復(fù)運(yùn)行。
3.4其他預(yù)案
除了固定的三類預(yù)案之外,技術(shù)支持部還根據(jù)主機(jī)系統(tǒng)實際運(yùn)行中出現(xiàn)的各種意外情況,隨時制定具有針對性的預(yù)案。
如《大樓頂棚坍塌應(yīng)急操作方法》的制定,就
是由于20xx年1月連續(xù)發(fā)生雨雪等災(zāi)害性天氣,中心大樓頂棚大量積雪且難融化,物業(yè)預(yù)計存在情況繼續(xù)惡化,有發(fā)生頂棚坍塌事故的可能,一旦發(fā)生將影響一樓主機(jī)運(yùn)行。
針對該突發(fā)的隱患,中心技術(shù)支持部制定應(yīng)急操作方法,對維護(hù)巡查頻度范圍、漏水可能發(fā)生位置、如何處理受漏水影響的主機(jī)設(shè)備等操作步驟進(jìn)行嚴(yán)格界定。即使在最后,中心大樓頂棚經(jīng)受住災(zāi)害性天氣的考驗,該預(yù)案并未發(fā)揮作用,這正體現(xiàn)了應(yīng)急預(yù)案的備而不用的特點。而且通過各種意外
情況的迅速分析、應(yīng)對和實踐操練,不斷鍛煉主機(jī)維護(hù)隊伍,使之走向成熟。
4.在實際案例中,應(yīng)急預(yù)案的作用
在主機(jī)系統(tǒng)年復(fù)一年的運(yùn)行中,我們希望這些設(shè)備正常穩(wěn)定運(yùn)行,應(yīng)急預(yù)案永遠(yuǎn)不會被使用,然而在實際運(yùn)行中,總免不了因突發(fā)事件執(zhí)行應(yīng)急預(yù)案。
而每次突發(fā)事件是檢驗應(yīng)急預(yù)案制定是否科學(xué)、有效的最好證明。
4.1雙路斷電,UPS正常運(yùn)行案例
20xx年8月某天,因打雷導(dǎo)致供電一路跳閘自動換至另一路供電,曙光機(jī)房2臺空調(diào)掉電。
主機(jī)維護(hù)人員立即按應(yīng)急預(yù)案操作,電話通知物業(yè)人員恢復(fù)空調(diào)運(yùn)行,恢復(fù)過程中所有空調(diào)相繼出現(xiàn)高溫報警,機(jī)柜液晶屏平均溫度35度,開啟全部曙光機(jī)柜前后門,打開神威-曙光玻璃門并調(diào)集應(yīng)急電扇,于12:45恢復(fù)正常。
12:50再次出現(xiàn)雙路供電中斷,曙光空調(diào)因無
UPS支撐全部斷電,啟動斷電應(yīng)急預(yù)案,開啟
5、6號木門,開啟神威機(jī)房全部空調(diào),布置電扇,將冷氣導(dǎo)入曙光機(jī)房,熱量從6號木門的外部通道排出,選擇性殺除部分作業(yè),至13:05供電恢復(fù),曙光空調(diào)開始工作,13:20環(huán)境恢復(fù)正常。全機(jī)在此過程中,正常運(yùn)行未停機(jī),只損失了部分不重要的作業(yè)。
4.2單路斷電,UPS失效案例
20xx年8月某天,因低壓配電柜開關(guān)至UPS房間X-JM柜電纜發(fā)生相對地短路,造成UPS機(jī)組逆變器自身保護(hù)動作,關(guān)閉UPS機(jī)組,導(dǎo)致曙光主機(jī)系統(tǒng)失電。
全機(jī)掉電后,主機(jī)維護(hù)人員迅速按應(yīng)急預(yù)案
手工關(guān)閉所有電源開關(guān)。10:30恢復(fù)供電,溫濕度恢復(fù)正常后,全機(jī)加電,恢復(fù)過程中修復(fù)
storage00
1、00
5、010三個盤陣的9個用戶文件系統(tǒng),修復(fù)15個節(jié)點加電故障,除cnode00
9、anode029電源
環(huán)境模塊故障,于當(dāng)日15:10全機(jī)系統(tǒng)恢復(fù)正常。
由于處置及時,主機(jī)受影響范圍很小,在恢復(fù)供電后數(shù)小時即成功開啟全系統(tǒng)。
5.隨時保持應(yīng)急預(yù)案的適用性
主機(jī)長年累月的運(yùn)行,故障和問題的發(fā)生,往往是必然的,也是客觀、無法回避的。因此,要求在維護(hù)工作中,預(yù)先考慮到可能的問題和故障,制定完善的應(yīng)急預(yù)案。應(yīng)急預(yù)案不可能包含所有的故障和問題,但應(yīng)根據(jù)維護(hù)經(jīng)驗,盡可能地設(shè)想各種危機(jī)情況下的處置措施。做到預(yù)想到各種可能的問題。
而在形成應(yīng)急預(yù)案后,更重要的是持續(xù)地在
運(yùn)行中加以完善、測試和演練,盡可能模擬實際情況,做到即使只有1名維護(hù)人員在場,也能在真正發(fā)生危機(jī)時,以最短時間獨立處置故障。
以目前中心的主機(jī)運(yùn)維工作為例,三年內(nèi),僅斷電預(yù)案就已根據(jù)實際運(yùn)行情況的變化,制定并更新了5~6個版本,針對夏季突發(fā)斷電也有專用預(yù)案。這樣的措施,直接保障了20xx年8月突發(fā)斷電事件中的主機(jī)連續(xù)運(yùn)行。而20xx年8月的突發(fā)斷電事件中,由于預(yù)案在之前剛根據(jù)實際情況進(jìn)行過演練和修改,主機(jī)維護(hù)人員僅用半小時就完成所有應(yīng)急操作動作,整機(jī)僅有個別設(shè)備故障,確保了主機(jī)設(shè)備未因突發(fā)斷電而發(fā)生大范圍損壞現(xiàn)象,恢復(fù)供電后直接完成開機(jī)。
實踐證明,完善而適用的應(yīng)急預(yù)案能保障向用戶提供穩(wěn)定的高性能計算服務(wù)。
6.結(jié)束語
完備而適用的應(yīng)急預(yù)案能有效降低主機(jī)系統(tǒng)因意外事件發(fā)生帶來的運(yùn)行風(fēng)險,對可能發(fā)生的意外來說,是一種事前防范措施。但對整個主機(jī)系統(tǒng)產(chǎn)品而言,是一種事后防范措施。如果主機(jī)系統(tǒng)生產(chǎn)廠商能把這些防范措施納入整個系統(tǒng)設(shè)計過程中,使操作方法更加簡便、更趨于人性化,這將幫助主機(jī)維護(hù)人員更為妥善處理意外事件,用戶得到更為穩(wěn)定的高性能計算服務(wù)。我們相信未來國產(chǎn)的高性能計算機(jī)能做到這一點,期待著這一天早日到來。
(為幫助了解,特在附錄中節(jié)選部分雙路斷電關(guān)機(jī)預(yù)案內(nèi)容)
附錄:《曙光4000A超級計算機(jī)系統(tǒng)雙路斷電關(guān)機(jī)操作方法》(省略具體操作步驟)
曙光4000A超級計算機(jī)系統(tǒng)雙路斷電關(guān)機(jī)操作方法
注意:
1、本方法專用于主機(jī)房發(fā)生雙路同時斷電緊急操作使用。(包括單線斷電切換失敗)。
2、本方法作為《曙光-4000A超級計算機(jī)系統(tǒng)緊急關(guān)機(jī)操作方法》(SSCS(TS)-XXXX-XXXX-XXXX)的附件。
1.斷電確認(rèn)及操作:
主機(jī)房內(nèi)一旦發(fā)現(xiàn)斷電,并接物業(yè)明確通知為雙路斷電,首先執(zhí)行如下操作(即確保節(jié)點溫度):
1.1打開機(jī)房門便于散熱,..
1.2機(jī)房通道上布置應(yīng)急風(fēng)扇加強(qiáng)冷熱空氣對流,夏季:應(yīng)急風(fēng)扇布置..;冬季:應(yīng)急風(fēng)扇布置..,使曙光
機(jī)房的溫度盡量降低。
1.3打開所有機(jī)柜前、后門。
1.4密切注意機(jī)房節(jié)點平均溫度(專指各機(jī)柜液晶面板所示之環(huán)境溫度值)。
2.緊急關(guān)機(jī)條件確認(rèn):
在完成上述操作后,密切觀察主機(jī)房環(huán)境。一旦有如下任何一個條件滿足:
2.1自斷電發(fā)生起,已達(dá)到XX分鐘仍未恢復(fù)供電;
2.2采取上述緊急通風(fēng)措施,節(jié)點溫度持續(xù)上升,超過XX℃;
可認(rèn)定為緊急斷電事件,即刻按下列緊急關(guān)機(jī)操作方法進(jìn)行操作。
3.緊急關(guān)機(jī)操作步驟:
注意事項:
3.1..
3.2關(guān)機(jī)操作的全過程中,注意隨時保持和物業(yè)的通訊聯(lián)系。除根據(jù)情況隨時聯(lián)絡(luò)外,應(yīng)嚴(yán)格保證每XX分鐘與物
業(yè)聯(lián)系一次,詢問UPS可支撐時間及恢復(fù)供電可能。(分機(jī)、手機(jī)、對講機(jī)等)
3.3應(yīng)理解關(guān)機(jī)原則為:根據(jù)實際電力供應(yīng)考慮操作步驟,寧慢勿快,在時間允許的情況下,最大程度保證X排節(jié)
點、存儲節(jié)點、SAN和SCSI存儲設(shè)備的運(yùn)行,盡可能減少關(guān)閉范圍,以確保恢復(fù)。
第一級操作:(首先執(zhí)行)關(guān)閉主機(jī)系統(tǒng)外圍設(shè)備..
第二級操作:(完成上述操作后,當(dāng)再次發(fā)現(xiàn)UPS電池低于XX分鐘或節(jié)點平均溫度超過XX℃,任一條件滿足,執(zhí)行如下操作)
關(guān)閉非重要用戶計算節(jié)點(ABC組)..
第三級操作:(完成上述操作后,當(dāng)再次發(fā)現(xiàn)UPS電池低于XX分鐘或節(jié)點平均溫度超過XX℃,任一條件滿足,執(zhí)行如下操作)
關(guān)閉所有用戶計算節(jié)點(D組)..
第四級操作:(完成上述操作后,當(dāng)再次發(fā)現(xiàn)UPS電池低于XX分鐘或節(jié)點平均溫度超過XX℃,任一條件滿足,執(zhí)行如下操作)
關(guān)閉SAN存儲設(shè)備和LSF數(shù)據(jù)庫服務(wù)器..
第五級操作:(完成上述操作后,當(dāng)再次發(fā)現(xiàn)UPS電池低于XX分鐘或節(jié)點平均溫度超過XX℃,任一條件滿足,完成關(guān)機(jī)操作)
關(guān)閉SCSI磁盤陣列和所有存儲節(jié)點..
特別關(guān)注:
1.如時間非常緊急,UPS電池低于XX分鐘:
直接執(zhí)行關(guān)機(jī)腳本:..
此腳本可分別將計算節(jié)點、接入節(jié)點、存儲節(jié)點進(jìn)行關(guān)閉。
2.如時間極其緊急,UPS電池低于XX分鐘,可按《曙光-4000A超級計算機(jī)系統(tǒng)緊急關(guān)機(jī)操作方法》(SSCS(TS)-XXXX-XXXX-XXXX),直接拉閘操作。
(上述二個方法僅用于突發(fā)情況,非極其必要情況下嚴(yán)禁使用,應(yīng)使用前列方法操作)
3.如遇主機(jī)失電(如關(guān)機(jī)操作不及已掉電或突發(fā)自動掉電)應(yīng)關(guān)閉所涉范圍所有設(shè)備電閘開關(guān)。..
【機(jī)房應(yīng)急預(yù)案】相關(guān)文章:
【經(jīng)典】機(jī)房應(yīng)急預(yù)案02-10
機(jī)房應(yīng)急預(yù)案12-24
機(jī)房網(wǎng)絡(luò)應(yīng)急預(yù)案08-30