中國航空網訊:6月23日晚19:35,一聲緊急的告警音打破了華東空管局網絡公司有線通信室西區綜合樓值班員吳昉盛一天的平靜,承載網告警顯示與主用SS后臺服務器連接的端口DOWN告警,他進入機房查看設備,發現主用服務器異常關機。當即在硬件設備上重啟服務器,發現服務器無法正常顯示,以太網端口異常,可以初步判斷為服務器硬件故障。
由于有線室常設東西區兩個值班點,長期的人員配備不足導致夜間值班只能保證單崗運行。發現故障后,吳昉盛立即根據應急手冊,確認影響范圍:撥測后確認程控業務未受影響。隨后他立即聯系NGN系統工程師,他清楚明白的告知工程師需盡快進行返廠維修,因為該服務器綁定LICENSE,無法更換備機。
一個人在西區值班大樓里急促跑動的身影當時就吸引了公司總值班副總喬孝梅的注意,作為部門的分管領導,喬副總對故障狀況也是了然于心,在吳昉盛通報部門領導的同時,她也毫無耽擱,多方聯系。由于第二天是周日,公司綜合業務室領導牽頭與廠商達成公司協議,加班加點搶修后臺服務器,同時綜合辦公室也派出車輛司機加班,配合吳昉盛的送修工作。
一切看似暫告一段落,只待第二天的返廠搶修,吳昉盛卻并沒有停下他的忙碌,他依然穿梭在設備網管之間,反復檢查硬件連接,試圖依靠自身的工作經驗和設備知識進一步分故障原因,他多次與工程師電話溝通,反復敲定送修細節和后續保障。設備的告警仍是刺耳,深夜的機房里他最后單獨卸下了機架上的服務器,打包完畢準備好了第二天的送檢工作,此時已近凌晨12點。一口氣忙碌了近5個小時,也真的是連水都顧不上喝一口。夜深,他卻睡意乏乏。
6月24日凌晨01:25剛回到值班休息室的吳昉盛還在考慮著明天送修,動環網管出現告警,可能是收到了當晚切電的影響,西航站樓8#整流模塊故障。吳昉盛當即又回到值班室,查閱資料并遠程查看設備情況。西航站樓整流器配置了7個模塊共同供電,單模塊故障對業務無影響。上樓倉庫準備好維修備件后,他回到休息室卻一心只急切的等待天明。
24日一早,喬副總在接報西航站樓情況后,主動提出代為值守,七點剛過就到了有線通信室西區值班室內,而吳昉盛在確認工具齊全后,自行驅車前往西航站樓更換整理模塊,二十分鐘內,他熟練的完成了全部步驟,確認告警消除后,他又馬不停蹄的趕回西區,聯系維修單位,確認送修細節。此時,距離他上班已經超過25小時。
24日10點,跟著公司出車,吳昉盛如約將故障服務器送至浦東,維修廠家積極配合,在兩個小時內就修復完畢,并在現場測試正常,隨后又將服務器運回西區機房,此時科室領導也早已在機房等待。14:00左右,在當天值班員的配合幫助下,SS后臺服務器重新上架,測試告警消除且網管恢復正常。
異常告警響了近二十小時,此時耳邊的安靜顯得似乎尤為珍貴,回到值班室的吳昉盛略顯無力,回想起過去的二十小時,他總算是長舒了一口氣,又是為設備而戰的一天,幸好忙中沒有出亂,幸好得到了值班領導的主動幫助,幸好公司上下全都安排妥帖……或許這一切不該說一句“幸好”,因為這就是通信網絡公司本來的模樣,24小時on call,時刻準備著。來源:華東空管局(文 高珺)