周五凌晨一點,胡笳的手機震動。
屏幕亮起,王建設的號碼閃爍,背景是刺耳的警報聲。
“胡經理,存儲資源池崩了!”王建設的聲音帶著喘息,“esight剛接入,數據同步接口就報錯,現在所有業務告警中斷!”
胡笳抓起外套沖向電梯,腦海中閃過辛玉良的叮囑:“云平臺的夜晚,才是真正的戰場。”
e區停車場空無一人,她鉆進公司的行政小車,向司機報出地址時,腦海里全是esight的架構圖。
esight通過api接口采集設備數據,若日志格式不兼容,可能導致接口阻塞,引發連鎖故障。
實驗室里,王建設和張濤正在控制臺前切換頁面,汗珠順著下巴滴落。
屏幕上,紅色告警越來越多,混合云團隊的工程師們對著代碼罵罵咧咧。
“怎么回事?”胡笳推開玻璃門,防靜電鞋在地板上發出脆響。
“舊日志格式不兼容!”張濤指著報錯信息,“之前說好了先做清洗,王工非要直接對接!他想證明新方案不可行,好保留zabbix。”
王建設臉色鐵青:“少廢話,趕緊切回zabbix!cab審批還沒走完,出了事你擔得起嗎?”
cab即變更咨詢委員會,是華興內部對重大變更進行風險評估的正式流程,未經審批的變更可能被視為違規。
“來不及了。”胡笳調出故障分析報告,“看這里,esight的抓取間隔和存儲層心跳頻率沖突。”
她拔掉外接鍵盤,快速敲擊命令行,“先啟用應急腳本,用python做中間層轉換。”
“你瘋了?”王建設想搶鍵盤,“應急腳本屬于重大變更,必須走cab補審!”
“辛總特批了臨時授權。”胡笳輸入密碼,屏幕閃過綠色進度條,“給我十分鐘。這是《重大故障應急預案》里的備選方案,允許在緊急情況下先執行后補流程。”
實驗室里只剩鍵盤敲擊聲。
胡笳的襯衫后背漸漸被汗水浸透,指甲在空格鍵上留下淡淡痕跡。
王建設盯著時鐘,秒針劃過第七圈時,告警聲突然變調。
從連續蜂鳴轉為間隔提示,紅色界面開始退潮。
“恢復了!”陳琳的聲音從合規中心那頭傳來,“所有指標正常,延遲降到3秒以內!審計日志顯示應急腳本觸發合規,但需在24小時內補交cab文檔。”
張濤癱在椅子上,笑出淚來:“胡經理,你這腳本...哪兒來的?”
“集團it做過類似遷移。”胡笳擦了擦額頭,看向王建設,“王工,現在可以切回zabbix,也可以繼續用esight。但我建議趁天亮前做完數據校準。如果現在回退,之前的壓力測試數據就白費了。”
王建設沉默良久,從口袋里掏出煙盒,又塞回去:“小陳,把zabbix的歷史數據導出來吧。張濤,你們混合云負責驗證新接口。”
他轉身時,肩膀比來時低了半寸,“胡總,天亮后開個復盤會吧。按流程,我需要在復盤報告上簽字確認責任歸屬。”
周一上午十點,胡笳的辦公室飄出咖啡香。
胡笳在陳默的影響下也越發喜歡上了這苦香苦香的東西。
王建設推門進來,手里提著個紙袋:“云南小粒咖啡,朋友送的。”
“謝謝王工。”胡笳接過咖啡豆,放進新買的磨豆機,“昨晚復盤報告已經發給辛總,您看了嗎?”
“看了。”王建設盯著她調試咖啡機,“你把功勞歸給運維團隊,什么意思?”
胡笳當然知道功勞歸屬會影響年終獎比例。
“因為本來就是大家的功勞。”胡笳將研磨好的咖啡粉倒入濾杯,“沒有您堅持做壓力測試,我們發現不了深層問題。而且團隊磨合需要正向激勵。”
水流沖過咖啡粉,香氣漫溢。