我這里是北京時間2005-10-31 晚上22:10。還有一個時辰大家都關心的“星期一”就要過去了。今天到底發(fā)生了什么?項目組是怎么挺過來的?我們還能繼續(xù)往前走嗎?…
現(xiàn)在項目組的核心開發(fā)小組,DBA,服務器管理,報表組,Domain還有一些協(xié)調的工作人員都集中在信心中心。我們就下到醫(yī)院流程現(xiàn)場。
核心開發(fā)小組:這組基本上是新加坡,馬來西亞過來的同事。他們負責解決系統(tǒng)隨時出現(xiàn)的緊急情況。
DBA:這個小組主要負責繼續(xù)做移植數(shù)據(jù)的效驗,和緊急的數(shù)據(jù)patch,最主要的還是負責數(shù)據(jù)庫壓力監(jiān)控和調優(yōu)。
服務器管理組:他們負責看好四臺Web服務器(有兩臺是備用的),一臺應用服務器。還有其他的測試服務器。
報表組:這組人員現(xiàn)在的壓力可不小。各個部門的流程單據(jù),還有PA的財務報表,那可是用戶眼見為實的東西。他們的 從容, 總算讓我了解ShuaiYu同志去年拿那么多獎金背后的故事拉。
Domain組:…
協(xié)調的同事組:他們也挺辛苦的,雜亂的工作。該怎么去閱讀他們,我想自己嘗試過后都能理解。
大家可能會疑惑,goingmm你娃在說啥子哦!半天說不到主題,大伙張著嘴巴呼吸在等現(xiàn)場鏡頭呢!!
沒有伏筆,沒有漂亮的引詞.我們直接去住院處看看吧!
早上8:00準點到達現(xiàn)場。大廳擠滿了人,和大家念書的時候去學校財務處交錢是差不多的。大家都生怕自己手上的錢交不掉似的。這次單槍匹馬殺過來的。打心里還是有一點不塌實的感覺。還沒有按上門鈴人家已經(jīng)熱情的開門叫我進去拉。還沒打完招呼做完自我介紹,他們領導說話了:“快,小伙子8:30就開始錄入拉,我們還有兩員工是第一次使用系統(tǒng),趕快帶他們過一次”。當場暈忽忽的…怎么還有這回事啊。沒辦法啊,我們出來混,上面明確要求不能對用戶說“不”。
8:30到了,全部窗口打開,那可是鈔票進,發(fā)票出的場面。站在里面的我看著心里挺爽的。時間過了大概一個小時,系統(tǒng)開始有異常的情況出現(xiàn)了。最先暴露的就是大家熟悉的查詢。我橫著一看四臺機器全部顯示請等待。緊接著就是標準的北京腔調的疑問,“小伙子,你得給我看看,這是怎么拉。半天沒動靜,你叫我怎么辦啊?”穩(wěn)住他們,立馬電話連通信息中心,“喂…請幫我查一下,為什么系統(tǒng)現(xiàn)在特別慢,住院處已經(jīng)沒法繼續(xù)拉”。還沒有收到電話里面的回復。信息中心已經(jīng)有人趕到現(xiàn)場,通知用戶趕快把系統(tǒng)切換到103(另一臺web服務器)。結果出人意料,切換到103的用戶登陸后,頁面錯誤頻頻。用戶操作一半失敗了。眼睛帖著屏幕仔細一看內(nèi)存不嚴重不足。NND一直驚風火扯的Error Page 這回算是看過癮了。四臺電腦同時Show給我看,
住院處的領導們還是見過大場面的。臨場指揮,果斷堅決。帖一紙條“手工辦理”上窗戶。指揮著,“大家體諒一下,現(xiàn)在系統(tǒng)正在升級,難免出現(xiàn)問題。緊急的用戶可以先到這邊來,我們幫你們做手工錄入,呆會系統(tǒng)好了,錄進去把條子給你們送過去。”
我也沒有傻呆著,組織起兩臺客戶機器,再試一試101(住院處主服務器)。TNND這回就更加不可接受了。服務器直接down掉。我看到的是IBM字樣的提示信息了。“IBM”啊,我們把你們的硬件軟件一起放在那間神圣的機房里面。門口得刷卡進去。其他得連灰塵也沒讓它靠近你。就差點上幾根香,擱一大盤子放點蘋果橘子把你供起來拉!就這樣回報我們啊???
NND不會吧?才一個小時就玩完拉?這時候信息中心果斷的重起了一次服務器,雖然沒有通知我們。但是我還是很感謝他們及時的處理。NND再進頁面狀態(tài)入初,那種感覺就像是早上起床推開那玻璃窗戶。多爽啊!后來,103也重啟好拉,這回通知拉,主要給住院處用。我又指揮著,大家都確認進103吧。這次切換還算滿意,一直到病人錄入完畢都沒有發(fā)生問題(四臺一起工作)。在住院處守侯了一天,看著他們不時拿出全部發(fā)票,鈔票,數(shù)著算著,最后打開報表核對,呵呵!他們也怕錢不夠。還好,平均每個人核對過3次。精確到小數(shù)點后面兩位數(shù)。都能對上。
中午回研發(fā)室吃盒飯。正好碰上老大在給蔡總匯報情況。挺實在的,包括問題,出現(xiàn)原因,現(xiàn)在的解決辦法。從系統(tǒng)設置,到硬件,那可是都說到點子上拉。“就好比公司說要讓他們動起來每人發(fā)5000先用著吧。” 話語中我能感覺到明天早上的壓力會比今天小。不管能小多少,能不斷進步就好。聽得入神拉,難吃的盒飯,快吃完才感覺出來難吃死老。這回還真對得起這10塊錢。
看到這里,我想大家,還會為我明天早上的遭遇,捏一把汗。總結一下:“問題會延續(xù)... 時間不確定;壓力依然在,時間不確定;”可能這個時間越短,我們能學到的越多。
2005年10月31日 聽濤 601室 窗臺