2004年12月22日 星期三

第一次 Everybody leans on you

下午快快樂樂地到永豐棧麗緻酒店參加 Oracle 開發者研討會後,再回來公司,雖然沒抽到 PS2 或是 Motorola 最新手機,但是放輕鬆一下午,還是很愉快。加上晚上就是福委會舉辦的耶誕爵士晚會,地點是福華飯店 17 樓的夜景最佳觀賞平台,聽說有吃有喝有玩又有得拿,期待的心情一直洋溢持續著...

太極有道是,否極泰來,泰極否亦至,果不其然,樂極居然導致生悲,緊接著就遇上了進公司後第一次感受到分秒鏗鏘有力地流逝所伴隨的沉重壓力。

話說回到公司後,看到 JJ 留言說產線 MES 要上兩個 hotfix,看過 hotfix 內容,確認是相當單純的流程,就直接上了,也不是第一次做這檔子事,所以熟練地在 10 分鐘內依序搞定,邊操作還邊和同事約定共乘去參加晚會。

笑臉還掛在臉上,電話就來了,報告 Array OPI 不能登入耶!一會兒再來訊息,說 Cell OPI 也一樣狀況,產線的 TA 全停擺了。趕緊試著模擬 TA 使用流程,發現是卡在呼叫 MES 時,出現了 Exception NullPoint 的嚴重錯誤,連第一個畫面也出不來。緊接著調閱 OPI log file,發現有著和上午的測試環境一模一樣的錯誤訊息,當時已經試著解決,但終究還是失敗了。心裡頭已經有底,八成得 rollback 囉。不過,還是死馬當活馬醫,試著取消新增的額外函式庫呼叫,但還是沒能解決問題。期間呼叫了幾位技術大老,居然都連絡不上,整個現場就自己一人,沒有諮詢機會、也沒有商量對象,時間一秒一秒地過,代表著生產損失的壓力,隨著時間流逝,都可以明顯感覺到自己逐漸升高的體溫呢。此時,只有專注和細心,才能不再犯錯地挽回劣勢,整個廠就全都在等你一個人,進公司以來首次感受到這種無形的壓力哩。

確定要 roolback 後,趕緊跑去和 JJ 聯繫,確認 DB 無法退版的影響,在路上一方面也心中暗自盤算待會兒的 rollback 流程,畢竟上新版做過 n 次,就從來沒 rollback 過。所幸老天保佑,以及 Tru64 Cluster 的優異特性相助,決定 rollback 後,約 10 分鐘後就恢復產線功能,確認再確認後,總算鬆了一口氣...

很恐怖,還好是發生在還談不上產能的初期,但也提醒了自己,須注意仔細推演日後上版前為 rollback 需做的準備,然後,生篇 SOP 吧。

1 則留言:

  1. 這星期過完, 就又過了一年了... 真快呀!
    總覺得自己少過了一年的感覺, 因為今年新年是在長庚醫院過的.
    哈~~ 我又要去過跨年晚會囉!! 真高興...

    回覆刪除