如何使情況變得更糟?

上周,我們幫助用戶恢複了一則複雜的數據災難,完美的挽救了數據,在恢複的過程中,我們有8位工程師24小時不間斷工作,夜以繼日,終於幫助用戶拯救了數據。
我想說說情況是如何變得更糟的。鑒於保護用戶信息,以下的描述請以警示意義理解。
-
首先用戶進行存儲擴容,需要在ASM中新加磁盤;
-
當磁盤加入後,在數據均衡完成之前,用戶發現問題,強製把盤移除;
-
然後發現ASM磁盤組不正常,又強製把磁盤組重建;
-
加載磁盤組之後,發現數據不見了;
-
意識到出問題了,數據僅有去年的備份;
我們注意到,在整個過程中,工程師並未意識到數據庫沒有及時的備份,並且也未曾清晰的意識到這些操作可能損毀數據,當通宵達旦的事故釀成之後,一切都不可收拾。
要避免這樣的問題,非常簡單,我以前提到:備份重於一切。一定要在重要的操作之前備份,這樣就可以避免將自己置於危險的境地。
當然,恢複也是極其艱難的,我們通過工具(雲和恩墨的ODU軟件,也有其他類似軟件可以做到)掃描抽取出數據文件,但是注意,這是一個EBS的數據庫,IMP導入需要重構複雜的對象和權限信息,仍然非常複雜。如果隻有一個人,我不敢想象其工作量。還好我們擁有一個團隊,最終才完成了這項任務。
團隊永遠是你最穩健的支撐!
本文出自數據和雲公眾號,原文鏈接
最後更新:2017-07-18 12:02:59