閱讀652 返回首頁    go 阿裏雲 go 技術社區[雲棲]


采雲間DPC遷移方案實施計劃

遷移計劃概述:

第一階段:前期溝通&準備
1、 請先熟悉Dataworks的相關操作,比如節點的新增、執行、調度運維等相關操作;
2、 本次遷移隻把用戶在采雲間裏麵的任務遷移到DataWorks裏麵,需要用戶提前確認采雲間用到的odps項目在DataWorks中是否已經創建且可用;如果用戶在采雲間有多個odps項目,且用這在odps項目上運行的節點存在依賴關係,需要確保這些odps項目是在一個租戶空間中
3、 第二個DataWorks項目裏麵已經存在節點,需要把所有的節點備份一次(這個操作我們會幫忙處理);
4、 確定具體的操作時間,這個操作時間內用戶不能有任何的增、刪、改動作,操作完成之後的所有增、刪、改需要自己去DataWorks同步,不會再有增量的遷移;

第二階段:遷移方案
遷移時間計劃:
【遷移前確定遷移時間】采雲間遷移,遷移完成後會把根節點設置成暫停
【遷移完後提供一個星期的時間讓用戶驗證】用戶確認遷移效果,驗證數據(建議用戶在Base上通過補數據比對幾天之前的數據來確認是否一致,然後隨機采樣的方式來驗證)
效果確認完成之後通知到我們,我們這邊會把所有采雲間上的根節點暫停(遷移完成後預留1個月之後下線、刪除)
DataWorks上麵根節點需要用戶設置成啟動調度,提交到調度;
遷移內容:
IDE遷移
資源、函數會遷移到IDE中
采雲間IDE中的file遷移至DataWorks的IDE腳本文件
已發布節點遷移至DataWorks的工作流節點 
不劃分工作流Flow,按照節點關係一對一遷移,會根據設置的project把節點遷移到對應的project中;
調度遷移
-   任務類型:Virtual、ODPS SQL、CDP同步
數據源遷移
-  根據同步任務設置的鏈接方式生成數據源

驗證注意事項:
鑒於同步任務比較多,數據導入和回流任務的驗證要注意不能影響生產庫。
生產驗證時間為一周,拖的越久影響越大,最好在一周內完成係統割接。
 
第三階段:驗證
遷移後的驗證分為2步:
遷移團隊進行遷移後的告知客戶;
客戶介入驗收工作,驗收周期1周,請客戶務必在1周內內完成驗收工作(否則新增數據可能會導致問題);

采雲間支持群釘釘群(釘釘群號11766922)

最後更新:2017-07-11 10:32:29

  上一篇:go  曆經32載,域名仍是少年,更何況不足2歲的.xin?
  下一篇:go  2017GDS全球域名峰會現場掠影