244
人物
可重跑與冪等性__進階與深入_數據集成-阿裏雲
CDP定位在為各類數據存儲提供數據傳輸通道功能,在定期自動化運行數據同步場景,如數倉ETL流程,要求所有的數據同步Job能夠做到多次數據同步能夠和單次數據同步最終結果一致。例如當一次數據同步Job出現Fail情況,用戶可以直接重啟CDP任務而不需要到目的數據端進行線上數據清理操作。這在數倉領域屬於Job冪等性要求。
CDP Job的冪等性是通過Writer插件的前置條件來實現的,例如用戶可寫ODPS配置中提供數據寫入前的清理工作,該配置可以保證每次數據導入前都會先清除當前表或者分區的現有數據,這樣能夠保證數據多次寫入的結果和當前一次性寫入結果一致。
最後更新:2016-05-06 10:43:33
上一篇:
類型轉換__進階與深入_數據集成-阿裏雲
下一篇:
原子語義__進階與深入_數據集成-阿裏雲
報警管理__用戶指南_E-MapReduce-阿裏雲
DomainLogType__數據類型_API文檔_雲解析-阿裏雲
彈性Web托管FAQ(持續更新)__產品相關問題_使用問題_彈性 Web 托管-阿裏雲
創建數據訂閱通道__快速入門_數據傳輸-阿裏雲
監控報警__控製台使用指南_消息隊列 MQ-阿裏雲
SSH 登錄時出現如下錯誤:Too many authentication failures for root__遠程登錄 (SSH)_Linux操作運維問題_雲服務器 ECS-阿裏雲
添加轉碼配置__直播流操作接口_API 手冊_CDN-阿裏雲
數據訂閱SDK容災__最佳實踐_數據傳輸-阿裏雲
圖片服務__開發人員指南_對象存儲 OSS-阿裏雲
阿裏雲MaxCompute香港開服 將引入更多人工智能服務
相關內容
常見錯誤說明__附錄_大數據計算服務-阿裏雲
發送短信接口__API使用手冊_短信服務-阿裏雲
接口文檔__Android_安全組件教程_移動安全-阿裏雲
運營商錯誤碼(聯通)__常見問題_短信服務-阿裏雲
設置短信模板__使用手冊_短信服務-阿裏雲
OSS 權限問題及排查__常見錯誤及排除_最佳實踐_對象存儲 OSS-阿裏雲
消息通知__操作指南_批量計算-阿裏雲
設備端快速接入(MQTT)__快速開始_阿裏雲物聯網套件-阿裏雲
查詢API調用流量數據__API管理相關接口_API_API 網關-阿裏雲
使用STS訪問__JavaScript-SDK_SDK 參考_對象存儲 OSS-阿裏雲