髒數據和容錯__進階與深入_數據集成-阿裏雲
數據同步通常會對接源宿兩端數據存儲,需要根據源宿兩端數據源的具體信息適配和轉換相應的數據內容。在傳輸過程中,可能存在由於兩端元數據不匹配或者本身的業務數據傳輸轉換失敗(例如OSS上一個定義為Integer的類型存放了”abc”字符串),CDP將自動識別上述異常情況,並提供自動記錄和容錯機製,最大限度保證數據傳輸的可靠性和健壯性。
CDP 基於自動識別髒數據功能上,還提供數據傳輸容錯上限。例如,由於曆史遺留問題,用戶本身知曉髒數據影響情況並且對於源端髒數據有一定容忍度。用戶可以配置單個Job最大髒數據條數閾值,或者數據髒數據閾值。默認情況下,CDP對髒數據不設限製。
最後更新:2016-05-06 10:43:33
上一篇:
增量同步__進階與深入_數據集成-阿裏雲
下一篇:
安裝與配置__Console參考手冊_數據集成-阿裏雲
中國雲讓百年名企折服 飛利浦“投靠”阿裏雲
2016年11月21日數據風控控製台升級__產品升級更新_數據風控-阿裏雲
創建應用實例__應用API列表_API參考_容器服務-阿裏雲
用戶信息配置__配置步驟_快速開始_Eclipse 插件-阿裏雲
DescribeRuleAttribute__轉發規則相關API_API 參考_負載均衡-阿裏雲
GetShipperStatus__日誌庫相關接口_API-Reference_日誌服務-阿裏雲
Hue 使用說明__開源組件介紹_用戶指南_E-MapReduce-阿裏雲
producer-lib__loghub-采集_用戶指南_日誌服務-阿裏雲
DescribeZones__LoadBalancer相關API_API 參考_負載均衡-阿裏雲
應用容量__應用基本配置_產品使用手冊_開放搜索-阿裏雲
相關內容
常見錯誤說明__附錄_大數據計算服務-阿裏雲
發送短信接口__API使用手冊_短信服務-阿裏雲
接口文檔__Android_安全組件教程_移動安全-阿裏雲
運營商錯誤碼(聯通)__常見問題_短信服務-阿裏雲
設置短信模板__使用手冊_短信服務-阿裏雲
OSS 權限問題及排查__常見錯誤及排除_最佳實踐_對象存儲 OSS-阿裏雲
消息通知__操作指南_批量計算-阿裏雲
設備端快速接入(MQTT)__快速開始_阿裏雲物聯網套件-阿裏雲
查詢API調用流量數據__API管理相關接口_API_API 網關-阿裏雲
使用STS訪問__JavaScript-SDK_SDK 參考_對象存儲 OSS-阿裏雲