閱讀980 返回首頁    go 微軟 go windows


髒數據和容錯__進階與深入_數據集成-阿裏雲

數據同步通常會對接源宿兩端數據存儲,需要根據源宿兩端數據源的具體信息適配和轉換相應的數據內容。在傳輸過程中,可能存在由於兩端元數據不匹配或者本身的業務數據傳輸轉換失敗(例如OSS上一個定義為Integer的類型存放了”abc”字符串),CDP將自動識別上述異常情況,並提供自動記錄和容錯機製,最大限度保證數據傳輸的可靠性和健壯性。

CDP 基於自動識別髒數據功能上,還提供數據傳輸容錯上限。例如,由於曆史遺留問題,用戶本身知曉髒數據影響情況並且對於源端髒數據有一定容忍度。用戶可以配置單個Job最大髒數據條數閾值,或者數據髒數據閾值。默認情況下,CDP對髒數據不設限製。

最後更新:2016-05-06 10:43:33

  上一篇:go 增量同步__進階與深入_數據集成-阿裏雲
  下一篇:go 安裝與配置__Console參考手冊_數據集成-阿裏雲