閱讀472 返回首頁    go 魔獸


數據交換原理__進階與深入_數據集成-阿裏雲

為構建雲上四通八達的數據同步通道,CDP Job自身定義一套數據中間格式。針對不同的數據通道,實現不同的讀取插件完成從各類數據源抽取數據(CDP稱之為Reader),以及不同寫入插件向各類數據源寫入數據(CDP稱之為Writer)。CDP的各類插件實際上是完成了各類數據源對接CDP的適配器。如下:

image

  1. CDP利用RDSReader(實際上是MysqlReader)完成數據從RDS抽取,並轉換為CDP的數據協議,投遞給CDP傳輸中間層。

  2. CDP利用ODPSWriter完成CDP的數據協議轉換為ODPS的數據協議,並將轉換後的數據向ODPS寫入。

通過上述CDP數據中間層,CDP可以為公有雲上構建出四通八達的數據傳輸同步通道,讓數據不再是孤島!

image

最後更新:2016-05-06 10:43:33

  上一篇:go TxtFileWriter__Writer插件_使用手冊_數據集成-阿裏雲
  下一篇:go 最小傳輸單元__進階與深入_數據集成-阿裏雲