閱讀909 返回首頁    go 魔獸


最小傳輸單元__進階與深入_數據集成-阿裏雲

  • CDP在進行數據同步過程中,為了提升Job數據傳輸吞吐能力,CDP通常將對傳輸數據集進行細粒度切分(CDP稱之為Task),並啟動多線程乃至於多進程運行容器運行Task進行數據傳輸服務。單個Task運行容器CDP定義為傳輸單元。
  • CDP單個傳輸單元數據吞吐帶寬為1MB/s,受限於源宿兩端數據源的限製,CDP無法保證單個傳輸單元一定維持在1MB/s。例如用戶需要為單Job分配5MB/s的帶寬,CDP將啟動5個數據傳輸單元,吞吐量維持在5MB/s左右。由於兩端數據源負載壓力,該Job運行期間可能存在上下波動,無法一直維持在5MB/s,但能夠保證最大流量不超過5MB/s。

最後更新:2016-05-06 10:43:33

  上一篇:go 數據交換原理__進階與深入_數據集成-阿裏雲
  下一篇:go 切分與並行__進階與深入_數據集成-阿裏雲