阅读909 返回首页    go 小米


最小传输单元__进阶与深入_数据集成-阿里云

  • CDP在进行数据同步过程中,为了提升Job数据传输吞吐能力,CDP通常将对传输数据集进行细粒度切分(CDP称之为Task),并启动多线程乃至于多进程运行容器运行Task进行数据传输服务。单个Task运行容器CDP定义为传输单元。
  • CDP单个传输单元数据吞吐带宽为1MB/s,受限于源宿两端数据源的限制,CDP无法保证单个传输单元一定维持在1MB/s。例如用户需要为单Job分配5MB/s的带宽,CDP将启动5个数据传输单元,吞吐量维持在5MB/s左右。由于两端数据源负载压力,该Job运行期间可能存在上下波动,无法一直维持在5MB/s,但能够保证最大流量不超过5MB/s。

最后更新:2016-05-06 10:43:33

  上一篇:go 数据交换原理__进阶与深入_数据集成-阿里云
  下一篇:go 切分与并行__进阶与深入_数据集成-阿里云