閱讀845 返回首頁    go windows


多執行計劃並行執行__執行計劃_用戶指南_E-MapReduce-阿裏雲

為了最大化利用集群的可用計算資源,目前可以將多個執行計劃掛載到同一個集群來達到多個執行計劃並行執行的效果。

總結為如下幾點:

  1. 同一個執行計劃內的作業是串行執行的,默認認為前序作業執行完畢,後序作業才能被提交執行。

  2. 在集群資源足夠的情況下,如果想要讓多個作業達到並行執行的效果,需要創建多個不同的執行計劃,同時關聯到同一個集群提交運行即可(默認一個集群最多支持 20 個執行計劃同時執行)。

  3. 目前管控係統支持將關聯到同一個集群的執行計劃並行提交到 Yarn,但如果集群本身資源不足,還是可能阻塞在 Yarn 隊列中等待調度。

創建執行計劃並關聯到集群的流程參見:執行計劃創建流程

最後更新:2016-11-23 17:16:09

  上一篇:go 作業結果和日誌查看__執行計劃_用戶指南_E-MapReduce-阿裏雲
  下一篇:go 報警管理__用戶指南_E-MapReduce-阿裏雲