MaxCompute執行作業慢的原因排查
大家在平時開發過程中經常遇到作業(SQL、MR等)執行慢的原因,今天帶大家一起學習自排查方法。
1、wait wait ,job querying
遇到這個提示,就是資源出現了排隊,如果你是後付費用戶,那就是整個後付費的共享池已經沒有富餘的資源了,要等前一個作業處理完。
如果你是預付費用戶,很有可能是其他人的作業占用了過多資源,導致了排隊。
2、作業超時嚴重,超出了作業平均時間
遇到這種現象,先別著急,打開logview看一下,是不是大部分小作業已經跑完,剩下部分作業沒有跑完。
這種就是典型的數據長尾問題了,可以通過優化來自行解決。
大家可以參考這兩篇文檔。
推薦大家學會用Logview去解決問題,官方文檔參考:https://help.aliyun.com/document_detail/27987.html
阿裏巴巴大數據-玩家社區 https://yq.aliyun.com/teams/6/
---阿裏大數據博文,問答,社群,實踐,有朋自遠方來,不亦說乎……
最後更新:2017-10-16 17:03:27