33
技术社区[云栖]
MaxCompute执行作业慢的原因排查
大家在平时开发过程中经常遇到作业(SQL、MR等)执行慢的原因,今天带大家一起学习自排查方法。
1、wait wait ,job querying
遇到这个提示,就是资源出现了排队,如果你是后付费用户,那就是整个后付费的共享池已经没有富余的资源了,要等前一个作业处理完。
如果你是预付费用户,很有可能是其他人的作业占用了过多资源,导致了排队。
2、作业超时严重,超出了作业平均时间
遇到这种现象,先别着急,打开logview看一下,是不是大部分小作业已经跑完,剩下部分作业没有跑完。
这种就是典型的数据长尾问题了,可以通过优化来自行解决。
大家可以参考这两篇文档。
推荐大家学会用Logview去解决问题,官方文档参考:https://help.aliyun.com/document_detail/27987.html
阿里巴巴大数据-玩家社区 https://yq.aliyun.com/teams/6/
---阿里大数据博文,问答,社群,实践,有朋自远方来,不亦说乎……
最后更新:2017-10-16 17:03:27