阅读33 返回首页    go 技术社区[云栖]


MaxCompute执行作业慢的原因排查

大家在平时开发过程中经常遇到作业(SQL、MR等)执行慢的原因,今天带大家一起学习自排查方法。


1、wait wait ,job querying

遇到这个提示,就是资源出现了排队,如果你是后付费用户,那就是整个后付费的共享池已经没有富余的资源了,要等前一个作业处理完。

如果你是预付费用户,很有可能是其他人的作业占用了过多资源,导致了排队。


2、作业超时严重,超出了作业平均时间

遇到这种现象,先别着急,打开logview看一下,是不是大部分小作业已经跑完,剩下部分作业没有跑完。

bc43935528472d3a266c5171a97ce516e352116f

这种就是典型的数据长尾问题了,可以通过优化来自行解决。

大家可以参考这两篇文档。

推荐大家学会用Logview去解决问题,官方文档参考:https://help.aliyun.com/document_detail/27987.html



阿里巴巴大数据-玩家社区 https://yq.aliyun.com/teams/6/

---阿里大数据博文,问答,社群,实践,有朋自远方来,不亦说乎……

bba01b493e1c5d904e882b1c380673c6ebe49a98


最后更新:2017-10-16 17:03:27

  上一篇:go  工控主板在无线点餐终端的应用
  下一篇:go  IBM WAS LDAP不能读取组成员信息