数据开发工作日常
#牛客创作赏金赛#
工作
请教一下,就是写hsql,执行的时候只能看到ds的日志,应该怎么调优?见了临时表,能看到有一段sql的时间比较长,但是那是简单的选取字段,可能有资源的问题,就是我平常自己在本地生产环境里跑这段sql就十一分钟左右,但是放调度,上面就要跑一个多小时
解答:
ds也有露出的applicationid呀,直接看日志,有可能是在等待资源分配,感觉不可能这么慢
可以看看日志有没有成功提交任务
看看任务里有没有资源 excutor 或 taskmanager
工作
请教一下,就是写hsql,执行的时候只能看到ds的日志,应该怎么调优?见了临时表,能看到有一段sql的时间比较长,但是那是简单的选取字段,可能有资源的问题,就是我平常自己在本地生产环境里跑这段sql就十一分钟左右,但是放调度,上面就要跑一个多小时
解答:
ds也有露出的applicationid呀,直接看日志,有可能是在等待资源分配,感觉不可能这么慢
可以看看日志有没有成功提交任务
看看任务里有没有资源 excutor 或 taskmanager
全部评论
相关推荐
11-29 21:17
电子科技大学 大数据开发工程师 点赞 评论 收藏
分享
查看26道真题和解析
点赞 评论 收藏
分享