hellosrc:来一些故障排查,监控调优?比如发现 sql 执行很慢,但是发现 sql 自身没问题。使用 普罗米修斯收集HDFS和Yarn的jmx指标,在grafana 里聚合展示。发现RPC延迟高达10+ms级别,JVM GC平均耗时高达 ms级别,以及IOPS的磁盘IO速率很差。于是对磁盘做优化,对JVM内存做调参。对Hadoop RPC限流做优化...... 瞎编吧
0 点赞 评论 收藏
分享
2023-04-22 15:00
门头沟学院 大数据开发工程师 0 点赞 评论 收藏
分享
2022-10-19 13:09
门头沟学院 大数据开发工程师 牛客42517147号:azkaban换成airflow,数据展示可以不写吧,然后就是这么多分层全自己弄太假了,少些一点把细节坑记住刚的住问,不然你这太像培训项目了
0 点赞 评论 收藏
分享
关注他的用户也关注了: