心得:线上项目dev/vda1文件满了导致MySQL无法写入

今天查看两个月前上线的小项目,发现运行非常慢,而且增删改查失效了(吓我一大跳),急急忙忙的就开始了我的线上问题排查之路。

1.通过监控我发现了我的/dev/vda1挂载的/目录的内存已经满了,我的第一反应就是运行日志太大了,我通过以下命令来确定:

  • 先查看内存使用情况:df -h
  • 进入/dev/vdal的磁盘挂载的目录 /:cd /
  • 查看各个文件占用大小:du -sh *

2.最后发现www文件占34G,我天,然后我进入www文件,发现了日志文件高达33G之多。

3.我快马加鞭直接清空了两个日志文件,www文件的占用内存也恢复到了下图所示7.7G。 alt

4.但是相信你们也发现了,dev/vda1文件还是use100%,我的天啥情况啊这是,然后开始了我漫漫寻找方法之路。

5.10000年后,终于我发现了,删掉较大的文件或目录后磁盘空间却没有释放出来的原因是因为已删除空间却没有释放的进程

  • lsof -n | grep -i delete查询一下查看已删除空间却没有释放的进程id然后kill掉

alt

小彩蛋:杀进程的时候把nignx也杀了,哈哈哈哈,又查了一会,笑cry

到此我的线上排查之路为止,也是第一次遇到,记录一下心得!

#我的失利项目复盘##我的成功项目解析##23届找工作求助阵地##我的实习求职记录##实习,投递多份简历没人回复怎么办#
全部评论

相关推荐

昨天 11:23
重庆邮电大学 C++
点赞 评论 收藏
分享
10-09 00:50
已编辑
长江大学 算法工程师
不期而遇的夏天:1.同学你面试评价不错,概率很大,请耐心等待;2.你的排名比较靠前,不要担心,耐心等待;3.问题不大,正在审批,不要着急签其他公司,等等我们!4.预计9月中下旬,安心过节;5.下周会有结果,请耐心等待下;6.可能国庆节前后,一有结果我马上通知你;7.预计10月中旬,再坚持一下;8.正在走流程,就这两天了;9.同学,结果我也不知道,你如果查到了也告诉我一声;10.同学你出线不明朗,建议签其他公司保底!11.同学你找了哪些公司,我也在找工作。
点赞 评论 收藏
分享
1 1 评论
分享
牛客网
牛客企业服务