心得:线上项目dev/vda1文件满了导致MySQL无法写入

今天查看两个月前上线的小项目,发现运行非常慢,而且增删改查失效了(吓我一大跳),急急忙忙的就开始了我的线上问题排查之路。

1.通过监控我发现了我的/dev/vda1挂载的/目录的内存已经满了,我的第一反应就是运行日志太大了,我通过以下命令来确定:

  • 先查看内存使用情况:df -h
  • 进入/dev/vdal的磁盘挂载的目录 /:cd /
  • 查看各个文件占用大小:du -sh *

2.最后发现www文件占34G,我天,然后我进入www文件,发现了日志文件高达33G之多。

3.我快马加鞭直接清空了两个日志文件,www文件的占用内存也恢复到了下图所示7.7G。 alt

4.但是相信你们也发现了,dev/vda1文件还是use100%,我的天啥情况啊这是,然后开始了我漫漫寻找方法之路。

5.10000年后,终于我发现了,删掉较大的文件或目录后磁盘空间却没有释放出来的原因是因为已删除空间却没有释放的进程

  • lsof -n | grep -i delete查询一下查看已删除空间却没有释放的进程id然后kill掉

alt

小彩蛋:杀进程的时候把nignx也杀了,哈哈哈哈,又查了一会,笑cry

到此我的线上排查之路为止,也是第一次遇到,记录一下心得!

#我的失利项目复盘##我的成功项目解析##23届找工作求助阵地##我的实习求职记录##实习,投递多份简历没人回复怎么办#
全部评论

相关推荐

点赞 评论 收藏
分享
1 1 评论
分享
牛客网
牛客企业服务