2017-09-18 18:58:35 zd199218 阅读数 409

今天遇到一个已删除文件占用磁盘的情况,这里记录简单的分析和处理流程

背景:

1、接收到磁盘告警后,用df -h查看,磁盘的使用率是93%。
2、使用du -h --max-depth=1查看高负载磁盘时,各文件占用都不是很高。

问题:

df和du的执行结果不一致,无法定位到大文件路径并清理文件

问题分析:

初步怀疑有进程占用已经被删除的大文件,导致文件无法被释放

具体原因:

Linux下的文件,只有在引用数为0的情况下才会真正被删除掉,之前所占用的空间是不会被释放的。
如果存在文件引用,系统会将该文件标记为已删除,在引用此文件的进程都关闭时(文件引用数为0时),最终删除文件,释放空间资源。

解决方案:

1、【找出被删除的占用文件】lsof -n | grep grep deleted
2、【释放被占用空间】使用kill pidkill -9 pid杀掉进程后,再重启服务

总结:

这里可以看出,df和du的执行结果是有区别的,那这两个命令的执行流程如何?是什么导致输出结果不同,【Linux-运维】df和du的命令区分

2019-04-18 18:08:04 fgf00 阅读数 2071

一、现象:

Linux主机:用df -hT 查看磁盘占用已经满了,但是用du -sh * 又找不到是哪些文件目录占满了磁盘。

二、解决,lsof

lsof |grep delete

用lsof检查后才发现原因是,有文件被删除,而进程还活着,因而造成还占用空间的现象。

根据lsof列出的进程号,kill这些进程或重启进程后,空间就释放出来了。重要服务进程pid,注意确认,别发重要服务kill了。

三、总结

  1. 日志文件等,不要多个进程公用同一个文件,这样有的进程下线清理文件,由于其他进程占用,空间不会释放。
  2. 清理一些文件,不要直接 rm -rf,如果进程读取的文件,文件删了由于进程占用,空间不会释放。可以echo > filename 清空文件
2014-10-22 15:09:30 zhaojian1988 阅读数 11406

Linux中,当我们使用rmlinux上删除了大文件,但是如果有进程打开了这个大文件,却没有关闭这个文件的句柄,那么linux内核还是不会释放这个文件的磁盘空间,最后造成磁盘空间占用100%,整个系统无法正常运行。这种情况下,通过dfdu命令查找的磁盘空间,

Linux中,当我们使用rmlinux上删除了大文件,但是如果有进程打开了这个大文件,却没有关闭这个文件的句柄,那么linux内核还是不会释放这个文件的磁盘空间,最后造成磁盘空间占用100%,整个系统无法正常运行。这种情况下,通过dfdu命令查找的磁盘空间,两者是无法匹配的,可能df显示磁盘100%,而du查找目录的磁盘容量占用却很小。

遇到这种情况,基本可以断定是某些大文件被某些程序占用了,并且这些大文件已经被删除了,但是对应的文件句柄没有被某些程序关闭,造成内核无法收回这些文件占用的空间。

那么,如何查找那些文件被某些程序占用呢:

1

2

3

lsof -n | grep deleted

COMMAND     PID      USER   FD      TYPE             DEVICE        SIZE       NODE NAME

dd        31708      higkoo    1w      REG                8,2 5523705856     429590 /data/filetest (deleted)

命令:lsof -n| grep deleted打印出所有针对已删除文件的读写操作,这类操作是无效的,也正是磁盘空间莫名消失的根本原因。

解决办法:kill -9 PID   ----只需把进程删掉就能释放空间


lsof `which httpd` //那个进程在使用apache的可执行文件
lsof /etc/passwd //那个进程在占用/etc/passwd
lsof /dev/hda6 //那个进程在占用hda6
lsof /dev/cdrom //那个进程在占用光驱
lsof -c sendmail //查看sendmail进程的文件使用情况
lsof -c courier -u ^zahn //显示出那些文件被以courier打头的进程打开,但是并不属于用户zahn
lsof -p 30297 //显示那些文件被pid为30297的进程打开
lsof -D /tmp 显示所有在/tmp文件夹中打开的instance和文件的进程。但是symbol文件并不在列

lsof -u1000 //查看uid是100的用户的进程的文件使用情况
lsof -utony //查看用户tony的进程的文件使用情况
lsof -u^tony //查看不是用户tony的进程的文件使用情况(^是取反的意思)
lsof -i //显示所有打开的端口
lsof -i:80 //显示所有打开80端口的进程
lsof -i -U //显示所有打开的端口和UNIX domain文件
lsof -i UDP@[url]www.akadia.com:123 //显示那些进程打开了到www.akadia.com的UDP的123(ntp)端口的链接
lsof -i tcp@ohaha.ks.edu.tw:ftp -r //不断查看目前ftp连接的情况(-r,lsof会永远不断的执行,直到收到中断信号,+r,lsof会一直执行,直到没有档案被显示,缺省是15s刷新)
lsof -i tcp@ohaha.ks.edu.tw:ftp -n //lsof -n 不将IP转换为hostname,缺省是不加上-n参数
复制代码

linux文件占用空间

阅读数 119

没有更多推荐了,返回首页