首页 » 技术分享 » inodes过载问题解决(包含隐藏文件)[Free inodes is less than ]

inodes过载问题解决(包含隐藏文件)[Free inodes is less than ]

 

inodes过载问题解决(包含隐藏文件)[Free inodes is less than ]

记录一下两次查找导致inodes过载的碎文件位置的过程。
使用命令为
df -i后

find /xxx -xdev -printf '%h\n'|wc -l

一层一层找下去

具体过程如下:
参考文档
作者:账号已注销20171213
链接:https://www.jianshu.com/p/c27ee8eeb872
來源:简书

一、inode是什么?
理解inode,要从文件储存说起。
文件储存在硬盘上,硬盘的最小存储单位叫做"扇区"(Sector)。每个扇区储存512字节(相当于0.5KB)。
操作系统读取硬盘的时候,不会一个个扇区地读取,这样效率太低,而是一次性连续读取多个扇区,即一次性读取一个"块"(block)。这种由多个扇区组成的"块",是文件存取的最小单位。“块"的大小,最常见的是4KB,即连续八个 sector组成一个 block。
文件数据都储存在"块"中,那么很显然,我们还必须找到一个地方储存文件的元信息,比如文件的创建者、文件的创建日期、文件的大小等等。这种储存文件元信息的区域就叫做inode,中文译名为"索引节点”。
每一个文件都有对应的inode,里面包含了与该文件有关的一些信息。

关于inode的更多信息请移步: http://www.ruanyifeng.com/blog/2011/12/inode.html

所以当inode用完也会出现No space left on device, 造成磁盘的不可写入.

二、恢复

恢复的唯一办法就是删除这些文件, 此方法仅仅用于大量的临时文件和缓存占用的inode. 如果数据不可删除, 就要想办法增加空间了。这里只讲怎么找到这些文件和删除它们.

检查inode剩余

df -i
文件系统           Inode      已用(I)   可用(I) 已用(I)% 挂载点
/dev/vda1        1310720   1062341   248379       81% /
devtmpfs          999070     313    998757       1% /dev
tmpfs            1001369     180   1001189       1% /dev/shm
tmpfs            1001369     998   1000371       1% /run
tmpfs            1001369      13   1001356       1% /sys/fs/cgroup
/dev/vdb1      104856576     265 104856311       1% /opt
tmpfs            1001369       1   1001368       1% /run/user/0

在这里我的inode用的就很多了。

首先找到这些占用的无用文件

$ for i in /*; do echo $i; find $i |wc -l; done

执行上面的语句后, 会顺序从根目录的子目录循环查询, 如果有一个目录卡了很久, 就说明此目录可能存在很多文件.确认文件是否有用并清理掉即可。

这里以上都是我在参考的文档,第一次清理无用文件的时候非常好用,但是第二次遇到类似情况我就发现如下情况:隐藏目录下存在大量文件的时候。上面的命令就无法查询到了。比如:

df -i
Filesystem            Inodes   IUsed  IFree IUse% Mounted on
/dev/mapper/xxx
                      655360   87395 567965   14% /
tmpfs                 490087       1 490086    1% /dev/shm
/dev/sda1             128016      39 127977    1% /boot
/dev/mapper/xxx
                     1411680 1310217 101463   93% /home
                    

使用df -i 命令可以很明显看到/home下的文件数很大,但是使用该命令后,追踪下我找不到这些碎文件在哪里:

for i in /home/*; do echo $i; find $i |wc -l; done

/home/admin
1310059
/home/lost+found
1
/home/smartping
147

继续

for i in /home/admin/*; do echo $i; find $i |wc -l; done
/home/admin/backup
4
/home/admin/bin
5
/home/admin/logs
15
/home/admin/ops_scripts
36
/home/admin/release_dir
1
/home/admin/webapps
2

这时候我发现我找不到碎文件了,于是我进入/home/admin下查看是否有隐藏目录:

ll -a /home/admin/
total 52
drwxr-xr-x  9 admin admin 4096 Nov 13 13:41 .
drwxr-xr-x. 5 root  root  4096 Oct 26 16:36 ..
drwxr-xr-x  3 admin root  4096 Nov 13 11:43 backup
-rw-------  1 admin admin  607 Nov 14 10:24 .bash_history
-rw-r--r--  1 admin admin   18 Oct 26 16:44 .bash_logout
-rw-r--r--  1 root  root   176 Oct 26 16:44 .bash_profile
-rw-r--r--  1 admin admin  124 Oct 26 16:44 .bashrc
drwxr-xr-x  2 admin root  4096 Nov 14 10:11 bin
drwxr-xr-x  2 admin root  4096 Nov 14 10:10 logs
drwxrwxr-x  4 admin admin 4096 Nov 12 17:23 .lts
drwxr-xr-x  7 admin admin 4096 Oct 26 16:44 ops_scripts
drwxr-xr-x  2 admin root  4096 Nov 14 10:09 release_dir
drwxr-xr-x  2 admin root  4096 Nov 13 13:40 webapps

查看隐藏目录下是否有碎文件:

for i in /home/admin/.lts/*; do echo $i; find $i |wc -l; done
/home/admin/.lts/JOB_CLIENT
1309970
/home/admin/.lts/TASK_TRACKER
20

ok,这时候就找到了碎文件,然后和该项目工程相关人员确认一下是代码产生的异常还是别的情况导致的,以及这些文件是否可以删除掉。
此外对相同代码和环境的服务器上的inodes数目进行确认,通过不同纬度思考问题所在。

但是如果/home/admin下有一万个隐藏文件怎么办,我难道要跑一万次for命令吗?
于是在查找碎文件的方法上我把查询命令换成了

find /home/admin -xdev -printf '%h\n'|wc -l

改命令可以查询到隐藏目录里的文件。

转载自原文链接, 如需删除请联系管理员。

原文链接:inodes过载问题解决(包含隐藏文件)[Free inodes is less than ],转载请注明来源!

0