inodes过载问题解决 ：Free inodes is less than 10% on volume /

admin

今天zabbix报警，一台服务器的disk满了，使用du -sh * 或 du -sh /* 查看目录的大小，查找占用空间大的目录/var/spool/clientmqueue….
解决
: L2 x5 |* D6 a; {( o4 W% P
" g. H3 @0 t; c5 ?+ p- |3 k/ c
3 t' |; \2 O2 ~解决方法：在cron的自动执行语句后加上> /dev/null 2>&1
例：
* 3 * * * /usr/bin/w > /dev/null 2>&1
# n6 t# h; j2 P- j3 M" z2 S# h5 n# ~这样就OK拉，就不会写到那个目录下了….


6 F2 x3 P7 C9 d恢复的唯一办法就是删除这些文件， 此方法仅仅用于大量的临时文件和缓存占用的inode. 如果数据不可删除， 就要想办法增加空间了。这里只讲怎么找到这些文件和删除它们.
. }$ [/ o) u; y

检查inode剩余
  X; R1 P( t/ g, @2 A, I. Vdf -i
Filesystem                 Inodes IUsed     IFree IUse% Mounted on
devtmpfs                   998158   373    997785    1% /dev
  r( b2 F$ t* B* ytmpfs                     1001093     1   1001092    1% /dev/shm
/ z! p/ ]9 D. V# `$ p) itmpfs                     1001093   557   1000536    1% /run
) c( t4 L  R  {4 F( }tmpfs                     1001093    16   1001077    1% /sys/fs/cgroup
/dev/mapper/centos-root 286781440 67061 286714379    1% /
/dev/vda1                  524288   350    523938    1% /boot
* A4 f7 H& a: p/ @( @$ }tmpfs                     1001093     1   1001092    1% /run/user/1002
6 v6 l. C& c0 G, n( q, D$ _tmpfs                     1001093     1   1001092    1% /run/user/0
tmpfs                     1001093     1   1001092    1% /var/log/rtlog


% ?% @9 q5 f/ n) T( T* I6 i& r9 w2 e

" L) s4 m) P$ b' T
5 |5 I% V  H  f在这里我的inode用的就很多了。

  q) y7 J9 u/ e. V2 D2 e* g( ]
首先找到这些占用的无用文件
for i in /var/* ;do echo $i ;sudo find $i |wc -l ;done
( X0 b3 Y3 q; [9 \" X3 ]; }! G
4 @8 m5 o4 Y. O0 `- x$ i2 d
: B. H; k, S- `7 c
  e/ B/ M6 E' C  R: J6 D4 o$ M
for i in /*; do echo $i; find $i |wc -l; done
" U( O4 N4 R" j0 v: d  I
" d/ p1 N( W- J执行上面的语句后， 会顺序从根目录的子目录循环查询， 如果有一个目录卡了很久， 就说明此目录可能存在很多文件.
; y8 P  R0 J9 b
+ z" {& H% i% G6 n1 [/ l
然后到这个目录下继续查找


; a6 q. Z. q6 k2 `循环这个过程直到找到.

1 K1 H( y% T$ |0 N
: M/ v3 p. z& C找到后酌情删除，删除后inode就会释放.


: b1 h9 Z4 `% j$ J* h在这里说一点，/var/spool/clientmqueue目录文件太多，rm -rf *时候会提示：
+ Z& J8 f; `( X5 i# d
- t& v$ b/ a& b5 Z0 v
- K$ z- {" w4 g% G“-bash: /bin/rm: Argument list too long“.. 意思是参数太长，rm 干不了。
7 E, Q) M% w+ o+ t% |! }
+ G2 R, Z8 w$ B% P( l
4 \1 w' w6 P4 w& j; h可以用ls | xargs rm -f这个命令将/var/spool/clientmqueue目录下所有文件删除。


" n# k0 }5 C: u" j8 g- D. {% L# T由于使用云服务器，无法直接删除，特写删除脚本如下：


#!/bin/bash
7 [/ ^/ L0 h/ N; g! W
1 b  _9 r/ A  f2 _, z
cd /var/spool/clientmqueue


: F5 b# o) ?% _2 V5 I* Wfilelist=`ls /var/spool/clientmqueue/`


. V6 @# S, B: j- ~# d1 ~for file in $filelist
do

, C2 I4 N% q8 @8 a# ]' t
( N, X6 M+ k; T* S. g8 K  echo $file
  sudo chown ec2-user:ec2-user $file
  sudo rm -rf  $file
  #sleep 2;
done
; j/ T( z: L& g# w" Y6 g
( a3 V( Q8 O- D6 ?0 m& t

admin

理解inode，要从文件储存说起。
- J6 P& l7 L& b9 q/ R3 l
8 R: x+ F7 g7 U& k8 _$ h% K文件储存在硬盘上，硬盘的最小存储单位叫做”扇区”（Sector）。每个扇区储存512字节（相当于0.5KB）。
* U4 E8 A& i6 Z' d操作系统读取硬盘的时候，不会一个个扇区地读取，这样效率太低，而是一次性连续读取多个扇区，即一次性读取一个”块”（block）。这种由多个扇区组成的”块”，是文件存取的最小单位。”块”的大小，最常见的是4KB，即连续八个 sector组成一个 block。
( B, ]" Z) }* E* @3 y  V
文件数据都储存在”块”中，那么很显然，我们还必须找到一个地方储存文件的元信息，比如文件的创建者、文件的创建日期、文件的大小等等。这种储存文件元信息的区域就叫做inode，中文译名为”索引节点”。
) O# b& `: g/ `7 c& F" T; p4 B每一个文件都有对应的inode，里面包含了与该文件有关的一些信息。
; U( c- ?: R0 D% Z# v
所以当inode用完也会出现No space left on device， 造成磁盘的不可写入.
4 ]: u$ H) G7 X$ D$ c" n# Z