皇上,还记得我吗?我就是1999年那个Linux伊甸园啊-----24小时滚动更新开源资讯,全年无休!

如何解决服务器存储 inode 耗尽的问题

如何解决服务器存储 inode 耗尽的问题

今天群里一朋友遇到这样一个问题,明明硬盘只用了 30% 左右的空间,但是却无法写入文件。使用 df -iT 命令查看文件系统使用情况时,发现根目录的 inode 使用率竟然是 100%。后来通过聊天得知,原来他的服务器主要用于存储 1KB 左右的小文件,这一下就破案了。

inode 主要用来记录文件的属性,及此文件的数据所在的块编号。每一个文件会占用一个 inode,因此如果都是小文件的话,那么就会出现 inode 已经耗尽,但文件系统还有很大的空闲空间,从而无法写入新文件。

如何获得更多的 inode

其实在创建 ext4 文件系统时,我们可以使用 -T small 参数来获得更多的 inode,从而优化对小文件的存储。接下来我们通过一个示例来看看效果。

这是两块相同大小的硬盘:

  1. root@debian:~# lsblk
  2. NAME MAJ:MIN RM SIZE RO TYPE MOUNTPOINTS
  3. sdb 8:16 0 1G 0 disk
  4. └─sdb1 8:17 0 1023M 0 part
  5. sdc 8:32 0 1G 0 disk
  6. └─sdc1 8:33 0 1023M 0 part

首先使用默认参数给 /dev/sdb1 创建文件系统:

  1. root@debian:~# /sbin/mkfs.ext4 /dev/sdb1
  2. mke2fs 1.47.0 (5-Feb-2023)
  3. Creating filesystem with 261888 4k blocks and 65536 inodes
  4. Filesystem UUID: 8935c902-df71-4808-b547-c85b6fd37a46
  5. Superblock backups stored on blocks:
  6. 32768, 98304, 163840, 229376
  7. Allocating group tables: done
  8. Writing inode tables: done
  9. Creating journal (4096 blocks): done
  10. Writing superblocks and filesystem accounting information: done

从输出中可见,该文件系统有 261888 个 4KB 大小的块和 65536 个 inode。

然后使用 -T 参数对 /dev/sdc1 创建文件系统:

  1. root@debian:~# /sbin/mkfs.ext4 -T small /dev/sdc1
  2. mke2fs 1.47.0 (5-Feb-2023)
  3. Creating filesystem with 1047552 1k blocks and 262144 inodes
  4. Filesystem UUID: f521096d-a5a1-41c9-bbf7-e6102e74e87a
  5. Superblock backups stored on blocks:
  6. 8193, 24577, 40961, 57345, 73729, 204801, 221185, 401409, 663553,
  7. 1024001
  8. Allocating group tables: done
  9. Writing inode tables: done
  10. Creating journal (16384 blocks): done
  11. Writing superblocks and filesystem accounting information: done

从输出中可见,该文件系统有 1047552 个 1KB 大小的块和 262144 个 inode。

也可以通过以下方式对比两个文件系统的 inode 数量:

  1. root@debian:~# mkdir default small
  2. root@debian:~# mount /dev/sdb1 default/
  3. root@debian:~# mount /dev/sdc1 small/
  4. root@debian:~# df -iT
  5. Filesystem Type Inodes IUsed IFree IUse% Mounted on
  6. /dev/sdb1 ext4 65536 11 65525 1% /root/default
  7. /dev/sdc1 ext4 262144 11 262133 1% /root/small

从以上示例中我们可以看出,在使用 -T small 参数后,inode 数量多了近 20 万个!

注意: 这样做也是有代价的。在使用默认参数创建 ext4 文件系统时,默认数据块大小为 4KB,而使用 -T small 参数后,数据块大小为 1KB。这就意味着我们存储一个同样大小的文件,使用 -T small 参数创建的文件系统存储该数据时,占用的数据块更多,数据更分散,如果文件较大,会直接影响文件的读取速度

mke2fsmkfs.ext4)的 -T 参数指定了如何使用该文件系统,以便 mke2fs 可以为该用途选择最佳的文件系统参数,其支持的使用类型在配置文件 /etc/mke2fs.conf 中定义,可以使用逗号分隔指定一个或多个使用类型

inode 不足的解决方法

当你已有的文件系统上出现 inode 不足的问题时,除了备份数据、重建分区并恢复分区数据外,还有两种临时解决方案:

1、删除文件大小为 0 的空文件,可以使用如下命令查找:

  1. find PATH -name "*" -type f -size 0c

注意: 使用 -size 参数时,不要用 -size 1k,这个表示占用空间为 1KB,而不是文件大小为 1KB,应该使用 -size 1024c 才表示文件大小为 1KB。

2、可以定期对历史小文件进行打包、归档,以减少文件数量。


作者简介:一个喜欢瞎折腾的 IT 技术人员,懂得不多,但是喜欢和有共同兴趣爱好的朋友交流、学习

(题图:MJ/9a66155a-772e-41f1-b29d-c3d4161f7853)


via: http://www.yanjun.pro/?p=128 作者:老颜随笔 编辑:wxy

本文由贡献者投稿至 Linux 中国公开投稿计划,采用 CC-BY-SA 协议 发布,Linux中国 荣誉推出

转自 技术|如何解决服务器存储 inode 耗尽的问题 (linux.cn)