夜雨聆风学习资料网

ARTICLE · 1378274

源码编译 ZFS|4 块 NVMe 搭建 RAID-Z 存储池,自带校验快

源码编译 ZFS|4 块 NVMe 搭建 RAID-Z 存储池,自带校验快

用到 ZFS 的场景很具体:你需要一个自带校验、自我修复、支持快照的文件系统,而且不想靠硬件 RAID 卡。ZFS 把这些能力全做在软件层,可靠性比传统 RAID 高一截。

下面记录一次完整的 ZFS 编译安装过程,从源码编译到创建 RAID-Z 存储池,再到开机自动挂载。环境是 CentOS/RHEL 系(ARM 架构),x86 同样适用。

传统 RAID(mdadm + ext4/xfs)能做容错,但做不到数据校验和自我修复。ZFS 的核心优势:

特性
说明
端到端校验
每个数据块都有 checksum,读取时自动验证,发现损坏能用冗余数据修复
自我修复
读到坏块时自动用冗余盘重建,不需要手动干预
写时复制(COW)
数据永远覆盖新位置,不会原地修改,断电不丢数据
快照
秒级创建,几乎不占空间,回滚方便
RAID-Z
比 RAID 5 更安全的软件冗余,避免写洞问题

如果你只是搭个 NAS 或存点重要数据,ZFS 值得多花点时间配。

一、准备编译环境

ZFS 需要内核头文件和编译工具链。先把依赖装齐:

# CentOS/RHELyum install -y kernel-devel-$(uname -r) autoconf automake libtool \    zlib-devel libuuid-devel libblkid-devel libselinux-devel \    libudev-devel openssl-devel elfutils-libelf-devel

Ubuntu/Debian 对应的包名不同:

apt install -y linux-headers-$(uname -r) autoconf automake libtool \    zlib1g-dev uuid-dev libblkid-dev libselinux1-dev \    libudev-dev libssl-dev libelf-dev

少了 kernel-devel 或 linux-headers 这一步是编译失败最常见的原因。./configure 找不到内核源码树会直接报错退出。

二、编译安装 ZFS

下载源码包(本文使用 zfs-2.4.4),解压后执行:

# 生成配置文件(需要 autoconf/automake)./autogen.sh./configure \    --prefix=/usr \    --sysconfdir=/etc \    --libdir=/usr/lib64 \    --includedir=/usr/include \    --with-linux=/usr/src/kernels/$(uname -r)

--with-linux 指向内核源码目录,CentOS 在 /usr/src/kernels/$(uname -r),Ubuntu 在 /usr/src/linux-headers-$(uname -r)。根据实际系统调整。

# 编译,-j 后接 CPU 核心数加速make -j$(nproc)# 安装make install# 加载 ZFS 内核模块modprobe zfs# 验证zfs --version

zfs --version 会输出用户态工具版本和内核模块版本,两个都有才算装好。

把 ZFS 加入开机自动加载:

echo "zfs" >> /etc/modules-load.d/zfs.conf

启用相关服务:

systemctl enable --now zfs-import-cache zfs-import-scan \    zfs-mount zfs-share zfs-zed

三、创建 RAID-Z 存储池

选盘

先确认盘符:

lsblk

本文用四块 NVMe 盘组建 RAID-Z(RAID-Z1),允许 1 块盘故障,数据不丢。

一个建议:用 /dev/disk/by-id/ 而不是 /dev/nvme0n1。盘符在重启后可能变,by-id 是稳定的设备路径。

ls -la /dev/disk/by-id/ | grep nvme

创建存储池

# 创建名为 storagepool 的存储池,RAID-Z 模式,4 块 NVMe 盘zpool create -f storagepool raidz \    /dev/nvme0n1 /dev/nvme1n1 /dev/nvme2n1 /dev/nvme3n1

参数说明:

  • • -f:强制创建,仅在确认磁盘无数据时使用
  • • raidz:等价于 raidz1,允许 1 块盘故障容错
  • • 如果需要 2 块盘容错,用 raidz2;3 块盘容错用 raidz3

验证

# 查看池状态zpool status storagepool# 查看容量zpool list storagepool

status 输出里应该看到 4 块盘都是 ONLINE,总容量大约是 3 块盘的可用空间(RAID-Z1 有 1 块盘的冗余开销)。

四、创建数据集

ZFS 用数据集(dataset)代替传统分区。一个池里可以建多个数据集,各自独立管理属性、快照、压缩。

# 创建数据集 storagepool/storagedata,挂载到 /storagezfs create -o mountpoint=/storage storagepool/storagedata

验证挂载:

zfs mount | grep storagedf -h /storage

写入测试文件确认可用:

echo "ZFS RAID-Z test success" > /storage/test_zfs.txtcat /storage/test_zfs.txt

五、开机自动导入和挂载

标准方式(systemd)

把池信息写入缓存文件,让开机时自动识别:

zpool set cachefile=/etc/zfs/zpool.cache storagepool

确保服务启用:

systemctl enable --now zfs-import-cache zfs-mount zfs.target

验证挂载点配置:

zfs get mountpoint storagepool/storagedata

ARM 机器的额外步骤

部分 ARM 平台上,ZFS 的 systemd 服务在开机时加载顺序有问题,池不会被自动导入。解决办法是走 rc.local。

chmod +x /etc/rc.d/rc.local

编辑 /etc/rc.d/rc.local,在末尾加两行:

zpool import -f storagepoolzfs mount -a

保存退出,重启验证:

reboot

开机后直接看挂载:

df -h

/storage 出现就说明自动导入和挂载都正常了。

六、常见问题

./configure 报错找不到内核源码

确认 kernel-devel(CentOS)或 linux-headers(Ubuntu)已安装,且版本跟当前运行的内核完全一致。升级过内核但没重启会版本不匹配,重启即可。

modprobe zfs 报 Module not found

编译安装后需要运行 depmod -a 刷新模块依赖,然后再 modprobe zfs。

重启后池不见了

cachefile 没设置或服务没启用。手动导入:

zpool import storagepool

能导入说明池没丢,只是开机没自动识别。按第五节配置开机自启。

RAID-Z 容量比预期小

RAID-Z1 的可用容量约等于 N-1 块盘。4 块 4TB 盘组 RAID-Z1,可用约 12TB,不是 16TB。另外 ZFS 有大约 1.5% 的元数据开销。用 zpool list 看实际可用容量。

磁盘更换

坏盘换新:

# 先离线坏盘zpool offline storagepool /dev/nvme1n1# 物理换盘后替换zpool replace storagepool /dev/nvme1n1 /dev/new_disk# 看重建进度zpool status storagepool

重建过程中池状态会显示 DEGRADED,完成后恢复 ONLINE。

觉得有用的话,点个赞让更多需要存储方案的人看到。有问题评论区聊。
博主多年实践积累经验,整理不易。需要zfs安装包朋友,关注公众号后私信"zfs"获取!

回首页,搜索你想要的文档

在首页搜索框输入关键词,快速定位资料

文库首页搜索指引 立即搜索

相关学习资料