如何在linux中安装和使用ZFS

ZFS文件系统的英文名称为Zettabyte File System,也叫动态文件系统（Dynamic File System）,是第一个128位文件系统。

ZFS优势

ZFS是一种先进的、高度可扩展的文件系统，最初是由Sun Microsystems开发的,现在OpenZFS是项目的一部分。有这么多文件系统可用在Linux上,那自然要问ZFS有什么特别之处。不同于其它文件系统,它不仅是一个文件系统逻辑卷管理器。ZFS使其受欢迎的特性是：

\1. 数据完整性——数据一致性和完整性通过即写即拷和校验技术保证。 \2. 存储空间池——可用存储驱动器一起放入称为zpool的单个池。 \3. 软件RAID ——像发出一个命令一样，建立一个raidz数组。 \4. 内置的卷管理器——ZFS充当卷管理器。 \5. Snapshots、克隆、压缩——这些都是一些ZFS提供的高级功能。

在本指南中,我们将学习在CentOS 7服务器上如何安装、设置和使用一些重要的ZFS命令。

术语

在我们继续之前,让我们了解一些ZFS的常用的术语。 Pool：存储驱动器的逻辑分组，它是ZFS的基本构建块，从这里将存储空间分配给数据集。 Datasets：ZFS文件系统的组件即文件系统、克隆、快照和卷被称为数据集。 Mirror：一个虚拟设备存储相同的两个或两个以上的磁盘上的数据副本，在一个磁盘失败的情况下,相同的数据是可以用其他磁盘上的镜子。 Resilvering：在恢复设备时将数据从一个磁盘复制到另一个磁盘的过程。 Scrub：擦除用于一致性检验在ZFS像在其他文件系统如何使用fsck。

安装ZFS

为了对CentOS安装ZFS，我们需要先安装支持包EPEL仓库，然后在ZFS存储库上安装所需的ZFS包。

yum localinstall --nogpgcheck http://epel.mirror.net.in/epel/7/x86_64/e/epel-release-7-5.noarch.rpmyum localinstall --nogpgcheck http://archive.zfsonlinux.org/epel/zfs-release.el7.noarch.rpm

现在安装内核开发和zfs包，内核开发的软件包是需要ZFS建立模块和插入到内核中。

yum install kernel-devel zfs

验证zfs模块插入到内核使用的lsmod命令，如果没有，使用‘modprobe命令手动插入它。

[root@li1467-130 ~]# lsmod |grep zfs[root@li1467-130 ~]# modprobe zfs[root@li1467-130 ~]# lsmod |grep zfszfs 2790271 0zunicode 331170 1 zfszavl 15236 1 zfszcommon 55411 1 zfsznvpair 89086 2 zfs,zcommonspl 92029 3 zfs,zcommon,znvpair

让我们检查是否我们可以使用zfs的命令：

[root@li1467-130 ~]# zfs listno datasets available

管理

ZFS主要有两个工具，zpool和ZFS。zpool处理使用磁盘实用程序创建和维护ZFS池负责数据的创建和维护。

zpool utility

创建和销毁池 首先验证可用的磁盘创建一个存储池。

[root@li1467-130 ~]# ls -l /dev/sd*brw-rw---- 1 root disk 8,  0  Mar 16 08:12 /dev/sdabrw-rw---- 1 root disk 8, 16 Mar 16 08:12 /dev/sdbbrw-rw---- 1 root disk 8, 32 Mar 16 08:12 /dev/sdcbrw-rw---- 1 root disk 8, 48 Mar 16 08:12 /dev/sddbrw-rw---- 1 root disk 8, 64 Mar 16 08:12 /dev/sdebrw-rw---- 1 root disk 8, 80 Mar 16 08:12 /dev/sdf

创建一个池的驱动器。

zpool create  # zpool create -f zfspool sdc sdd sde sdf

zpool状态的命令显示可用池的状态。

[root@li1467-130 ~]# zpool statuspool: zfspoolstate: ONLINEscan: none requestedconfig:NAME STATE READ WRITE CKSUMzfspool ONLINE 0 0 0sdc ONLINE 0 0 0sdd ONLINE 0 0 0sde ONLINE 0 0 0sdf ONLINE 0 0 0errors: No known data errors

验证如果池创建成功。

[root@li1467-130 ~]# df -hFilesystem    Size   Used      Avail  Use%   Mounted on/dev/sda      19G    1.4G        17G      8%      /devtmpfs    488M        0      488M      0%     /devtmpfs          497M        0      497M      0%    /dev/shmtmpfs          497M    50M     447M     11%   /runtmpfs          497M         0     497M      0%   /sys/fs/cgrouptmpfs          100M         0     100M      0%   /run/user/0zfspool         3.7G         0       3.7G      0%  /zfspoolv

如你所见,使用zpool创造了一个池的名字zfspool大小3.7 GB的空间,同时挂载在/ zfspool。 用命令 ‘zpool destroy’ 销毁一个地址池：

zpool destroy[root@li1467-130 ~]# zpool destroy zfspool[root@li1467-130 ~]# zpool statusno pools available

现在让我们尝试创建一个简单的镜像池。

zpool create   mirror  ...

通过重复关键字的驱动器我们可以创建多个镜像。

[root@li1467-130 ~]# zpool create -f mpool mirror sdc sdd mirror sde sdf[root@li1467-130 ~]# zpool statuspool: mpoolstate: ONLINEscan: none requestedconfig:NAME STATE READ WRITE CKSUMmpool ONLINE 0 0 0mirror-0 ONLINE 0 0 0sdc ONLINE 0 0 0sdd ONLINE 0 0 0mirror-1 ONLINE 0 0 0sde ONLINE 0 0 0sdf ONLINE 0 0 0errors: No known data errors

在上面的例子中,我们创建了每两个磁盘镜像池。 同样的,我们可以创建一个raidz池。

[root@li1467-130 ~]# zpool create -f rpool raidz sdc sdd sde sdf[root@li1467-130 ~]# zpool statuspool: rpoolstate: ONLINEscan: none requestedconfig:NAME STATE READ WRITE CKSUMrpool ONLINE 0 0 0raidz1-0 ONLINE 0 0 0sdc ONLINE 0 0 0sdd ONLINE 0 0 0sde ONLINE 0 0 0sdf ONLINE 0 0 0errors: No known data errors

在ZFS池管理设备

一旦创建一个池,从池中可以添加或删除热备件和缓存设备,从镜像池和替换设备中连接或者分离。但是冗余和raidz设备不能从池中删除。我们将看到如何在这一节中执行这些操作。 我首先创建一个池称为“testpool”组成的两个设备,sdc和sdd。另一个设备sde将被添加到这里。

[root@li1467-130 ~]# zpool create -f testpool sdc sdd[root@li1467-130 ~]# zpool add testpool sde[root@li1467-130 ~]# zpool statuspool: testpoolstate: ONLINEscan: none requestedconfig:NAME STATE READ WRITE CKSUMtestpool ONLINE 0 0 0sdc ONLINE 0 0 0sdd ONLINE 0 0 0sde ONLINE 0 0 0errors: No known data errors

正如前面提到的，我不能删除这个新添加的设备,因为它不是一个冗余或raidz池。

[root@li1467-130 ~]# zpool remove testpool sdecannot remove sde: only inactive hot spares, cache, top-level, or log devices can be removed

但我可以在这个池添加一个空闲磁盘和删除它。

[root@li1467-130 ~]# zpool add testpool spare sdf[root@li1467-130 ~]# zpool statuspool: testpoolstate: ONLINEscan: none requestedconfig:NAME STATE READ WRITE CKSUMtestpool ONLINE 0 0 0sdc ONLINE 0 0 0sdd ONLINE 0 0 0sde ONLINE 0 0 0sparessdf AVAILerrors: No known data errors[root@li1467-130 ~]# zpool remove testpool sdf[root@li1467-130 ~]# zpool statuspool: testpoolstate: ONLINEscan: none requestedconfig:NAME        STATE       READ  WRITE   CKSUMtestpool    ONLINE       0          0               0sdc            ONLINE       0           0               0sdd            ONLINE      0            0               0sde            ONLINE      0            0               0errors: No known data errors

同样的,我们可以使用attach命令附加磁盘镜像或非镜像的池和detach命令从镜像磁盘池来分离。

zpool attach    zpool detach

当设备发生故障或损坏,我们可以使用replace命令替换它。

zpool replace

在镜像配置当中我们将爆力的测试一个设备。

[root@li1467-130 ~]# zpool create -f testpool mirror sdd sde

这将创建一个镜像磁盘池组成的SDD和SDE。现在，让我们故意损坏SDD写零到磁盘中。

[root@li1467-130 ~]# dd if=/dev/zero of=/dev/sdddd: writing to ‘/dev/sdd’: No space left on device2048001+0 records in2048000+0 records out1048576000 bytes (1.0 GB) copied, 22.4804 s, 46.6 MB/s

我们将使用“scrub”命令来检测这种损坏。

[root@li1467-130 ~]# zpool scrub testpool[root@li1467-130 ~]# zpool statuspool: testpoolstate: ONLINEstatus: One or more devices could not be used because the label is missing orinvalid. Sufficient replicas exist for the pool to continuefunctioning in a degraded state.action: Replace the device using 'zpool replace'.see: http://zfsonlinux.org/msg/ZFS-8000-4Jscan: scrub repaired 0 in 0h0m with 0 errors on Fri Mar 18 09:59:40 2016config:NAME STATE READ WRITE CKSUMtestpool ONLINE 0 0 0mirror-0 ONLINE 0 0 0sdd UNAVAIL 0 0 0 corrupted datasde ONLINE 0 0 0errors: No known data errors

现在我们用SDC替换SDD。

[root@li1467-130 ~]# zpool replace testpool sdd sdc; zpool statuspool: testpoolstate: ONLINEscan: resilvered 83.5K in 0h0m with 0 errors on Fri Mar 18 10:05:17 2016config:NAME STATE READ WRITE CKSUMtestpool ONLINE 0 0 0mirror-0 ONLINE 0 0 0replacing-0 UNAVAIL 0 0 0sdd UNAVAIL 0 0 0 corrupted datasdc ONLINE 0 0 0sde ONLINE 0 0 0errors: No known data errors[root@li1467-130 ~]# zpool statuspool: testpoolstate: ONLINEscan: resilvered 74.5K in 0h0m with 0 errors on Fri Mar 18 10:00:36 2016config:NAME STATE READ WRITE CKSUMtestpool ONLINE 0 0 0mirror-0 ONLINE 0 0 0sdc ONLINE 0 0 0sde ONLINE 0 0 0errors: No known data errors

池的迁移

我们可以使用导出和导入命令在不同的主机之间迁移存储池。对于这个，在池中使用的磁盘应该从两个系统中可用。

[root@li1467-130 ~]# zpool export testpool[root@li1467-130 ~]# zpool statusno pools available

zpool import命令列出所有可以利用的池。执行这个系统命令,你想要导入的池。

[root@li1467-131 ~]# zpool importpool: testpoolid: 3823664125009563520state: ONLINEaction: The pool can be imported using its name or numeric identifier.config:testpool ONLINEsdc ONLINEsdd ONLINEsde ONLINE

现在导入要求的池。

[root@li1467-131 ~]# zpool import testpool[root@li1467-131 ~]# zpool statuspool: testpoolstate: ONLINEscan: none requestedconfig:NAME STATE READ WRITE CKSUMtestpool ONLINE 0 0 0sdc ONLINE 0 0 0sdd ONLINE 0 0 0sde ONLINE 0 0 0errors: No known data errors

iostat

Iostat命令可以验证池设备IO统计。

[root@li1467-130 ~]# zpool iostat -v testpoolcapacity          operations                        bandwidthpool          alloc      free            read     write             read   write----------    -----     -----            -----     -----                -----   -----testpool    1.80M  2.86G        22            27               470K  417Ksdc             598K   975M           8              9               200K  139Ksdd             636K  975M            7              9                135K  139Ksde             610K   975M           6              9                 135K 139K----------   -----     -----           -----          -----               -----  -----

zfs utility

我们现在会移动到ZFS utility。在这里，我们将看看如何创建、销毁数据集、文件系统压缩、配额和快照。

创建和销毁文件系统

ZFS文件系统可以使用ZFS创建命令创建

zfs create[root@li1467-130 ~]# zfs create testpool/students[root@li1467-130 ~]# zfs create testpool/professors[root@li1467-130 ~]# df -hFilesystem                    Size             Used          Avail          Use%          Mounted on/dev/sda                       19G              1.4G          17G             8%                     /devtmpfs                   488M                  0      488M             0%                    /devtmpfs                          497M                  0       497M            0%                   /dev/shmtmpfs                          497M            50M       447M           11%                  /runtmpfs                          497M                 0        497M            0%                /sys/fs/cgrouptestpool                       2.8G                  0         2.8G            0%               /testpooltmpfs                          100M                  0        100M            0%             /run/user/0testpool/students     2.8G                   0         2.8G             0%            /testpool/studentstestpool/professors  2.8G                   0         2.8G             0%           /testpool/professors

从上面的输出注意到，在文件系统创建时尽管没有挂载点,挂载点创建时使用相同的路径关系池。 ZFS创建允许使用-o选项可以指定使用像挂载点，压缩、定额、执行等。 你可以列出可用的文件系统使用ZFS的列表：

[root@li1467-130 ~]# zfs listNAME                           USED     AVAIL     REFER    MOUNTPOINTtestpool                         100M       2.67G       19K         /testpooltestpool/professors        31K     1024M   20.5K        /testpool/professorstestpool/students        1.57M     98.4M   1.57M      /testpool/students

我们用销毁选项销毁文件系统。 zfs destroy

压缩

现在我们将了解在ZFS怎样压缩，在我们开始使用压缩之前,我们需要使它使用“设置压缩”。

zfs set

一旦这样做，压缩和解压缩将以透明模式发生在文件系统上面。 在我们的示例中,我将使学生目录使用lz4压缩算法压缩。

[root@li1467-130 ~]# zfs set compression=lz4 testpool/students

我现在要复制一个文件到该文件系统大小15m，并检查它的大小。

[root@li1467-130 /]# cd /var/log[root@li1467-130 log]# du -h secure15M secure[root@li1467-130 ~]# cp /var/log/secure /testpool/students/[root@li1467-130 students]# df -h .Filesystem               Size     Used   Avail    Use%      Mounted ontestpool/students   100M   1.7M   99M        2%      /testpool/students

注意，使用文件系统的大小仅为1.7m，文件大小为15m，我们可以检查压缩比。

[root@li1467-130 ~]# zfs get compressratio testpoolNAME      PROPERTY         VALUE            SOURCEtestpool    compressratio     9.03x

配额和预订

让我用一个真实的例子来解释配额。假设我们有一个要求，在一所大学，以限制磁盘空间使用的文件系统为教授和学生。让我们假设我们需要分配给教授和学生分为1GB和100MB。我们可以利用“配额”在ZFS来满足这一要求。配额确保文件系统使用的磁盘空间的数量不超过规定的限度。保留有助于在实际分配和保证所需的磁盘空间的数量是可用的文件系统。

zfs set quota=zfs set reservation=[root@li1467-130 ~]# zfs set quota=100M testpool/students[root@li1467-130 ~]# zfs set reservation=100M testpool/students[root@li1467-130 ~]# zfs listNAME                          USED      AVAIL    REFER    MOUNTPOINTtestpool                        100M       2.67G       19K        /testpooltestpool/professors      19K       2.67G        19K       /testpool/professorstestpool/students      1.57M       98.4M    1.57M    /testpool/students[root@li1467-130 ~]# zfs set quota=1G testpool/professors[root@li1467-130 ~]# zfs listNAME                           USED     AVAIL    REFER    MOUNTPOINTtestpool                         100M     2.67G       19K          /testpooltestpool/professors       19K    1024M       19K         /testpool/professorstestpool/students       1.57M    98.4M    1.57M       /testpool/students

在上面的例子中，我们已经给教授和学生为1GB与100MB。观察ZFS列表结果，最初，他们有2.67gb每个的大小和设置配额，价值也随之发生了相应的变化。

快照

快照是在某个时间点的ZFS文件系统的只读副本。他们不在ZFS池消耗任何额外的空间。我们可以回滚到相同的状态，在稍后的阶段，按用户要求或仅提取一个单一的或一组文件。 我现在就从我们前面的例子，然后在在testpool/professors把这个文件系统快照创建一些目录和文件。

[root@li1467-130 ~]# cd /testpool/professors/[root@li1467-130 professors]# mkdir maths physics chemistry[root@li1467-130 professors]# cat > qpaper.txtQuestion paper for the year 2016-17[root@li1467-130 professors]# ls -latotal 4drwxr-xr-x  5  root root    6   Mar 19 10:34 .drwxr-xr-x  4  root root    4   Mar 19 09:59 ..drwxr-xr-x  2  root root    2   Mar 19 10:33 chemistrydrwxr-xr-x  2  root root    2   Mar 19 10:32 mathsdrwxr-xr-x  2  root root    2   Mar 19 10:32 physics-rw-r--r--     1  root root  36   Mar 19 10:35 qpaper.txt

快照,可以使用下面的语法:

zfs snapshot [root@li1467-130 professors]# zfs snapshot testpool/professors@03-2016[root@li1467-130 professors]# zfs list -t snapshotNAME                                             USED         AVAIL     REFER     MOUNTPOINTtestpool/professors@03-2016       0                -                20.5K

我现在将删除创建的文件和提取的快照。

[root@li1467-130 professors]# rm -rf qpaper.txt[root@li1467-130 professors]# lschemistry maths physics[root@li1467-130 professors]# cd .zfs[root@li1467-130 .zfs]# cd snapshot/03-2016/[root@li1467-130 03-2016]# lschemistry maths physics qpaper.txt[root@li1467-130 03-2016]# cp -a qpaper.txt /testpool/professors/[root@li1467-130 03-2016]# cd /testpool/professors/[root@li1467-130 professors]# lschemistry maths physics qpaper.txt

已删除的文件返回其位置。 我们可以列出所有可用的快照使用ZFS的列表：

[root@li1467-130 ~]# zfs list -t snapshotNAME                                             USED     AVAIL    REFER    MOUNTPOINTtestpool/professors@03-2016    10.5K       -              20.5K       -

最后,让我们使用zfs摧毁命令销毁快照：

zfs destroy [root@li1467-130 ~]# zfs destroy testpool/professors@03-2016[root@li1467-130 ~]# zfs list -t snapshotno datasets available