Blanktar

  1. top
  2. blog
  3. 2013
  4. 07

ついでにzfsのデータ圧縮を試してみる

前回のzfsネタに引き続き、今回は圧縮機能を試してみるよ。 ファイルシステムレベルでデータを圧縮してくれるってのはお手軽な感じでいいよね。 まあ、スループットが気になる所ではあるけれど。

設定

とりあえず設定します。 前回と同じ構成でtestpoolというストレージプールがあるってのが前提。

圧縮の設定は

$ sudo zfs set compression=on testpool

相変わらず1行で全部済む。楽だ。 ちなみにこの設定だとlzjbってので圧縮します。

$ sudo zfs set compression=gzip testpool

とかやってgzip圧縮したり、

$ sudo zfs set compression=gzip-1 testpool

とか

$ sudo zfs set compression=gzip-9 testpool

とかやって圧縮レベルを指定したりできます。

現在セットされている圧縮モードは

$ sudo zfs get compression
NAME     PROPERTY     VALUE SOURCE
testpool compression  on local

で確認できます。

試してみる

さあ、試してみよう

$ sudo head -c 50M /dev/zero >/testpool/testfile
$ sudo zfs get list
NAME      USED  AVAIL  PEFER  MOUNTPOINT
testpool  385K  63.1M    22K  /testpool

こんな感じ。

50M書き込んで385Kしか使ってないっ ・・・まあ、例によって0x00しか書いてないから当然だけれど。

という訳で、今度は乱数を書いてみる。

$ sudo head -c 50M /dev/urandom >/testpool/testfile
$ sudo zfs get list
NAME       USED  AVAIL  PEFER  MOUNTPOINT
testpool  50.3M  13.2M  49.9M  /testpool

的な。

圧縮できてないっ ・・・当然だけれど。

で、ベンチマーキング

あんま信憑性のあるデータじゃないですが、一応。

$ sudo zfs set compression=off testpool
$ sudo time head -c 50M /dev/urandom >/testpool/testfile
real    0m4.838s
user    0m0.007s
sys 0m3.841s
$ sudo zfs get list
NAME       USED  AVAIL  PEFER  MOUNTPOINT
testpool  50.3M  13.2M  49.9M  /testpool

$ sudo zfs set compression=on testpool
$ sudo time head -c 50M /dev/urandom >/testpool/testfile
real    0m5.425s
user    0m0.009s
sys 0m3.828s
$ sudo zfs get list
NAME       USED  AVAIL  PEFER  MOUNTPOINT
testpool  50.3M  13.2M  49.9M  /testpool

$ sudo zfs set compression=gzip
$ sudo time head -c 50M /dev/urandom >/testpool/testfile
real    0m6.658s
user    0m0.012s
sys 0m3.841s
$ sudo zfs get list
NAME       USED  AVAIL  PEFER  MOUNTPOINT
testpool  50.4M  13.1M  50.1M  /testpool

$ sudo zfs set compression=gzip-1
$ sudo time head -c 50M /dev/urandom >/testpool/testfile
real    0m6.457s
user    0m0.002s
sys 0m3.814s
$ sudo zfs get list
NAME       USED  AVAIL  PEFER  MOUNTPOINT
testpool  50.4M  13.1M  50.1M  /testpool

こんな感じでした。 平均値とかは取ってません! めんどくさい!

速さだと off < lzjb < gzip-1 < gzip な感じ。 妥当だね・・・。 圧縮率は今回は分からん。乱数だもんね。 聞くところによれば、素直に速さとトレードオフのようです。

しかしまあ、たった50Mなのに結構な差がでたね。 テストに使ったのが低スペックめのPC上の低スペックめな仮想マシンってのもあるとは思いますが。 とはいえ、とりあえずオンにすりゃいいってもんじゃないっぽいのは確か。

保存するデータと付きあわせてよく検討しましょう、かな。