Oracle Solaris 11 ZFS 構築/運用手順書

(1)

Oracle Solaris 11 ZFS

構築/運用手順書

2016年5月

第1.2版

(2)

Oracle Solaris 11 ZFS 構築/運用手順書

 使用条件

 著作権・商標権・その他の知的財産権についてコンテンツ（文書・画像・音声等）は、著作権・商標権・その他の知的財産権で保護されています。本コンテンツは、個人的に使用する範囲でプリントアウトまたはダウンロードできます。ただし、これ以外の利用（ご自分のページへの再利用や他のサーバへのアップロード等）については、当社または権利者の許諾が必要となります。  保証の制限本コンテンツについて、当社は、その正確性、商品性、ご利用目的への適合性等に関して保証するものではなく、そのご利用により生じた損害について、当社は法律上のいかなる責任も負いかねます。本コンテンツは、予告なく変更・廃止されることがあります。  輸出または提供本製品を輸出又は提供する場合は、外国為替及び外国貿易法及び米国輸出管理関連法規等の規制をご確認の上、必要な手続きをおとり下さい。

 商標について

 UNIX は、米国およびその他の国におけるオープン・グループの登録商標です。

 SPARC Enterprise、SPARC64、SPARC64 ロゴ、およびすべての SPARC 商標は、米国 SPARC International, Inc.のライセンスを受けて使用している、同社の米国およびその他の国における商標または登録商標です。

 Oracle と Java は、Oracle Corporation およびその子会社、関連会社の米国およびその他の国における登録商標です。

(3)

Oracle Solaris 11 ZFS 構築/運用手順書

はじめに

本書の内容

 SPARC/Solaris を使用される方を対象に、Oracle Solaris 11 における ZFS（Zettabyte File System）の構築、運用手順について解説しています。

 Oracle Solaris 11 の詳細については、以下の URL を参照して下さい。「Oracle Solaris 11.3 Information Library」

https://docs.oracle.com/cd/E62101_01/

留意事項

 本書では、Oracle Solaris を Solaris と記載することがあります。

 本書は Oracle Solaris 11.3 の機能を基に作成しています。

 本書は SRU16021（Oracle バージョン：SRU11.3.5.6.0）を適用した環境で作成しています。

 本書に記載の設定値（ホスト名、IP アドレス等）は参考例です。実際のシステム環境に応じて読み替

(4)

Oracle Solaris 11 ZFS 構築/運用手順書

１

１ ．

．

Z

F

S

の

概

要

.

1

1 １-１. ZFS の特長 ... 1

１-２. ZFS の利用 ... 2

１-３. システム要件 ... 2

２

２ ．

．

Z

F

S

ル

ー

ト

フ

ァ

イ

ル

シ

ス

テ

ム

の

作

成

.

3

３

３ ．

．

Z

F

S

の

構

築

/

運

用

.

4

4 ３-１. ストレージプールの作成 ... 4

３-２. ファイルシステムの作成 ... 8

３-３. プロパティの設定 ... 9

３-３-１. ファイルシステムの使用量の割り当て（quota プロパティ） ... 9 ３-３-２. プロパティの継承 ... 11

３-４. ファイルシステムのマウント/アンマウント ... 12

３-４-１. マウントポイントのプロパティ設定例 1 ... 12 ３-４-２. マウントポイントのプロパティ設定例 2 ... 13 ３-４-３. マウント/アンマウント実行 ... 14

３-５. ファイルシステムの共有、共有解除 ... 15

３-６. デバイスの追加（add） ... 17

３-７. デバイスの接続/切り離し（attach/detach） ... 19

３-７-１. デバイスの接続（attach） ... 19 ３-７-２. デバイスの切り離し（detach） ... 22

３-８. デバイスのオンライン/オフライン（online/offline） ... 23

３-８-１. デバイスのオフライン（offline） ... 24 ３-８-２. デバイスのオンライン（online） ... 25

３-９. エラーのクリア（clear）... 27

３-１０. デバイスの置き換え（replace） ... 28

３-１１. ホットスペア（spare） ... 31

３-１２. ストレージプールの移行（export/import） ... 35

３-１２-１. エクスポート（export） ... 35

(5)

Oracle Solaris 11 ZFS 構築/運用手順書

３-１３-１. スナップショットの作成 ... 37 ３-１３-２. ロールバック（rollback） ... 39 ３-１３-３. クローン（clone） ... 39

３-１４. ZFS データの送信/受信（send/receive） ... 42

３-１４-１. ZFS データの送信 ... 42 ３-１４-２. ZFS データの受信 ... 43

３-１５. ZFS データの完全性をチェックする（scrub） ... 44

３-１６. ミラーディスクの切り離し（split） ... 45

３-１７. スナップショットの保持（hold） ... 48

３-１８. スナップショットの差分表示（diff） ... 51

３-１９. ZFS 暗号化 ... 53

３-２０. 重複排除 ... 55

３-２１. ZFS 自動スナップショット ... 57

３-２２. ファイルシステムミラーマウント ... 62

３-２３. トラブルシューティング ... 65

３-２３-１. 損傷した ZFS ファイルシステムの修復 ... 65 ３-２３-２. デバイスの再接続 ... 65 ３-２３-３. 損傷したデバイスの修復 ... 65 ３-２３-４. 損傷したデータの修復 ... 66 ３-２３-５. 起動できないシステムの修復 ... 68 ３-２３-６. ZFS コマンドの履歴表示 ... 69

参

考

１

１ .

.

フ

ァ

イ

ル

シ

ス

テ

ム

の

共

有

、

共

有

解

除

（

O

r

a

c

l

e

S

o

l

a

r

i

s

1

1 /

/

1

1 ）

）

.

7

0

0 参

参

考

２

２ .

.

Z

F

S

操

作

の

監

視

.

7

2

2 付

付

録

１

１ .

.

Z

F

S

プ

ロ

パ

テ

ィ

の

紹

介

.

7

3

(6)

Oracle Solaris 11 ZFS 構築/運用手順書

１．ZFS の概要

ZFS は Oracle Solaris 11 の標準機能であり、従来の UFS（Unix File System）と比較して様々な点で優れたファイルシステムです。Solaris 11 のルートファイルシステムは ZFS のみであり、ZFS の特長や管理、運用方法を理解することは Solaris 11 が稼働するシステムを管理、運用する上で必要となります。

１-１.ZFS の特長

■ 優れたスケーラビリティ・世界初の 128bit のファイルシステム・事実上、無限大といえるファイルシステムを構築可能 ■ 管理のしやすさ・管理コマンドの簡素化（zpool、zfs）・物理ディスクを集約した仮想ディスク領域（ストレージプール）上でファイルシステムを管理、提供・ストレージプールによるデバイスの隠蔽とストレージ管理の容易化 ■ データの堅牢性・データ書き込みは「Copy on Write」方式で実行され、一連の処理が完了するまでデータを確定させないため、データの整合性を保証【トランザクションファイルシステム】・データブロックのチェックサムは親ブロックに格納されるため、チェックサム自身の損傷時も、不正データ検出とデータ自己修復が可能【End-to-End のチェックサム】・暗号化によるデータ秘匿性向上・ ZFS 標準機能でソフトウェア RAID 構成が可能（表 1 参照）表 1：ZFS でサポートする RAID 構成について種類機能ディスクの最低必要本数ストライピング非冗長構成（RAID0） 2 本ミラー複数面も可能なミラー構成（RAID1） 2 本 RAID-Z シングルパリティ構成（RAID5 に類似） 2 本 RAID-Z2 ダブルパリティ構成（RAID6 に類似） 3 本 RAID-Z3 トリプルパリティ構成 4 本 ※RAID1+0（ミラー＋ストライピング）など、複数の RAID 構成の組み合わせも可能

(7)

Oracle Solaris 11 ZFS 構築/運用手順書

１-２.ZFS の利用

■ Solaris システムの運用に有効な機能・圧縮機能や重複排除機能でディスク容量の節約が可能・ストレージプールの容量が不足した時は、OS 稼働中に領域の拡張が可能・ファイルシステムを瞬時に退避可能（ZFS スナップショット）であり、データのロールバックも可能・ ZFS スナップショットからファイルシステムを瞬時に複製可能（ZFS クローン）

・ Solaris Zone も ZFS 上に構成されるため、Zone のスナップショットやクローンも ZFS の仕組みを利用して短時間で実行可能

１-３.システム要件

■ Oracle Solaris 11 で構成可能なルートファイルシステム（/）は ZFS のみとなります。UFS のルートファイルシステムは構成できません。 ■ 最小のストレージプールのサイズは 64M バイトですが、推奨値は８G バイトです。8G バイト未満では空きプール領域の割り当てや再利用が難しくなります。 ■ ストレージプールに使用するデバイスのサイズは、128M バイト以上にしてください。 ■ Oracle Solaris 11 システムのインストールに推奨される最小メモリ容量は 2G バイトです。 ■ ミラー構成を作成する場合は、複数のコントローラ配下のディスクで構成することを推奨します。 ■ ZFS のディスクラベルは、ルートファイルシステムも含めて EFI ラベル、または SMI(VTOC)ラベルで作成可能です。 ※ルートファイルシステムの EFI ラベルについては、SPARC M10 のファームウェア XCP2230 以降の環境でサポートされます。表 2：ディスクラベルについてラベル説明 SMI（VTOC）・従来（UFS）のラベル。2T バイトに満たないディスク用 EFI（Extensible Firmware Interface）・ 2T バイトを超えるディスク用・ Solaris 11 のルートファイルシステム含むストレージプール ※ルートファイルシステムについては、SPARC M10 のファームウェア XCP2230 以降の環境でサポートされます。

(8)

Oracle Solaris 11 ZFS 構築/運用手順書

２．ZFS ルートファイルシステムの作成

Oracle Solaris 11 をインストールすると、ルートファイルシステム（ルートプール）が ZFS で作成されます。 UFS は選択できません。本書では、Solaris 11 がインストール済みであり、2 本のディスクからミラー構成が実施済みであることを前提として解説します。また、本書で解説している環境は SRU（Support Repository Update）、ESF が適用されています。 Oracle Solaris 11 のインストールについては、下記を参照してください。「Oracle® Solaris 11.3 システムのインストール」 https://docs.oracle.com/cd/E62101_01/html/E62506/index.html

(9)

Oracle Solaris 11 ZFS 構築/運用手順書

３．ZFS の構築/運用

３-１.ストレージプールの作成

ストレージプールはディスク全体（例：c2t0d1）、または個別のスライス（例：c2t0d1s0）をストレージデバイスとして利用可能ですが、性能や管理の面からディスク全体を使用する方法を推奨します。ディスク全体を使用する場合、ディスクのスライス設定は不要であり、ZFS によって EFI ラベルのディスクとしてフォーマットされます。format コマンドで表示されるパーティションテーブルは次のようになります。例：ストレージプールを構成するディスクのパーティションテーブル（EFI ラベル）

Current partition table (original):

Total disk sectors available: 143358320 + 16384 (reserved sectors) Part Tag Flag First Sector Size Last Sector

0 usr wm 256 68.36GB 143358320 1 unassigned wm 0 0 0 2 unassigned wm 0 0 0 3 unassigned wm 0 0 0 4 unassigned wm 0 0 0 5 unassigned wm 0 0 0 6 unassigned wm 0 0 0 8 reserved wm 143358321 8.00MB 143374704 ZFS データセット（ファイルシステム、ボリューム、スナップショット、クローンなどのストレージプール上での総称）に名前をつけるときの規則は以下の通りです。 ■ 空のデータセット名は許可されません。 ■ 各データセットに使用できる文字は、英数字および次の 5 つの特殊文字だけです。・下線(_) ・ハイフン(-) ・コロン(:) ・ピリオド(.) ・空白(" ") ■ ストレージプール名の先頭は英字にする必要があります。ただし、次の制限事項があります。・ c[0-9]の順序で始まる名前は許可されません。・ log、mirror、raidz または spare で始まる名前は予約されているため、使用できません。・ストレージプール名にはパーセント記号(%)を含めないでください。 ■ データセット名の先頭は英数字にする必要があります。

(10)

Oracle Solaris 11 ZFS 構築/運用手順書

１）ストレージプールの作成

ディスク c2t0d1 と c2t0d2 からなるミラー構成のストレージプールを「testpool」という名前で作成します。 # zpool create testpool mirror c2t0d1 c2t0d2

☛

mirror の代わりに raidz（または、raidz2、raidz3）と指定することによって RAID-Z（RAID-Z2、RAID-Z3）の RAID 構成のストレージプールが作成されます。

☛

RAID 構成を指定しないで実行した場合は、ストライプ構成のストレージプールが作成されます。

☛

ストレージプールの作成時にマウントポイントを指定しない場合、ストレージプール名がデフォルトマウントポイントとなります。上記の場合、/testpool としてマウントされます。 ２）ストレージプールの確認 作成したストレージプールを確認します。 # zpool list

NAME SIZE ALLOC FREE CAP DEDUP HEALTH ALTROOT

testpool 4.97G 792K 4.97G 0% 1.00x ONLINE - 表 3：「zpool list」コマンドで表示されるプロパティプロパティ説明 NAME ストレージプールの名前 SIZE ストレージプールの合計サイズ最上位レベルにあるすべての仮想デバイスの合計サイズ ALLOC すべてのデータセットおよび内部メタデータから割り当てられた容量 ※この容量は、df コマンドなどのファイルシステムレベルで報告される容量とは一致しません FREE ストレージプール内で割り当てられていない容量 CAP 使用されている容量の割合 ※総容量に対する割合（パーセント）で表現されます DEDUP 重複除外された割合 HEALTH ストレージプールの現在の状態 ALTROOT ストレージプールの代替ルート

(11)

Oracle Solaris 11 ZFS 構築/運用手順書

３）ストレージプールの状態確認

作成したストレージプールの状態を確認します。 # zpool status testpool

pool: testpool state: ONLINE

scan: none requested config:

NAME STATE READ WRITE CKSUM testpool ONLINE 0 0 0 mirror-0 ONLINE 0 0 0 c2t0d1 ONLINE 0 0 0 c2t0d2 ONLINE 0 0 0 errors: No known data errors

☛

-x オプションを使うとエラーが発生しているか、使用不可能なストレージプールの状態だけを表示します。

☛

-v オプションを使うと詳細なデータエラー情報を表示し、前回のストレージプールのスクラブの完了後のデータエラーすべての完全なリストを出力します。表 4：「zpool status」コマンドで表示される状態状態説明 DEGRADED 仮想デバイスに障害が発生しているが、引き続き利用できる状態例）ミラーデバイスまたは RAID-Z デバイスを構成するデバイスのうち、1 つ以上のデバイスが失われたとき OFFLINE 管理者がその仮想デバイスを明示的にオフラインにしている状態 ONLINE デバイスは正常に機能している状態 REMOVED システム稼働中にデバイスが物理的に取り外されている状態 UNAVAIL デバイスまたは仮想デバイスを開くことができない状態最上位レベルの仮想デバイスが使用できない場合は、そのストレージプールのデバイスへのアクセスは不可

(12)

Oracle Solaris 11 ZFS 構築/運用手順書

参考）RAID-Z 構成のストレージプール作成

RAID-Z 構成の「testpool」というストレージプールを、ディスク c2t0d1 と c2t0d2 で作成する場合。 # zpool create testpool raidz c2t0d1 c2t0d2

参考）マウントポイントを指定したストレージプール作成

マウントポイントに「/export/test」を指定して、ミラー構成の「testpool」というストレージプールを、ディスク c2t0d1 と c2t0d2 で作成する場合。

# zpool create -m /export/test testpool mirror c2t0d1 c2t0d2 参考）ディスクラベルの変更

ディスク c2t0d1 の EFI ラベルを SMI ラベルに変更する場合。 # format -e c2t0d1

selecting c2t0d1

[disk formatted, no defect list found]

FORMAT MENU:

disk - select a disk

type - select (define) a disk type partition - select (define) a partition table current - describe the current disk

format - format and analyze the disk repair - repair a defective sector show - translate a disk address label - write label to the disk analyze - surface analysis

defect - defect list management backup - search for backup labels verify - read and display labels inquiry - show disk ID

volname - set 8-character volume name !<cmd> - execute <cmd>, then return quit

format> label ←「label」を入力

[0] SMI Label [1] EFI Label

Specify Label type[1]: 0 ←「0」を入力 format>

(13)

Oracle Solaris 11 ZFS 構築/運用手順書

３-２.ファイルシステムの作成

ファイルシステムの作成には、「zfs create」コマンドを使用します。ファイルシステムの作成時に自動的にマウントポイントが作成されマウントされます。また、同時に各種のプロパティ設定が可能です。 １）ファイルシステムの作成 「testpool/home」という名前のファイルシステムを新規作成します。 # zfs create testpool/home ２）ファイルシステムの確認 作成したファイルシステムを確認します。 # zfs list -r testpool

NAME USED AVAIL REFER MOUNTPOINT testpool 1.16M 4.89G 304K /testpool testpool/home 288K 4.89G 288K /testpool/home 参考）マウントポイントを指定したファイルシステムの作成

マウントポイントに「/export/zfs」を指定して、「testpool/home」ファイルシステムを新規作成する場合。 # zfs create -o mountpoint=/export/zfs testpool/home

☛

-o mountpoint=[マウントポイント]を指定すると任意にマウントポイントを設定することが可能です。

参考）ファイルシステムの名前の変更

ファイルシステム「testpool/home」の名前を「testpool/zfs/home_old」に変更する場合。 # zfs rename -p testpool/home testpool/zfs/home_old

☛

-p オプションを使用すると、中間のデータセット「testpool/zfs」が存在しない場合に同時作成することが可能です。 参考）ファイルシステムの削除 「testpool/home」を削除する場合。 # zfs destroy testpool/home

☛

-r オプションを使用すると、指定したデータセット配下のデータセットを再帰的に削除することが可能です。 参考）ZFS ボリュームの作成 2G バイトの ZFS ボリューム testpool/home/user1 を作成する場合。 # zfs create -V 2g testpool/home/user1

☛

-V オプションを使用すると、ファイルシステムではなく ZFS ボリューム(/dev/zvol)を作成することが可能です。

(14)

Oracle Solaris 11 ZFS 構築/運用手順書

３-３.プロパティの設定

作成したファイルシステムに各種のプロパティを設定することで、ファイルシステムの動作を制御します。設定可能なプロパティの中には、親に設定したプロパティがその配下のすべてのファイルシステムに継承さ れるものがあります。(各プロパティについては、「付録 1.プロパティの紹介」を参照してください。) ３-３-１.ファイルシステムの使用量の割り当て（quota プロパティ） １）プロパティの設定 「testpool/home」が使用できる容量の割り当て（quota）を 3G バイトに設定します。 # zfs set quota=3g testpool/home

☛

設定を解除する場合は、「quota=none」と設定します。

☛

ファイルシステムで消費されている容量がシステムに反映されるまでにタイムラグがあるため、quota プロパティに設定した値を超えてデータを書き込める場合があります。

２）プロパティの確認

設定した quota プロパティを確認します。 # zfs get quota testpool/home

NAME PROPERTY VALUE SOURCE testpool/home quota 3G local

☛

-r オプションを使用すると、子孫のプロパティも確認することができます。

SOURCE の列は、プロパティ値の設定元を表示します。表示される値の意味は下記の通りです

表 5：「zfs get」コマンドで表示される値

SOURCE の値説明

default プロパティのデフォルト値が使用されている状態

inherited from dataset-name dataset-name に指定されているデータセットから継承され ている状態 local zfs set を使って、このデータセットに明示的に設定している状態 temporary プロパティ値は、zfs mount -o オプションを使って設定され、マウントされている間だけ有効となる状態 - 読み取り専用プロパティであり、値は ZFS により生成される

(15)

Oracle Solaris 11 ZFS 構築/運用手順書

参考）ユーザ／グループ割り当て制限 割り当て制限については、ユーザ毎、およびグループ毎に設定することも可能です。下記の通り、割り当て制限が設定されていないすべてのユーザ／グループに設定する場合と、特定のユーザ／グループ毎に設定する方法があります。表 6：ユーザ／グループ割り当て制限プロパティプロパティ説明 defaultuserquota=size | none デフォルトのユーザ割り当て制限 defaultgroupquota=size | none デフォルトのグループ割り当て制限 userquota@user= size | none | default 特定のユーザ割り当て制限 groupquota@group= size | none | default 特定のグループ割り当て制限

☛

none は、割り当て制限なし、または割り当て制限を解除します。

☛

default は、割り当て制限のデフォルト値に設定します。

設定例）

デフォルトのグループ割り当て制限を設定する場合。 # zfs set defaultgroupquota=25gb testpool/home 特定のグループ割り当て制限を設定する場合。

(16)

Oracle Solaris 11 ZFS 構築/運用手順書

３-３-２.プロパティの継承 割り当て（quota）と予約（reservation）を除いて、すべての設定可能なプロパティは上位データセットから値を継承します。明示的な値が上位データセットに設定されていない場合は、デフォルト値が設定されます。以下は、一旦 testpool/home/user1 に圧縮（compression）「on」を設定した後、上位データセットからの設定（default）を継承する手順です。 １）プロパティの設定 「testpool/home/user1」の compression 設定値を on に設定します。 # zfs create testpool/home/user1

# zfs set compression=on testpool/home/user1 ２）プロパティの設定確認

「testpool」の compression 設定値を確認します。 # zfs get -r compression testpool

NAME PROPERTY VALUE SOURCE testpool compression off default testpool/home compression off default testpool/home/user1 compression on local

☛

-r オプションを使用すると、指定したデータセット配下に再帰的に実行されます。

３）プロパティの継承設定

compression 設定を上位データセットから継承します。 # zfs inherit compression testpool/home/user1 ４）プロパティの設定確認

設定後に「testpool」の compression 設定値を確認します。 # zfs get -r compression testpool

NAME PROPERTY VALUE SOURCE testpool compression off default testpool/home compression off default testpool/home/user1 compression off default

(17)

Oracle Solaris 11 ZFS 構築/運用手順書

３-４.ファイルシステムのマウント/アンマウント

初期設定では、すべてのファイルシステムは、 OS 起動時にサービス管理機能（ SMF ）の svc:/system/filesystem/local:default サービスにより自動マウントされます。 zfs set コマンドで mountpoint プロパティを指定することで、マウントポイントを変更できます。また、 mountpoint プロパティは上位データセットより継承されます。レガシーマウントを利用すると、従来のように/etc/vfstab ファイルや mount/umount コマンドを使用して、ファイルシステムのマウント/アンマウントを管理することが可能です。レガシーマウントを利用する場合は、 mountpoint プロパティに legacy を設定します。 ３-４-１.マウントポイントのプロパティ設定例 1 下記は、「testpool/home」ファイルシステムのマウントポイントを「/export/zfs」に設定する場合です。 １）マウントポイントプロパティの確認 マウントポイントプロパティの設定値を確認します。 # zfs get -r mountpoint testpool

NAME PROPERTY VALUE SOURCE testpool mountpoint /testpool default testpool/home mountpoint /testpool/home default testpool/home/user1 mountpoint /testpool/home/user1 default ２）マウントポイントプロパティの設定

「testpool/home」のマウントポイントプロパティを「/export/zfs」に設定します。 # zfs set mountpoint=/export/zfs testpool/home

☛

mountpoint のプロパティは自動で継承されます。

☛

mountpoint プロパティを変更すると、ファイルシステムが古いマウントポイントから自動的にマウント解除されて、新しいマウントポイントに再マウントされます。３）マウントポイントプロパティの確認設定したマウントポイントプロパティの設定値を確認します。 # zfs list -r testpool

NAME USED AVAIL REFER MOUNTPOINT testpool 1.59M 4.89G 288K /testpool testpool/home 592K 3.00G 304K /export/zfs

(18)

Oracle Solaris 11 ZFS 構築/運用手順書

# zfs get -r mountpoint testpool

NAME PROPERTY VALUE SOURCE testpool mountpoint /testpool default testpool/home mountpoint /export/zfs local

testpool/home/user1 mountpoint /export/zfs/user1 inherited from testpool/home ３-４-２.マウントポイントのプロパティ設定例 2

下記は、「testpool/home」ファイルシステムのマウントポイントを「legacy」に設定する場合の手順です。１）マウントポイントプロパティの確認

マウントポイントプロパティの設定値を確認します。 # zfs get -r mountpoint testpool

NAME PROPERTY VALUE SOURCE testpool mountpoint /testpool default testpool/home mountpoint /testpool/home default testpool/home/user1 mountpoint /testpool/home/user1 default ２）マウントポイントプロパティの設定

マウントポイントのプロパティを「legacy」に設定します。 # zfs set mountpoint=legacy testpool/home ３）マウントポイントプロパティの確認

設定したマウントポイントプロパティの設定値を確認します。 # zfs list -r testpool

NAME USED AVAIL REFER MOUNTPOINT testpool 1.59M 4.89G 288K /testpool testpool/home 592K 4.89G 304K legacy testpool/home/user1 288K 4.89G 288K legacy # zfs get -r mountpoint testpool

NAME PROPERTY VALUE SOURCE testpool mountpoint /testpool default testpool/home mountpoint legacy local

testpool/home/user1 mountpoint legacy inherited from testpool/home

☛

legacy を解除する場合、２）マウントポイントプロパティの設定の手順でマウントポイントを再指定してください。

(19)

Oracle Solaris 11 ZFS 構築/運用手順書

３-４-３.マウント/アンマウント実行 ZFS のファイルシステムは、ファイルシステムが作成されるとき、またはシステムが起動するときに自動的にマウントされます。zfs mount コマンドは、マウントポイントを変更するとき、または手動でファイルシステムのマウント/アンマウントを行うときに使用します。 zfs mount コマンドを引数なしで実行すると、ZFS が現在マウントしているファイルシステムをすべて表示します。但し、レガシーマウントで管理されているマウントポイントは表示されません。 １）マウント状態の確認 現在のファイルシステムのマウント状態を確認します。 # zfs mount (中略) testpool /testpool ２）マウントの実施「testpool/home」をマウントします。 # zfs mount testpool/home ３）マウント状態の確認 マウント実行後、ファイルシステムのマウント状態を確認します。 # zfs mount (中略) testpool /testpool testpool/home /export/zfs

☛

-a オプションを使用すると、ZFS が管理しているファイルシステムをすべてマウントしますが、レガシーマウントで管理されているファイルシステムはマウントされません。

☛

-O オプションを使用すると、空でないディレクトリへ強制的にマウントします。 ４）アンマウントの実施 「testpool/home」をアンマウントします。 # zfs unmount testpool/home または # zfs unmount /export/zfs

☛

-a オプションを使用すると、/（root）ファイルシステムを除き ZFS が管理しているファイルシステムをすべてアンマウントできます。

☛

アンマウントはファイルシステム名またはマウントポイントを指定して実行できます。

(20)

Oracle Solaris 11 ZFS 構築/運用手順書

３-５.ファイルシステムの共有、共有解除

Oracle Solaris 11.1 以降の ZFS におけるファイルシステムの共有は share.nfs プロパティを設定することで実現します。Oracle Solaris 10 のように/etc/dfs/dfstab ファイルを編集してもファイルシステムの共有は設定されません。

なお、Solaris 11 11/11 の場合は、手順が異なります。11/11 の手順については、「参考１．ファイルシステムの共有、共有解除(Oracle Solaris 11 11/11)」を参照下さい。

１）share.nfs プロパティの状態確認

ファイルシステムの share.nfs プロパティを確認します。デフォルトは「off」（無効）です。 # zfs get share.nfs testpool/home

NAME PROPERTY VALUE SOURCE testpool/home share.nfs off default ２）共有されているファイルシステムの確認

共有設定されているファイルシステムがないことを確認します。 # share

IPC$ smb - Remote IPC

☛

ファイルシステムの共有の状態は share コマンドで確認できます。

☛

共有されているファイルシステムがない場合は何も出力されません。

３）共有の設定

share.nfs プロパティを有効にします。

# zfs set share.nfs=on testpool/home ４）share.nfs プロパティの状態確認

share.nfs プロパティが「on」（有効）であることを確認します。 # zfs get share.nfs testpool/home

NAME PROPERTY VALUE SOURCE testpool/home share.nfs on local ５）共有されているファイルシステムの確認 共有設定されているファイルシステムを確認します。

# share

(21)

Oracle Solaris 11 ZFS 構築/運用手順書

６）共有設定の一時的な解除 ファイルシステムの共有を解除します。 # zfs unshare testpool/home

☛

-a オプションを使用すると、共有されているすべてのファイルシステムの共有を解除します。 ７）share.nfs プロパティの状態確認 共有を一時的に解除した後も、共有設定は有効であることを確認します。 # zfs get share.nfs testpool/home

NAME PROPERTY VALUE SOURCE testpool/home share.nfs on local ８）共有されているファイルシステムの確認 共有されているファイルシステムを確認します。

# share

☛

一時的に共有を解除しているため、何も出力されません。 ９）共有の再開 ファイルシステムの共有を再開します。 # zfs share testpool/home １０）共有されているファイルシステムの確認 共有されているファイルシステムを確認します。 # share

testpool_home /export/zfs nfs sec=sys,rw

☛

共有を再開したため、該当のファイルシステムが出力されます。

(22)

Oracle Solaris 11 ZFS 構築/運用手順書

３-６.デバイスの追加（add）

ストレージプールにデバイスを追加することで、ストレージプールの領域を動的に拡張できます。ストレージプール内のすべてのデータセットは、この領域をすぐに利用できます。図 1：デバイスの追加（add）イメージ図 １）構成の確認 ディスクを追加する前に「testpool」の構成を確認します。 # zpool list testpool

NAME SIZE ALLOC FREE CAP DEDUP HEALTH ALTROOT testpool 4.97G 1.59M 4.97G 0% 1.00x ONLINE - #

# zpool status testpool pool: testpool

state: ONLINE

(23)

Oracle Solaris 11 ZFS 構築/運用手順書

２）デバイスの追加

zpool add コマンドで、「testpool」に c2t0d3 と c2t0d4 からなるミラー構成のディスクを追加します。 # zpool add testpool mirror c2t0d3 c2t0d4

☛

「testpool」に 5GB のディスク 2 本をミラー構成で追加します。

３）構成の確認

zpool list、zpool status コマンドで「testpool」の構成を確認します。 # zpool list testpool

NAME SIZE ALLOC FREE CAP DEDUP HEALTH ALTROOT testpool 9.94G 126K 9.94G 0% 1.00x ONLINE - #

state: ONLINE

NAME STATE READ WRITE CKSUM testpool ONLINE 0 0 0 mirror-0 ONLINE 0 0 0 c2t0d1 ONLINE 0 0 0 c2t0d2 ONLINE 0 0 0 mirror-1 ONLINE 0 0 0 c2t0d3 ONLINE 0 0 0 c2t0d4 ONLINE 0 0 0 errors: No known data errors

☛

5GB のディスク 2 本をミラー構成で追加したので、SIZE の値は約 10GB です。

☛

追加したデバイスはストライピングになります。RAID-Z などの拡張はできません（例. 2+1 構成の RAID-Z にディスクを 1 本追加した場合、3+1 構成になるのではなく、2+1 構成の RAID-Z とディスク 1 本のストライピングになる）。

☛

追加するデバイスは元のストレージプールと同一容量のディスク、同一 RAID 構成を推奨します。

(24)

Oracle Solaris 11 ZFS 構築/運用手順書

３-７.デバイスの接続/切り離し（attach/detach）

既存のミラー構成のデバイスへ新しいデバイスを接続、または切り離しができます。例えば、既存のデバイスが 2 面ミラーである場合は、新規デバイスを接続すると 3 面ミラーが作成されます。新しいデバイスを接続すると、すぐに再同期化が開始されます。デバイスの接続/切り離し（attach/detach）はミラー構成でのみ使用可能です。図 2：デバイスの接続/切り離し（attach/detach）イメージ図 ３-７-１.デバイスの接続（attach） １）ストレージプールの状態確認 ストレージプール「testpool」の状態を確認します。 # zpool list testpool

state: ONLINE

(25)

Oracle Solaris 11 ZFS 構築/運用手順書

２）デバイスの接続

zpool attach コマンドで、「testpool」のデバイス c2t0d1 に c2t0d3 を接続します。 # zpool attach testpool c2t0d1 c2t0d3

３）ストレージプールの状態確認

attach 後にストレージプールの状態を確認します。 # zpool list testpool

state: ONLINE

scan: resilvered 672K in 0h0m with 0 errors on Tue Feb 24 15:43:14 2015 config:

NAME STATE READ WRITE CKSUM testpool ONLINE 0 0 0 mirror-0 ONLINE 0 0 0 c2t0d1 ONLINE 0 0 0 c2t0d2 ONLINE 0 0 0 c2t0d3 ONLINE 0 0 0 errors: No known data errors

☛

ミラー構成のため、ディスクを追加しても SIZE の値は変わりません。

参考）デバイスを追加してストレージプールをミラー構成にする場合

以下は、単一のディスク(c2t0d1)で構成されているストレージプールにディスク(c2t0d2)を attach し、ミラー構成に変更する手順です。

ストレージプール「testpool」の状態を確認します。 # zpool status testpool

NAME STATE READ WRITE CKSUM testpool ONLINE 0 0 0 c2t0d1 ONLINE 0 0 0

(26)

Oracle Solaris 11 ZFS 構築/運用手順書

zpool attach コマンドで、「testpool」のデバイス c2t0d1 に c2t0d2 を接続します。 # zpool attach testpool c2t0d1 c2t0d2

attach 後にストレージプールの状態を確認します。 # zpool status testpool

(27)

Oracle Solaris 11 ZFS 構築/運用手順書

３-７-２.デバイスの切り離し（detach） １）ストレージプールの状態確認

scan: resilvered 4.35M in 0h0m with 0 errors on Thu Mar 12 10:36:41 2015 config:

☛

3 面ミラー構成であることを確認します。

２）デバイスの切り離し

zpool detach コマンドで、「testpool」のデバイス c2t0d3 を切り離します。 # zpool detach testpool c2t0d3

detach 後にストレージプールの状態を確認します。 # zpool status testpool

scan: resilvered 4.35M in 0h0m with 0 errors on Thu Mar 12 10:36:41 2015 config:

(28)

Oracle Solaris 11 ZFS 構築/運用手順書

３-８.デバイスのオンライン/オフライン（online/offline）

ZFS では、デバイスを個別にオフラインまたはオンラインにできます。オフラインにしたデバイスには、I/O 要求は送信されません。ハードウェアに障害が発生している場合でも、ZFS ではその状態を一時的な状態と見なして、デバイスへのデータの読み取りおよび書き込みを続行しますが、継続的に障害が発生している場合は、デバイスをオフラインにして無視するように設定できます。また、オンラインに戻した後は自動で再同期化されます。図 3：デバイスのオンライン/オフライン（online/offline）イメージ図デバイスをオフラインにするときは、以下の点に注意してください。 ■ ストレージプールを構成するすべてのデバイスをオフラインにすることはできません。 ■ デフォルト設定では、デバイスをオフラインにすると、システムを再起動してもオフラインのままです。一時的にオフラインにするには、-t オプションを使用します。一時的にオフラインにした場合、システムを再起動すると自動的にオンライン状態に戻ります。 ■ デバイスはオフラインになっても、ストレージプールから切り離されません。元のストレージプールが破棄されても、オフラインのデバイスを別のストレージプールで使用しようとすると、エラーが表示され使用できません。元のストレージプールを破棄した後で、オフラインのデバイスを別のストレージプールで使用する場合は、まずデバイスをオンラインに戻してから、元のストレージプールを破棄します。

(29)

Oracle Solaris 11 ZFS 構築/運用手順書

３-８-１.デバイスのオフライン（offline） １）ストレージプールの状態確認

２）デバイスのオフライン

zpool offline コマンドで、「testpool」からディスク c2t0d3 をオフラインにします。 # zpool offline testpool c2t0d3

(30)

Oracle Solaris 11 ZFS 構築/運用手順書

オフライン後にストレージプールの状態を確認します。 # zpool status testpool

pool: testpool state: DEGRADED

status: One or more devices has been taken offline by the administrator. Sufficient replicas exist for the pool to continue functioning in a degraded state.

action: Online the device using 'zpool online' or replace the device with 'zpool replace'.

NAME STATE READ WRITE CKSUM testpool DEGRADED 0 0 0 mirror-0 DEGRADED 0 0 0 c2t0d1 ONLINE 0 0 0 c2t0d2 ONLINE 0 0 0 c2t0d3 OFFLINE 0 0 0 errors: No known data errors

☛

対象ディスクが OFFLINE と表示されること、また、ストレージプールの STATE が DEGRADED と表示されることを確認します。

参考）デバイスを一時的にオフラインにする場合

以下の手順は、ディスク c2t0d3 を一時的にオフラインにする場合です。 # zpool offline -t testpool c2t0d3

☛

-t オプションを使用するとデバイスは一時的にオフラインになります。

３-８-２.デバイスのオンライン（online）

オフラインのデバイスは、zpool online コマンドを使ってオンラインにできます。デバイスがオンラインになると、ストレージプールに書き込まれたすべてのデータは、新しく使用可能になったデバイスに再同期化されます。

(31)

Oracle Solaris 11 ZFS 構築/運用手順書

１）デバイスの状態確認デバイスの状態を確認します。

state: DEGRADED

status: One or more devices has been taken offline by the administrator. Sufficient replicas exist for the pool to continue functioning in a degraded state.

action: Online the device using 'zpool online' or replace the device with 'zpool replace'.

NAME STATE READ WRITE CKSUM testpool DEGRADED 0 0 0 mirror-0 DEGRADED 0 0 0 c2t0d1 ONLINE 0 0 0 c2t0d2 ONLINE 0 0 0 c2t0d3 OFFLINE 0 0 0 errors: No known data errors

２）デバイスのオンライン

zpool online コマンドで、testpool のディスク c2t0d3 をオンラインにします。 # zpool online testpool c2t0d3

３）デバイスの状態確認

オンライン後、デバイスの状態を確認します。 # zpool status testpool

NAME STATE READ WRITE CKSUM testpool ONLINE 0 0 0 mirror-0 ONLINE 0 0 0 c2t0d1 ONLINE 0 0 0 c2t0d2 ONLINE 0 0 0 c2t0d3 ONLINE 0 0 0

(32)

Oracle Solaris 11 ZFS 構築/運用手順書

３-９.エラーのクリア（clear）

ストレージプール内のデバイスに障害が発生した場合、zpool status の出力にエラーが表示されます。デバイスのエラーが一時的である場合は、エラーを無視してクリアすることができますが、クリア後もデバイスのエラーが出力される場合はデバイスの交換が必要です。エラー出力は自動的に消えないため、デバイスの交換後は手動でエラー出力をクリアします。１）ストレージプールのエラーのクリア「testpool」のエラーをクリアします。

# zpool clear testpool

参考）デバイスを指定してエラーのクリアを実行する場合 デバイスを指定してクリアを実行します。

# zpool clear testpool c2t0d2

(33)

Oracle Solaris 11 ZFS 構築/運用手順書

３-１０.デバイスの置き換え（replace）

zpool replace コマンドを使用して、ストレージプール内のデバイスを物理的に置き換えることができます。図 4：デバイスの置き換え（replace）イメージ図ストレージプール内のデバイスを置き換える場合は、次のことを考慮してください。 ■ ストレージプールのプロパティ autoreplace を on に設定した場合、そのストレージプールに以前属していたデバイスと物理的に同じ位置に新しいデバイスが検出されると、そのデバイスは自動的にフォーマットされ、zpool replace コマンドを使用せずに置き換えられます。ハードウェアの種類によっては、この機能を使用できない場合があります。 ■ 交換用デバイスはストレージプール内で最も容量の小さいディスクより大きいサイズである必要があります。 ■ 置き換える前のデバイスよりもサイズが大きいデバイスをストレージプールに追加しても、自動的にその最大サイズにまで拡張されません。ストレージプールに置き換えたデバイスを最大サイズまで拡張したい場合は、ストレージプールの autoexpand プロパティを有効にします。デフォルトでは autoexpand プロパティは無効になっています。 ■ 障害の発生したディスクがホットスペアに自動的に置き換えられた場合は、障害の発生したディスクが置き換えられたあとでスペアの切り離しが必要になることがあります。 ■ デバイスの置き換えは、新しいデバイスへデータの再同期が行われるため時間がかかります。zpool scrub コマンドを実行すると、新しいデバイスが動作可能なこと、およびデータが正しく書き込まれることを確認することができます。

(34)

Oracle Solaris 11 ZFS 構築/運用手順書

１）デバイスの確認

zpool status コマンドで確認します。 # zpool status testpool pool: testpool

state: ONLINE

２）デバイスの置き換え

c2t0d1 と c2t0d2 と c2t0d3 で構成される testpool のうち、c2t0d3 を別ディスク（c2t0d4）で置き換えます。 # zpool replace testpool c2t0d3 c2t0d4

☛

1 つのデバイスで構成されるストレージプール内のデバイスを置き換える場合も同様に、置き換える前後のデバイスを指定します。

(35)

Oracle Solaris 11 ZFS 構築/運用手順書

３）デバイスの置き換え確認

デバイスの置き換え後、zool status コマンドでストレージプールの状態を確認します。 # zpool status testpool

pool: testpool state: DEGRADED

status: One or more devices is currently being resilvered. The pool will continue to function in a degraded state.

action: Wait for the resilver to complete.

Run 'zpool status -v' to see device specific details. scan: resilver in progress since Wed Feb 25 10:22:07 2015 1003M scanned

493M resilvered at 30.8M/s, 49.10% done, 0h0m to go config:

NAME STATE READ WRITE CKSUM testpool DEGRADED 0 0 0 mirror-0 DEGRADED 0 0 0 c2t0d1 ONLINE 0 0 0 c2t0d2 ONLINE 0 0 0 replacing-2 DEGRADED 0 0 0 c2t0d3 ONLINE 0 0 0 c2t0d4 DEGRADED 0 0 0 (resilvering) errors: No known data errors

☛

同期処理が完了するまでは「replacing-2」と表示されます。

state: ONLINE

scan: resilvered 1003M in 0h0m with 0 errors on Wed Feb 25 10:22:43 2015 config:

(36)

Oracle Solaris 11 ZFS 構築/運用手順書

３-１１.ホットスペア（spare）

ホットスペア機能を利用すると、ストレージプールで障害が発生した場合、故障したデバイスをスペアディスクと置き換えることできます。オンラインのデバイスが故障した場合は、スペアディスクに自動的に置き換えられます。また、スペアディスクは複数のストレージプールで共有できます。ストレージプールの autoreplace プロパティを on に設定している場合、新しいデバイスが挿入されオンライン処理が完了すると、使用中のスペアディスクは自動的に切り離され未使用のスペアディスクに戻ります。図 5：ホットスペア（spare）イメージ図

(37)

Oracle Solaris 11 ZFS 構築/運用手順書

ホットスペア機能使用時の注意 ■ ストレージプール内でもっとも大きいディスクのサイズ以上のディスクをスペアディスクに設定します。サイズの小さなディスクを設定した場合、スペアディスクがアクティブになる（故障したデバイスと置き換わる、または手動で置き換える）際にエラーとなります。 ■ 共有しているスペアディスクがストレージプールで使用されている状態で、ストレージプールをエクスポートする場合は、zpool export -f (強制)オプションを使用する必要があります。ただし、スペアディスクを共有している別のストレージプールがスペアディスクを使用しようとするとデータ破壊が発生する可能性があります。スペアディスクをアクティブにする（置き換える）方法 ■ 手動 – zpool replace コマンドを使用して置き換えます。 ■ 自動 – FMA エージェントがデバイスのエラーを検知し故障デバイスをスペアディスクに置き換えます。

☛

ＦＭA(Fault Management Architecture)は、ハードウェアに関する情報を、監視、解析し、デバイスの自動切り離しなどを行う可用性を高める OS 標準機能。

１）スペアディスクの指定

ストレージプール作成時にスペアディスクを指定する場合。

# zpool create testpool mirror c2t0d1 c2t0d2 spare c2t0d3 c2t0d4 ストレージプール作成後にスペアディスクを指定する場合。

(38)

Oracle Solaris 11 ZFS 構築/運用手順書

２）スペアディスクの確認

zpool status コマンドで確認します。 # zpool status testpool pool: testpool

state: ONLINE

NAME STATE READ WRITE CKSUM testpool ONLINE 0 0 0 mirror-0 ONLINE 0 0 0 c2t0d1 ONLINE 0 0 0 c2t0d2 ONLINE 0 0 0 spares c2t0d3 AVAIL c2t0d4 AVAIL errors: No known data errors ３）スペアディスクのアクティブ化

zpool replace コマンドを使用して、ストレージプール内のホットスペアをアクティブにする場合。 # zpool replace testpool c2t0d1 c2t0d3

#

state: ONLINE

scan: resilvered 696K in 0h0m with 0 errors on Wed Feb 25 11:24:58 2015 config:

NAME STATE READ WRITE CKSUM testpool ONLINE 0 0 0 mirror-0 ONLINE 0 0 0 spare-0 ONLINE 0 0 0 c2t0d1 ONLINE 0 0 0 c2t0d3 ONLINE 0 0 0 c2t0d2 ONLINE 0 0 0 spares c2t0d3 INUSE c2t0d4 AVAIL errors: No known data errors

(39)

Oracle Solaris 11 ZFS 構築/運用手順書

スペアディスクを非アクティブにする方法次の 3 つの方法を使って、スペアディスクを非アクティブにできます ■ スペアディスクをストレージプールから削除することでホットスペアを取り消す（remove） ■ 元のデバイスをスペアディスクと置き換える（replace） ■ スペアディスクを恒久的に交換する（元のデバイスを detach する） 参考）スペアディスクの削除 ホットスペアに設定しているスペアディスクを削除する場合。 # zpool remove testpool c2t0d4

(40)

Oracle Solaris 11 ZFS 構築/運用手順書

３-１２.ストレージプールの移行（export/import）

３-１２-１.エクスポート（export） ストレージプールをエクスポートして、別のサーバにインポートすることができます。この操作によりストレージプールに関する全ての情報を別のサーバに移行することができます。図 6：エクスポート（export）イメージ図 １）ストレージプールのエクスポート testpool をエクスポートします。

# zpool export testpool ２）エクスポート状態の確認

# zpool list testpool

cannot open 'testpool': no such pool

☛

エクスポートされたストレージプールはシステムから認識されなくなります。

☛

ストレージプールの中にマウントされたファイルシステムがある場合は、マウントを解除してからエクスポートを実行します。マウントの解除に失敗した場合は、-f オプションを使用して強制的にマウントを解除できます。ただし、ZFS ボリュームがストレージプール内で使用中である場合は、-f オプションを使用してもそのストレージプールをエクスポートすることはできません。 ３-１２-２.インポート（import） ストレージプールをエクスポート後に物理デバイスを取り外し、インポート先のサーバに接続します。ZFS では、一部のデバイスだけで使用できる状態になることもありますが、サーバ間でストレージプールを移動するときは、すべての物理デバイスを移動してください。デバイス名は元のサーバ上でのデバイス名である必要はありません。デバイス名が変更されても、ストレージプールを構成するデバイスとして自動的に検出されます。