GEOM - 論理ボリュームマネージャ（RAIDの構築）

目次

• 環境
• RAID1の構築
• FreeBSDインストール
• インストールディスク(CD-ROM)から起動
• gmirrorの設定
• RAID設定状況確認
• 二台目ハードディスクの追加
• gmirror list にてRAIDの設定状況を確認する
• Flagsの種類
• 同期処理実行中の状況
• 同期処理完了時の状況
• RAIDディスクのマウント
• loader.conf の編集
• fstab の編集
• fixit mode の終了
• sysinstall Main Menu の終了
• CDの取り出し
• 再起動
• gm0から起動するか確認
• gmirrorの状態確認
• gmirrirコマンド
• HDD障害時の処理手順
• ベンチマーク
• 参考

論理ボリュームマネージャ（RAIDの構築）

After a mirror's creation, all components are detected and configured automatically.
All operations like failure detection, stale component detection, rebuild of stale components, etc. are also done automatically.
GEOM_MIRRORを構築した後、自動的にコンポーネントを検出し構成される。
また、ディスク障害、データの不整合、同期処理の失敗など自動的に検出され処理される。

環境

• FreeBSD 6.2 Release
• HA8000/110EF

ad4: 152590MB <Hitachi HDT725025VLA380 V5DOA52A> at ata2-master SATA300
ad6: 152590MB <Hitachi HDT725025VLA380 V5DOA52A> at ata3-master SATA300

RAID1の構築

FreeBSDインストール

• ad4にFreeBSDをインストールする。
• dmesgのHDD内容を紙に印刷しておくと良いでしょう！

　　　：
ad4: 152590MB <Hitachi HDT725025VLA380 V5DOA52A> at ata2-master SATA300
ad6: 152590MB <Hitachi HDT725025VLA380 V5DOA52A> at ata3-master SATA300
　　　：

• /etc/fstabの内容も紙に印刷しておくと良いでしょう！

# cat /etc/fstab
# Device                Mountpoint      FStype  Options         Dump    Pass#
/dev/ad4s1b             none            swap    sw              0       0
/dev/ad4s1a             /               ufs     rw              1       1
/dev/ad4s1e             /tmp            ufs     rw              2       2
/dev/ad4s1f             /usr            ufs     rw              2       2
/dev/ad4s1d             /var            ufs     rw              2       2
/dev/acd0               /cdrom          cd9660  ro,noauto       0       0
# 

インストールディスク(CD-ROM)から起動

 ad4のハードディスクにFreeBSDをインストール後
 ハードディスク毎RAID設定する為、インストールディスクから起動し直す。

• 「Country Selection」画面で 110 Japan を選択します。
• 「System Console Keymap」画面で Japanese 106 を選択します。
• 「sysinstall Main Menu」画面で Fixit を選択します。
• 「Please choose a fixit option」画面で 2 CDROM/DVD を選択します。
• プロンプトが Fixit# になったことを確認し次のgmirrorの設定を行います。

Good Luck!

Fixit#

gmirrorの設定

Fixit# chroot /dist
Fixit# mount_devfs devfs /dev
Fixit# gmirror load -v 
Module available.
Done.
Fixit# gmirror label -v -b split -s 4096 gm0 /dev/ad4
Metadata value stored on /dev/ad4.
Done.
Fixit#

gmirror label -v -b split -s 4096 gm0 /dev/ad4

詳細表示モード

gmirror label -v -b split -s 4096 gm0 /dev/ad4

読み込み時、ディスク分けて読み込み

gmirror label -v -b split -s 4096 gm0 /dev/ad4

split設定時に設定したサイズ以上の場合、分けて読み込み

gmirror label -v -b split -s 4096 gm0 /dev/ad4

RAIDのデバイス名

gmirror label -v -b split -s 4096 gm0 /dev/ad4

RAIDに追加するデバイス名

RAID設定状況確認

• gmirror list にて設定状況を確認する。

Fixit# gmirror list
Geom name: gm0
State: COMPLETE
Components: 1
Balance: split
Slice: 4096
Flags: NONE
GenID: 0
SyncID: 1
ID: 146654457
Providers:
1. Name: mirror/gm0
   Mediasize: 160002211328 (149G)
   Sectorsize: 512
   Mode: r0w0e0
Consumers:
1. Name: ad4
   Mediasize: 160002211840 (149G)
   Sectorsize: 512
   Mode: r1w1e1
   State: ACTIVE
   Priority: 0
   Flags: NONE
   GenID: 0
   SyncID: 1
   ID: 744055256
Fixit#

二台目ハードディスクの追加

• ad6ディスクを追加する。

Fixit# gmirror insert -v gm0 /dev/ad6
Done.
Fixit#

• 追加後、自動的にリビルドが実行され、ad6の同期が始まる。

gmirror list にてRAIDの設定状況を確認する

Flagsの種類

NONE

ミラー完了状態（同期されている）

DIRTY

書込み中で未同期（ミラーされていない）

SYONCHRONIZING

リビルド中

同期処理実行中の状況

• Synchronized: 35 % で進行状況が確認できます。

Fixit# gmirror list
Geom name: gm0
State: DEGRADED
Components: 2
Balance: split
Slice: 4096
Flags: NONE
GenID: 0
SyncID: 1
ID: 146654457
Providers:
1. Name: mirror/gm0
   Mediasize: 160002211328 (149G)
   Sectorsize: 512
   Mode: r1w0e0
Consumers:
1. Name: ad4
   Mediasize: 160002211840 (149G)
   Sectorsize: 512
   Mode: r1w1e1
   State: ACTIVE
   Priority: 0
   Flags: NONE
   GenID: 0
   SyncID: 1
   ID: 744055256
1. Name: ad6
   Mediasize: 160002211840 (149G)
   Sectorsize: 512
   Mode: r1w1e1
   State: SYNCHRONIZING
   Priority: 0
   Flags: DIRTY, SYONCHRONIZING
   GenID: 0
   SyncID: 1
   Synchronized: 35%
   ID: 1423845859
Fixit#

同期処理完了時の状況

• 同期処理が完了するまで待つ

Fixit# gmirror list
Geom name: gm0
State: COMPLETE
Components: 2
Balance: split
Slice: 4096
Flags: NONE
GenID: 0
SyncID: 1
ID: 146654457
Providers:
1. Name: mirror/gm0
   Mediasize: 160002211328 (149G)
   Sectorsize: 512
   Mode: r0w0e0
Consumers:
1. Name: ad4
   Mediasize: 160002211840 (149G)
   Sectorsize: 512
   Mode: r1w1e1
   State: ACTIVE
   Priority: 0
   Flags: NONE
   GenID: 0
   SyncID: 1
   ID: 744055256
1. Name: ad6
   Mediasize: 160002211840 (149G)
   Sectorsize: 512
   Mode: r1w1e1
   State: ACTIVE
   Priority: 0
   Flags: NONE
   GenID: 0
   SyncID: 1
   ID: 1423845859
Fixit#

RAIDディスクのマウント

• ルートデバイスをマウント（fstabを参照してルートとなっているデバイスを確認する）

Fixit# mount /dev/mirror/gm0s1a /mnt

loader.conf の編集

• /mnt/boot/loader.confに下記の設定を追加する。

Fixit# edit /mnt/boot/loader.conf

• 下記の行を追加する。

geom_mirror_load="YES"

• ローダブルモジュールでは無くkernelに組み込んで使用したい場合は下記の行を追加してkernelを再構築します。

options         GEOM_MIRROR

fstab の編集

• /mnt/etc/fstab のデバイス名 /dev/ad4 を/dev/mirror/gm0 へ変更する。

Fixit# edit /mnt/etc/fstab

• 下記の様に変更する。

# Device                Mountpoint      FStype  Options         Dump    Pass#
/dev/ad4s1b             none            swap    sw              0       0
/dev/ad4s1a             /               ufs     rw              1       1
/dev/ad4s1e             /tmp            ufs     rw              2       2
/dev/ad4s1f             /usr            ufs     rw              2       2
/dev/ad4s1d             /var            ufs     rw              2       2
/dev/acd0               /cdrom          cd9660  ro,noauto       0       0

 　　　↓ ↓ ↓

# Device                Mountpoint      FStype  Options         Dump    Pass#
/dev/mirror/gm0s1b      none            swap    sw              0       0
/dev/mirror/gm0s1a      /               ufs     rw              1       1
/dev/mirror/gm0s1e      /tmp            ufs     rw              2       2
/dev/mirror/gm0s1f      /usr            ufs     rw              2       2
/dev/mirror/gm0s1d      /var            ufs     rw              2       2
/dev/acd0               /cdrom          cd9660  ro,noauto       0       0

fixit mode の終了

Fixit# exit
Fixit# exit

sysinstall Main Menu の終了

CDの取り出し

再起動

gm0から起動するか確認

gmirrorの状態確認

• 再起動後に自動でリビルドが始まります。

# gmirror status
      Name    Status  Components
mirror/gm0  DEGRADED  ad4
                      ad6 (8%)
#

GEOM_MIRROR: Device gm0: rebuilding provider ad4 finished.
GEOM_MIRROR: Device gm0: provider ad4 activated.

• 再度状態確認すると

# gmirror status
      Name    Status  Components
mirror/gm0  COMPLETE  ad4
                      ad6
#

gmirrirコマンド

name

論理デバイス名(Device: gm0) - ミラーデバイス名

prov

物理デバイス名(Provider: /dev/ad4 /dev/ad6)

HDD障害時の処理手順

1, gmirror status コマンドでDEGRADEDとなっているか確認する。
2, コンピュータを停止し電源を落とす。
3, 故障したHDDを交換する。
4, コンピュータを起動する。
5, gmirror status コマンドで交換したHDDのリビルドが開始しているか確認する。
※ 交換したディスクが表示されていない場合はgmirror insert -v gm0 /dev/ad?を実行する。

ベンチマーク

• パッケージでbonnie-2.0.6をインストールする。
• ミラー前とミラー後に下記を実行し比較します。

# bonnie
File './Bonnie.3920', size: 104857600
Writing with putc()...done
Rewriting...done
Writing intelligently...done
Reading with getc()...done
Reading intelligently...done
Seeker 2...Seeker 3...Seeker 1...start 'em...done...done...done...
              -------Sequential Output-------- ---Sequential Input-- --Random--
              -Per Char- --Block--- -Rewrite-- -Per Char- --Block--- --Seeks---
Machine    MB K/sec %CPU K/sec %CPU K/sec %CPU K/sec %CPU K/sec %CPU  /sec %CPU
          100  7013 81.6  9690 30.1  4085 14.7  6135 62.2 11296 17.6 127.5  3.8
#

参考

• http://www.syon.co.jp/syontech/tech005.html
• http://blog.at-dark.jp/pc/2006/11/poweredge_sc430raid-1.html
• http://mimori.org/~h/tdiary/200605.html