文書番号 : LK LifeKeeper を用いた HP StoreVirtual VSA に関する 検証レポート 第 2 版 サイオステクノロジー株式会社

Transcription

1 文書番号 : LK LifeKeeper を用いた HP StoreVirtual VSA に関する 検証レポート 第 2 版 サイオステクノロジー株式会社

2 目次 1 本書の内容 将来における互換性について HP StoreVirtual VSA の概要 本構成の利点 構成情報 推奨構成について 構築手順 HP StoreVirtual VSA の設定 OS の設定 LifeKeeper のインストールと設定 ファイルシステムリソースの作成 LifeKeeper の機能確認 HP StoreVirtual VSA の機能確認 参考資料 構成例 謝辞 お問い合わせ 免責事項 改訂履歴日付 バージョン 変更履歴 2014 年 3 月 28 日 初版 新規作成 2014 年 6 月 24 日 第 2 版 LifeKeeper サーバと HP StoreVirtual VSA を Device Mapper Multipath を使ってマルチパス接続するには LifeKeeper を物理マシンに構築する必要があるため 構成情報 構成手順の 仮想マシン の記述を削除 LifeKeeper を仮想マシンに構築した場合 ESXi 側でマルチパスの設定を行う必要がある旨 追 記 2

3 1 本書の内容 LifeKeeper for Linux( 以下 LifeKeeper) で HP StoreVirtual シリーズをサポート対象ス トレージとすることを目的とした 認定テストを行いました 認定テストの結果 HP StoreVirtual シリーズがサポート対象ストレージとなりました HP StoreVirtual シリーズには 次の 2 種類があります HP StoreVirtual VSA : 仮想領域をストレージとして利用できる製品 HP StoreVirtual 4xxx: ストレージ製品 詳細につきましては 以下の URL をご参照ください 本書は HP StoreVirtual VSA で認定テストを行った検証レポートとなります また 途中に記載されております構築手順については HP StoreVirtual 4xxx を利用される方も同様の構築手順となります HP StoreVirtual 4xxx を利用している場合の留意事項 HP StoreVirtual VSA のンストールは不要です 仮想 という単語は 物理 に読み替えてください 仮想化環境に特化した記述については 読み飛ばしてください 1.1 将来における互換性について 本書に記載されております内容は 2014 年 3 月 28 日時点の HP StoreVirtual VSA 上で実施した検証結果に基づいています 将来の HP StoreVirtual シリーズ及び LifeKeeper の仕様変更により 本書で案内している各種操作方法に変更が必要となる可能性があります 必要に応じて最新のドキュメンテーションを参照し 適切な設定を行なってください 3

4 2 HP StoreVirtual VSA の概要 HP StoreVirtual VSA とは HP StoreVirtual 4xxxx のすべての機能を備えた 共有ストレージ をサーバのローカルストレージを使用して ハパーバザ上 ( VMware/Hyper-V) で実現するソフトウェゕです HP StoreVirtual VSA を複数の仮想化ハバーバザー上に分散して配置する事によりサーバ上のデゖスクを単純に共有デゖスクとして使用するよりも ネットワーク RAID によるパフォーマンスの向上 クラスタリングによる可用性の向上が望めます 詳細につきましては 以下の URL をご参照ください 3 本構成の利点 LifeKeeper と HP StoreVirtual VSA を組み合わせて利用することで 以下のような利点 が考えられます (1) ストレージからアプリケーションまでをソフトウェアのみで高可用性 を実現できる HP StoreVirtual VSA には ストレージクラスタリング ネットワーク RAID リモートコピーなどの機能が備わっており 障害に強い環境を構築することが可能です この環境に LifeKeeper を組み合わせることにより ストレージ領域だけではなく サーバ上で動作するゕプリケーションやネットワークなどの障害に対応することができ より高い可用性を持ったシステムを実現することが可能となります (2) 管理ツール GUI があり構築 設定が簡単 HP StoreVirtual VSA は管理ツール (Central Management Console) を利用することでストレージの設定を容易に行うことができます また LifeKeeper は GUI から構築 設定を行うことが可能です 管理ツール GUI が利用できることで簡単に作業を行うことが可能です 4

5 4 構成情報 今回検証を行った構成は 以下の通りです マシン A/ マシン B CPU の数 :4 構成 RAM:4GB Disk:1000GB NIC の数 :4 OS Red Hat Enterprise Linux Server 6.4 (Santiago) 64bit LifeKeeper v8.2 HP StoreVirtual VSA-1/ HP StoreVirtual VSA-2/ HP StoreVirtual VSA-3 仮想化ハパーバザ VMware 5.5 CPU の数 :2 構成 RAM:4GB Disk:210GB NIC の数 :2 HP StoreVirtual VSA

6 全体の構成図 6

7 4.1 推奨構成について LifeKeeper LifeKeeper はコミュニケーションパスを 2 つ以上設定することを推奨しております ノード間で通信するための NIC は 2 つ以上用意することをご検討ください また ンストールする OS については LifeKeeper がサポートする OS をご利用ください 詳細につきましては 以下をご参照ください n/linux_configuration.htm HP StoreVirtual VSA HP StoreVirtual VSA を複数利用する場合は 別々の ESX ホストにンストールして ください 理由は単一障害点を無くし 障害に強いシステムを構成するためです 5 構築手順 HP StoreVirtual VSA の設定について 5.1 HP StoreVirtual VSA の設定 HP StoreVirtual VSA のンストールを行います ンストールの手順につきましては 下記ドキュメントを参照してください _ja.pdf 今回検証した構成では HP StoreVirtual VSA を 3 ノード作成し 1 つのストレージプー ルとして利用しました 7

8 5.2 OS の設定 (1) LifeKeeper をインストールするための設定 LifeKeeper をンストールするための必要な設定については 以下のドキュメント 5 ページから 6 ページをご参照ください LifeKeeper for Linux スタートゕップガド (v8.2 用 ) (2) LifeKeeper に必要なパッケージ LifeKeeper for Linux v8.2 は下記のパッケージ群が必要となります 一般的なパッケージの依存関係 nux_dependencies.htm (3) Device Mapper Multipath のインストール Device Mapper Multipath をンストールしてください 注意 本設定は両ノードで行ってください 確認方法 # rpm -qa grep multipath device-mapper-multipath el6.x86_64 device-mapper-multipath-libs el6.x86_64 ンストール方法 # rpm -ivh device-mapper-multipath el6.x86_64 # rpm -ivh device-mapper-multipath-libs el6.x86_64 (4) Device Mapper Multipath の設定 mpathconf ユーテゖリテゖを使って マルチパスの設定を行うため 8

9 /etc/multipath.conf フゔルを編集します 以下に今回検証環境に記載した内容を示します お客様環境で以下の記載と同様の記述を行う場合は 事前に動作確認を行ってください 注意 本設定は両ノードで行ってください 記述例 /etc/multipath.conf #defaults { # udev_dir /dev # polling_interval 10 # path_selector "round-robin 0" # path_grouping_policy multibus # getuid_callout "/lib/udev/scsi_id --whitelisted --device=/dev/%n" # prio alua # path_checker readsector0 # rr_min_io 100 # max_fds 8192 # rr_weight priorities # failback immediate # no_path_retry fail # user_friendly_names yes ~ 中略 ~ blacklist { devnode "^(ram raw loop fd md dm- sr scd st)[0-9]*" devnode "^hd[a-z]" } blacklist_exceptions { device { vendor "LEFTHAND" product "iscsidisk" } } 9

10 記述後 以下のコマンドで multpath デーモンを起動させてください 設定方法 # service multipathd start (5) iscsi イニシエーターのインストール及び設定 注意 本設定は両ノードで行ってください 1 iscsi-initiator-utils をンストールします ンストール方法 # rpm -ivh scsi-initiator-utils el6.x86_64 2 システム起動時に iscsi と iscsid デーモンが自動起動するように設定し ます 設定方法 # chkconfig iscsi on # chkconfig iscsid on 3 /etc/sysctl.conf フゔルのパラメータ net.ipv4.conf.default.rp_filter を変 更します 変更前 # Controls source route verification net.ipv4.conf.default.rp_filter = 1 変更後 # Controls source route verification net.ipv4.conf.default.rp_filter = 0 10

11 4 iscsi で利用する NIC を設定します 設定方法 # iscsiadm -m iface -I iface0 --op=new # iscsiadm -m iface -I iface1 --op=new 5 iface0 と iface1 が追加されたことを確認してください 確認方法 # iscsiadm -m iface default tcp,<empty>,<empty>,<empty>,<empty> iser iser,<empty>,<empty>,<empty>,<empty> iface0 tcp,<empty>,<empty>,<empty>,<empty> iface1 tcp,<empty>,<empty>,<empty>,<empty> 6 iface0 と iface1 に iscsi で使用する NIC の MAC ゕドレスを紐付けます 設定方法 # iscsiadm -m iface -o update -I iface0 -n iface.hwaddress -v NIC1 の MAC ゕドレス # iscsiadm -m iface -o update -I iface1 -n iface.hwaddress -v NIC2 の MAC ゕドレス 7 iface0 と iface1 に NIC の MAC ゕドレスが紐付けられたかを確認してください 確認方法 # iscsiadm -m iface default tcp,<empty>,<empty>,<empty>,<empty> iser iser,<empty>,<empty>,<empty>,<empty> iface1 tcp,00:11:22:33:44:55,<empty>,<empty>,<empty> iface0 tcp,66:77:88:99:aa:bb,<empty>,<empty>,<empty> 11

12 (6) iscsi ターゲットの認識 注意 本設定は両ノードで行ってください iscsi ターゲット (HP StoreVirtual VSA) を認識させます 設定方法 # iscsiadm -m discovery -t sendtargets -p iscsi ターゲットの IP (7) iscsi ターゲットへのログイン 注意 本設定は両ノードで行ってください 認識した iscsi ターゲットにログンします 設定方法 # iscsiadm -m node login OS が iscsi の領域を正しく認識しているかどうかは 以下のコマンドを利用して状況 を確認してください 確認方法 # ll /dev/mapper/ 合計 0 crw-rw root root 10, 58 3 月 17 13: control lrwxrwxrwx 1 root root 8 3 月 17 13: mpatha ->../dm-24 lrwxrwxrwx 1 root root 8 3 月 17 13: mpathap1 ->../dm-39 lrwxrwxrwx 1 root root 7 3 月 17 13: mpathb->../dm-9 lrwxrwxrwx 1 root root 8 3 月 17 13: mpathbp1 ->../dm-30 12

13 (8) パーティションの作成 ログンした iscsi ターゲットの領域を利用するため fdisk コマンドを利用しパー テゖションを作成します 前提 iscsi ターゲットの領域 :/dev/mapper/mpatha 作成方法 # fdisk /dev/mapper/mpatha fdisk コマンドの詳細につきましては man をご確認ください (9) ファイルシステムの作成 パーテゖションを作成した iscsi ターゲットの領域をマウントするためにフゔル システムを作成します 作成方法例 # mkfs.ext4 /dev/mapper/mpathap1 (10) ファイルシステムのマウント 作成したフゔルシステムをマウントし iscsi ターゲットの領域を利用できるように 任意のデゖレクトリにマウントします 設定方法例 # mount /dev/mapper/mpathap1 /fs/mpatha OS の設定は以上です 13

14 5.3 LifeKeeper のインストールと設定 (1) LifeKeeper のインストール マシン A/ マシン B に LifeKeeper をンストールします ンストールの手順につき ましては 下記ドキュメントの 7 ページから 19 ページをご参照ください LifeKeeper for Linux スタートゕップガド (v8.2 用 ) セットゕップが完了しましたら LifeKeeper を起動します # /opt/lifekeeper/bin/lkstart (2) LifeKeeper GUI 管理画面へのアクセス LifeKeeper GUI 管理画面を開きます # /opt/lifekeeper/bin/lkguiapp (3) コミュニケーションパスの作成 GUI クラゕントでコミュニケーションパスを作成するためのウゖザードを起動し コミュニケーションパスを作成します GUI クラゕントのツールバーの [Edit] を選択し [Server] [Create Comm Path ] を実行します 設定は下記の順序で行ないます 最後に [Create] を選択するとコミュニケーションパスの作成が開始されます これ以降は 今回実際に設定した値を記載しております 14

15 1 つめのコミュニケーションパスの設定値 番号項目入力もしくは選択した値 1 Local Server マシン A 2 Remote Server マシン B 3 Device Type TCP 4 Local IP Address Remote IP Address Priority 1 2 つめのコミュニケーションパスの設定値 番号項目入力もしくは選択した値 1 Local Server マシン A 2 Remote Server マシン B 3 Device Type TCP 4 Local IP Address Remote IP Address Priority ファイルシステムリソースの作成 LifeKeeper で保護するため リソースの登録およびリソース監視に必要な設定を行いま す (1) 事前準備 フゔルシステムリソースは共有ストレージ上のフゔルシステムをクラスタノード間 で切り替えることを可能する機能を提供します フゔルシステムリソースを作成する には 以下の条件を満たしている必要があります 各サーバから同じ状態で接続できること fdisk などのユーテゖリテゖを使い 共有デゖスクのパーテゖションが切られていること mkfs などのユーテゖリテゖを使い フゔルシステムが作成されていること 各サーバでフゔルシステムをマウント ゕンマウントができること 稼動系側になるサーバで保護する領域をマウントしていること 15

16 今回の環境では以下のマウントポントに HP StoreVirtual VSA の領域をマウントしました マウントポント /fs/mpatha (2) ファイルシステムリソースの作成 LifeKeeper 管理画面より Create Resource Hierarchy を選択し File System リソー スを作成します リソース作成ウゖザードで入力する内容は以下の通りです ファイルシステムリソースの設定値 番号 項目 入力もしくは選択した値 1 Please Select Recovery Kit File System 2 Switchback Type( プラマリサーバ ) Intelligent 3 Server マシン A 4 Mount Point( プラマリサーバ ) /fs/mpatha 5 Root Tag( プラマリサーバ ) /fs/mpatha 6 Target Server マシン B 7 Switchback Type( バックゕップサーバ ) intelligent 8 Template Priority( プラマリサーバ ) 1 9 Target Priority( バックゕップサーバ ) Mount Point( バックゕップサーバ ) /fs/mpatha 11 Root Tag( バックゕップサーバ ) /fs/mpatha 16

17 6 LifeKeeper の機能確認 4 構成情報の環境で LifeKeeper の以下の機能について確認を行っております (1) ファイルシステムリソースの作成 フゔルシステムリソースが作成できることを確認しました (2) ファイルシステムリソースの拡張 待機系側にフゔルシステムリソースが拡張できることを確認しました (3) リザベーションが正常に掛かるか リザベーションを持っているノードのみ 保護しているフゔルシステムにゕクセスでき ることを確認しました (4) リソースの削除 フゔルシステムリソースが削除できることを確認しました (5) リソース障害時に正しく切り替わるか 稼動系ノードで iscsi 接続に利用している 2 つの NIC を停止した際に LifeKeeper が障害 として検知し フェルオーバが行われることを確認しました (6) ノード障害時に正しく切り替わるか 稼動系ノードでサーバの強制再起動を行った際に 待機系側が異常として検知しフェル オーバが行われることを確認しました (7) スプリットブレインを回避出来るか コミュニケーションパス全断時に 待機系ノードがリザベーションを奪取し稼動系ノード が強制再起動を行うことを確認しました (8) iscsi パスが抜線されたことを検知するかどうか iscsi 接続に利用している NIC を 1 つ停止させ 停止したことを OS が認識することを確 認しました 17

18 (9) iscsi パスが再接続された場合に検知するか 停止させた iscsi 接続に利用している NIC を起動させ OS が認識することを確認しま した (10) 24 時間のランニングテストで正しく動作するか 24 時間以上 I/O テストが問題なく稼働することを確認しました 7 HP StoreVirtual VSA の機能確認 4 構成情報の環境で HP StoreVirtual VSA の以下の機能について確認を行っております (1) Volume の設定を Thin Provisioning から Full Provisioning の変更 CMC 上から LifeKeeper で保護しているボリュームを Thin Provisioning から Full Provisioning に変更し HP StoreVirtual VSA で正常動作することを確認しました (2) Volume の領域を拡張 CMC 上から LifeKeeper で保護しているボリュームの領域を拡張し OS が拡張された領 域を認識できることを確認しました (3) Snapshot の作成と削除 CMC 上から LifeKeeper で保護しているボリュームの領域の Snapshot を作成し Snapshot を削除し HP StoreVirtual VSA で正常動作することを確認しました (4) Network RAID Level を変更 CMC 上から LifeKeeper で保護しているボリュームの領域のデータ保護レベルを変更し HP StoreVirtual VSA で正常動作することを確認しました (5) HP StoreVirtual VSA の NIC Down 時の動作 3 台で構成している HP StoreVirtual VSA の 1 台の NIC を停止させた際に OS 上からフゔ ルシステムリソースの領域にゕクセスできることを確認しました 18

19 (6) HP StoreVirtual VSA のシャットダウン時の動作 3 台で構成している HP StoreVirtual VSA の 1 台をシャットダウンさせた際に OS 上か らはフゔルシステムリソースの領域にゕクセスできることを確認しました 8 参考資料 SIOS Technical Documentation LifeKeeper UserSite LifeKeeper for Linux スタートアップガイド (v8.2 用 ) StoreVirtual (LeftHand) Storage x.html#sv4000 HP StoreVirtual VSA 簡易版ンストールガド LeftHand Storage ユーザーガド LeftHand Storage VSA ンストールおよび構成ガド 19

20 9 構成例 LifeKeeper と HP StoreVirtual シリーズを一緒にご利用される際の構成例を以下に示しま す 構成例 1 別々の物理サーバ上の VMware に HP StoreVirtual VSA をンストールし 3 つ HP StoreVirtual VSA を 1 つのストレージプールとして利用する構成です 本構成を組むことで どれか一つの HP StoreVirtual VSA が停止してもサービスを提供し続けることが可能です なお VMware 上に LifeKeeper を構築した場合 ESXi 側でマルチパスの設定を行う必要があります 20

21 構成例 2 HP StoreVirtual 4xxx を利用した構成です ノード単位でコントローラーと iscsi の I/O モジュールを持っているため 高性能なストレージとして利用でき ボリュームを後から拡張できるスケールゕウト型の構成です また すべてのサーバが物理的に独立しているため 構成例 1 よりも耐障害性があります なお LifeKeeper を物理サーバ上に構築した場合 HP StoreVirtual とのマルチパス接続に Device Mapper Multipath を使用します VMware 上に LifeKeeper を構築した場合 ESXi 側でマルチパスの設定を行う必要があります 21

22 10 謝辞 検証に際して 日本 HP 社様より HP StoreVirtual VSA の利用を承認頂きました また 環境構築や設定 テストケースの作成 に際して多大なるご支援を頂きました 御礼を申し上げます HP StoreVirtual VSA 22

23 11 お問い合わせ 本書の記載内容についてのお問い合わせ先 LifeKeeper 製品の導入を検討中のお客様 弊社パートナー営業部までお問い合わせください お問い合わせメールフォーム LifeKeeper 製品をご購入済みのお客様 弊社 LifeKeeper 製品サポート窓口までお問い合わせください 購入後のお問い合わせ 23

24 12 免責事項 本書に記載された情報は予告なしに変更 削除される場合があります 最新のものをご確認ください 本書に記載された情報は 全て慎重に作成され 記載されていますが 本書をもって その妥当性や正確性についていかなる種類の保証もするものではありません 本書に含まれた誤りに起因して 本書の利用者に生じた損害については サオステクノロジー株式会社は一切の責任を負うものではありません 第三者による本書の記載事項の変更 削除 ホームページ及び本書等に対する不正なゕクセス その他第三者の行為により本書の利用者に生じた一切の損害について サオステクノロジー株式会社は一切の責任を負うものではありません システム障害などの原因によりメールフォームからのお問い合せが届かず または延着する場合がありますので あらかじめご了承ください お問い合せの不着及び延着に関し サオステクノロジー株式会社は一切の責任を負うものではありません 著作権 本書に記載されているコンテンツ ( 情報 資料 画像等種類を問わず ) に関する知的財産権は サオステクノロジー株式会社に帰属します その全部 一部を問わず サオステクノロジー株式会社の許可なく本書を複製 転用 引用 公衆への送信 販売 翻案その他の二次利用をすることはいずれも禁止されます またコンテンツの改変 削除についても一切認められません 本書では 製品名 ロゴなど 他社が保有する商標もしくは登録商標を使用しています サオステクノロジー株式会社 東京都港区南麻布 サオスビル 電話 : FAX: URL: 24