コンテナを止めるな! 〜PacemakerによるコンテナHAクラスタリングとKubernetesとの違いとは

Size: px

Start display at page:

Download "コンテナを止めるな! 〜PacemakerによるコンテナHAクラスタリングとKubernetesとの違いとは"

みさきかわらい
5 years ago
Views:

2 自己紹介名前: 森啓介 (Keisuke MORI)Keisuke MORI)) Linux-HA Japanプロジェクト関連の活動の違いとは活動 Pacemakerリポジトリパッケージの違いとはリリース ClusterLabs プロジェクトの違いとはコミッタ Pacemaker resource-agents などHAクラスタ関連の活動の違いとは開発コミュニティコミュニティ本業普段の業務の違いとは業務: NTT OSSセンタ NTTグとループ内におけるにおけるコンテナPacemaker/Heartbeatの違いとは導入支援サポートサポートバグと報告サポートパッチ作成などによる作成などによるなどによるコンテナNTTから開発コミュニティへのフィードバック貢献開発コミュニティコミュニティへの違いとはフィードバックサポート貢献 2 2

3 もくじ PacemakerとはオーケストレーションツールによるコンテナコンテナHA Pacemaker bundle 機能によるコンテナによるコンテナコンテナHA 今後の動向の違いとは動向 3 3

4 もくじ PacemakerとはオーケストレーションツールによるコンテナコンテナHA Pacemaker bundle 機能によるコンテナによるコンテナコンテナHA 今後の動向の違いとは動向 4 4

5 Pacemaker なにそれおいしいのなにそれおいしいの違いとはなにそれおいしいの Pacemakerとはオープンソースの違いとはHAクラスタソフトウェアですです High Availability = 高可用性サービスをできるコンテナ限りり止めないこと止めないことめないこと 5 5

6 Pacemakerの違いとは概要サーバサポートアですプリケーションの違いとは故障監視サービスの監視制御の監視制御監視制御サーバ間の監視制御間の監視制御の監視制御監視制御サーバ#2 サーバ#1 6 6

7 Pacemakerの違いとは概要故障検知時自動的にフェイルオーバにフェイルオーバダウンタイムの最小化の違いとは最小化 STONI)THによるコンテナデータの違いとは安全性確保サービスの監視制御の監視制御フェイルオーバ間の監視制御 STONITH(強制電源断) サーバ#2 サーバ#1 7 7

8 Pacemakerを詳しく知りたかったらしく知りたかったら開発コミュニティへのフィードバック貢献 Linux-HA Japan プロジェクト 2F 206F 2F 20606教室にてデモ展示中にてデモ展示中デモ展示中展示中 8 8

9 もくじ PacemakerとはオーケストレーションツールによるコンテナコンテナHA Pacemaker bundle 機能によるコンテナによるコンテナコンテナHA 今後の動向の違いとは動向 9 9

10 コンテナが止まったそのときどうなる止めないことまったその違いとはときどうなるコンテナなにそれおいしいのもう時代はコンテナクラウドでしょー時代はコンテナクラウドでしょーはコンテナクラウドでしょーコンテナクラウドでしょーでしょー Kubernetesがあるから大丈夫大丈夫セルフヒーリング機能は確かに便利ね機能は確かに便利ねはコンテナクラウドでしょー確かに便利ねかに便利ねねでもPodの種類にも気をつけて種類にも気をつけてにも気をつけてをつけてデモ展示中 10 10

11 Kubernetes セルフヒーリングと機能によるコンテナ master worker1 worker2 レプリカ数の維持数の維持の監視制御維持 Pod Podの監視制御再起動 Pod 物理ネットワークネットワークマスの監視制御ターからの監視制御監視共有ストレージストレージ 11 11

12 Statelessコンテナと Statefulコンテナ Statelessコンテナ Deployment, ReplicaSet 起動時は常に同じ状態に同じ状態じ状態データを保存する必要はなするコンテナ必要はない必要なだけいくつでも起動すればよい Webサーバアですプリケーションサーバなど Statefulコンテナ StatefulSet 起動時は止めないこと前回と同じと同じ状態じデータを持った状態で起動った状態で起動データの違いとは永続化と共有ストレージ別の物理サーバでも同じデータの違いとは物理ネットワークサーバでも同じ状態じデータ個々の識別が必要の違いとは識別の物理サーバでも同じデータが止まったそのときどうなる必要再起動しても同じ状態じデータデータベースサーバファイルサーバなど 12 12

13 Deployment vs. StatefulSet サービス継続性の違いとは違いとはい master worker1 worker2 Deployment StatefulSet 物理ネットワークネットワークネットワーク接続断が発生してが止まったそのときどうなる発コミュニティ生してしてネットワーク接続断が発生してが止まったそのときどうなる発コミュニティ生してして監視処理ネットワークが止まったそのときどうなるタイムの最小化アですウトした監視処理ネットワークが止まったそのときどうなるタイムの最小化アですウトした共有ストレージストレージ 13 13

14 Deployment vs. StatefulSet サービス継続性の違いとは違いとはい master worker1 worker2 Deployment StatefulSet 物理ネットワークネットワークデータベースが止まったそのときどうなるフェイルØωØverωØverØωØververしないニャデッドロックだね共有ストレージストレージ 14 14

15 Deployment vs. StatefulSet サービス継続性の違いとは違いとはい master worker1 worker2 Deployment StatefulSet 物理ネットワークネットワーク Deployment Deploymentは他のワーカーノードで再起動するは他のワーカーノードで再起動するの違いとはの違いとはワーカーノードで再起動するコンテナワーカーノードで再起動するコンテナ StatefulSet StatefulSetは再起動されずコンテナは止めないことまるコンテナは再起動されずコンテナは止めないことまるコンテナ共有ストレージストレージ 15 15

16 デモ 1 Kubernetes の違いとは実際の動作の違いとは動作 16 16

17 デモ 1: 初期状態(Keisuke MORI)ノード) osc2018tk-demo]# NAME STATUS ROLES master Ready master worker1 Ready <none> worker2 Ready <none> osc2018tk-demo]# kubectl get nodes AGE VERSION 4d v d v d v ３ノード構成などによる３ノード構成などによる全てReady状態全てReady状態 17 17

18 デモ 1: 初期状態(Keisuke MORI)Pod) httpdは両ノードで起動ノードで起動 httpdは両ノードで起動ノードで起動 postgresはworker1で起動 postgresはworker1で起動 osc2018tk-demo]# kubectl get pods -o wide NAME READY STATUS RESTARTS AGE httpd-5f9cf547cc-dfsqn 1/1 Running 0 8m httpd-5f9cf547cc-pc7s2 1/1 Running 0 30s postgres-0 1/1 Running 0 46s [root@master osc2018tk-demo]# kubectl get deployments NAME DESIRED CURRENT UP-TO-DATE AVAILABLE AGE httpd d [root@master osc2018tk-demo]# kubectl get statefulsets NAME DESIRED CURRENT AGE postgres 1 1 4d [root@master osc2018tk-demo]# IP NODE worker2 worker1 worker1 httpdはdeployment httpdはdeployment postgresはstatefulset postgresはstatefulset 18 18

19 デモ 1: ネットワーク切断が発生しての違いとは疑似故障 worker1の違いとは全ての違いとはアですダプターの違いとは worker1の違いとは全ての違いとはアですダプターの違いとはケーブル接続をオフにするコンテナケーブル接続をオフにするコンテナ 19 19

20 デモ 1: ネットワーク切断が発生して後の動向の違いとは状態 worker1はnotready状態となるコンテナ worker1はnotready状態となるコンテナ (Keisuke MORI)デフォルトでは40秒後の動向) (Keisuke MORI)デフォルトでは40秒後の動向) Every 1.0s: kubectl get node; echo ; kubectl get pods -o wide NAME master worker1 worker2 STATUS Ready NotReady Ready ROLES master <none> <none> NAME httpd-5f9cf547cc-chk6c httpd-5f9cf547cc-dfsqn httpd-5f9cf547cc-pc7s2 postgres-0 READY 1/1 1/1 1/1 1/1 AGE 4d 4d 4d Wed Oct 24 08:35: VERSION v v v STATUS Running Running Unknown Unknown RESTARTS AGE 7s 10m 2m 2m IP NODE worker2 worker2 worker1 worker1 worker1上のの違いとはpodは Unknown 状態となるコンテナ worker1上のの違いとはpodは Unknown 状態となるコンテナ httpdはworker2で２つ起動するコンテナ httpdはworker2で２つ起動するコンテナ postgres はworker2では起動しない postgres はworker2では起動しない (Keisuke MORI)デフォルトでは5分後の動向) (Keisuke MORI)デフォルトでは5分後の動向) 20 20

21 なぜフェイルオーバしないのかフェイルオーバしないの違いとはか? コンテナの違いとは二重起動によるコンテナデータ破損を防ぐためですを防ぐためですぐためですコンテナ状態: Unknown まだ動いてるコンテナかも? コンテナが止まったそのときどうなる止めないこと確実に停止めないことしたことを確認できない限り再起動は危険できない限りり再起動は危険でもさあ Q.でもネットワークが止まったそのときどうなる切れてたら開発コミュニティへのフィードバック貢献データも書き込めないから安全だよねき込めないから安全だよねめないから開発コミュニティへのフィードバック貢献安全だよねなにそれおいしいのネットワーク通信が復旧するとそこで二重書き込みが発生しますが止まったそのときどうなる復旧するとそこで二重書き込みが発生しますするコンテナとそこで二重書き込めないから安全だよねき込めないから安全だよねみが止まったそのときどうなる発コミュニティ生してしますネットワークスイッチ作成などによるの違いとは一時的にフェイルオーバな故障などではよくあるコンテナシナリオ監視用とストレージ用で別の物理サーバでも同じデータ々の識別が必要の違いとはネットワークであるコンテナ構成などによるもあります SAN経由ストレージ専用ネットワーク(Keisuke MORI)トラフィックセキュリティ上のの違いとは理ネットワーク由など) Q.物理ネットワークサーバの違いとは電源が落ちたらさすがに再起動するよねが止まったそのときどうなる落ちたらさすがに再起動するよねちたら開発コミュニティへのフィードバック貢献さすが止まったそのときどうなるに再起動するコンテナよねなにそれおいしいのしません物理ネットワークサーバの違いとは電源が落ちたらさすがに再起動するよね断が発生してとネットワーク通信が復旧するとそこで二重書き込みが発生します断が発生して(Keisuke MORI)通信が復旧するとそこで二重書き込みが発生します経路の故障の違いとは故障)は区別の物理サーバでも同じデータが止まったそのときどうなるつかないから開発コミュニティへのフィードバック貢献ですどちら開発コミュニティへのフィードバック貢献も止めないこと監視タイムの最小化アですウト(Keisuke MORI)応答なしなし) としか検知できない 21 21

22 Kubernetesの違いとはサービス継続性の違いとは留意点一般的にフェイルオーバなデータベースサーバは StatefulSet とするコンテナ必要が止まったそのときどうなるあるコンテナデータの違いとは永続化の違いとはためインスタンスごとの違いとは識別の物理サーバでも同じデータの違いとはため StatefulSet は物理ネットワークサーバの違いとは故障に対しては自動的にサーしては自動的にフェイルオーバにサービス継続を行うことはできないうことはできない Podの違いとは二重起動によるコンテナデータ破損を防ぐためですを防ぐためですぐため 22 22

23 コンテナが止まったそのときどうなる止めないことまったその違いとはときどうなるコンテナなにそれおいしいのもう時代はコンテナクラウドでしょー時代はコンテナクラウドでしょーはコンテナクラウドでしょーコンテナクラウドでしょーでしょー Kubernetesがあるから大丈夫大丈夫セルフヒーリング機能は確かに便利ね機能は確かに便利ねはコンテナクラウドでしょー確かに便利ねかに便利ねねでもPodの種類にも気をつけて種類にも気をつけてにも気をつけてをつけてデモ展示中 StatefulSetはコンテナクラウドでしょー物理サーバが故障サーバが故障が故障したら大丈夫止まっちゃうんだよまっちゃう時代はコンテナクラウドでしょーんだよ大事なデータが壊れないようになデータが壊れないようにデータが壊れないようにが壊れないようにれなデータが壊れないようにいよう時代はコンテナクラウドでしょーに守っているんだねってデモ展示中いるんだね! 23 23

24 物理ネットワークサーバではどうやってたの違いとは? でも物理サーバが故障サーバが故障の種類にも気をつけてHAクラスタが壊れないようにはコンテナクラウドでしょーフェイルオーバが故障できてデモ展示中たよねなデータが壊れないようにんでそれはコンテナクラウドでしょー Pacemaker の種類にも気をつけて STONITH機能は確かに便利ねの種類にも気をつけておかげね 24 24

25 物理ネットワークサーバではどうやってたの違いとは? STONI)TH機能によるコンテナ(Keisuke MORI)フェンシングと) I)PMI)経由でサーバの違いとは電源が落ちたらさすがに再起動するよね断が発生してを行うことはできないう確実にサーバを停止めないことさせるコンテナことでデータの違いとは安全を確保サービスの監視制御の監視制御フェイルオーバ間の監視制御 I)PMI)制御機能によるコンテナ STONITH(強制電源断) サーバ#1 サーバ#2 IPMIによるコンテナ電源が落ちたらさすがに再起動するよね断が発生して以外に共有ディスク接続を利用した方式などもありますに共有ストレージディスク接続を利用した方式などもありますなどもあります 25 25

26 STONI)TH機能によるコンテナ(Keisuke MORI)フェンシングと)とは? フェンスを立てて隔離することてて隔離することするコンテナこと 26 26

27 余談: 世界で一番笑えるジョークで一番笑えるジョークえるコンテナジョーク狩りに出かけたハンターからの救急電話りに出かけたハンターからの救急電話かけたハンターから開発コミュニティへのフィードバック貢献の違いとは救急電話止めないこと大変だだ! 友達が木から落ちて死んでしまったが止まったそのときどうなる木から落ちて死んでしまったから開発コミュニティへのフィードバック貢献落ちたらさすがに再起動するよねちて死んでしまったんでしまった! 止めないこと落ちたらさすがに再起動するよねち着いてまずは彼が本当に死んでいるかどうか確かめていてまずは彼が本当に死んでいるかどうか確かめてが止まったそのときどうなる本当に死んでいるかどうか確かめてに死んでしまったんでいるコンテナかどうか確かめて止めないことバーン!(Keisuke MORI)銃声) 止めないことOK 死んでしまったんでるコンテナ次はは? 出かけたハンターからの救急電話典 World's funniest joke ハートフォードシャー大学リチ作成などによるャードサポートワイズマン博士(Keisuke MORI)2002年) Make sure he is dead. 死んでしまったんでるコンテナかどうかを確かめるコンテナ (気絶しているだけかもしれない獲物をしているコンテナだけかもしれない獲物を) 確実に死んでしまったんだ状態にするコンテナこれってSTONITHじゃね? 27 27

故障モデル出かけたハンターからの救急電話典: 止めないこと分散システムについて語らせてくれ熊崎宏樹システムの最小化について語らせてくれ熊崎宏樹ら開発コミュニティへのフィードバック貢献せてくれ

29 故障モデル実際の動作の違いとは故障例他のワーカーノードで再起動するノードで起動した場合のの違いとはデータの違いとは安全性監視タイムの最小化アですウト発コミュニティ生して時の違いとは判断が発生して故障なし Fail-Stop 物理ネットワークサーバの違いとは電源が落ちたらさすがに再起動するよね断が発生してカーネルクラッシュ安全どっち? 区別の物理サーバでも同じデータが止まったそのときどうなるつかない! Crash-Recovery Byzantine ネットワーク通信が復旧するとそこで二重書き込みが発生します断が発生して異常に同じ状態な高負荷危険クラッキングとなど(通常に同じ状態は対しては自動的にサー応は想定しないしない) どっち? どっちもだよ安全の違いとはためには他のワーカーノードで再起動するの違いとはノードで安全の違いとはためには他のワーカーノードで再起動するの違いとはノードで起動してはいけない! 起動してはいけない! 29 29

30 故障モデル実際の動作の違いとは故障例他のワーカーノードで再起動するノードで起動した場合のの違いとはデータの違いとは安全性 STONI)TH 実行うことはできない後の動向の違いとは判断が発生して故障なし Fail-Stop Crash-Recovery Byzantine 物理ネットワークサーバの違いとは電源が落ちたらさすがに再起動するよね断が発生してカーネルクラッシュネットワーク通信が復旧するとそこで二重書き込みが発生します断が発生して異常に同じ状態な高負荷安全安全危険クラッキングとなど(通常に同じ状態は対しては自動的にサー応は想定しないしない) STONI)THの違いとは実行うことはできないにより確実に安全と言えるえるコンテナ状態に確定しないさせるコンテナ 30 30

31 物理ネットワークサーバではどうやってたの違いとは? でも物理サーバが故障サーバが故障の種類にも気をつけてHAクラスタが壊れないようにはコンテナクラウドでしょーフェイルオーバが故障できてデモ展示中たよねなデータが壊れないようにんでそれはコンテナクラウドでしょー Pacemaker の種類にも気をつけて STONITH機能は確かに便利ねの種類にも気をつけておかげねじゃあそれを使ってコンテナをってデモ展示中コンテナを止まっちゃうんだよめなデータが壊れないようにいよう時代はコンテナクラウドでしょーにしちゃおう時代はコンテナクラウドでしょーそこで Pacemaker bundle 機能は確かに便利ねの種類にも気をつけて出番よよ 31 31

32 もくじ PacemakerとはオーケストレーションツールによるコンテナコンテナHA Pacemaker bundle 機能によるコンテナによるコンテナコンテナHA 今後の動向の違いとは動向 32 32

33 Pacemaker bundle とは? Pacemaker でコンテナHAを実現する新機能するコンテナ新機能によるコンテナコンテナ管理ネットワークに必要な機能によるコンテナをまとめたPacemakerの違いとはリソースコンテナおよびコンテナ内で起動するアプリケーションの起動終了監コンテナ内におけるで起動するコンテナアですプリケーションの違いとは起動サポート終了サポート監視が止まったそのときどうなる可能によるコンテナ STONI)TH機能によるコンテナや既存する必要はなの違いとはリソースエージェント(Keisuke MORI)RA)と合のわせて利用可能によるコンテナ Pacemaker 以降で利用可能で利用可能によるコンテナ対しては自動的にサー応コンテナランタイムの最小化コンテナランタイムの最小化対しては自動的にサー応Pacemakerバージョン Docker 以降で利用可能 rkt 以降で利用可能 podman (Keisuke MORI)CRI)-O) 開発コミュニティ中(Keisuke MORI)2.0.*以降で利用可能予定しない) 34 34

34 Pacemaker bundle の違いとはアですーキテクチ作成などによるャレプリカ数の維持数の維持の監視制御制御リソースエージェントリソースエージェント Pacemaker-remote Pacemaker-remote 仮想IP 仮想IP リソースエージェント Pacemaker-remote 仮想IP サービスの監視制御の監視制御起動監視コンテナの起動制御の監視制御起動制御 bundle bundle 35 35

35 bundle 設定しない例(Keisuke MORI)cib.xml) <bundle id="httpd-bundle"> <docker image="pcmktest:http" replicas= 2" replicas-per-host= 2" options="--log-driver=journald"/> <network ip-range-start=" " host-interface="eth1" host-netmask="24"> <port-mapping id="httpd-port" port="80"/> </network> <storage> <storage-mapping id="httpd-root" source-dir-root="/var/local/containers" target-dir="/var/www/html" options="rw"/> <storage-mapping id="httpd-logs" source-dir-root="/var/log/pacemaker/bundles" target-dir="/etc/httpd/logs" options="rw"/> </storage> <primitive class="ocf" id="httpd" provider="heartbeat" type="apache"> <operations> <op name="start" interval="0s" timeout="60s" on-fail="restart" id="httpd-start-0s"/> <op name="monitor" interval="10s" timeout="60s" on-fail="restart" id="httpd-monitor-10s"/> <op name="stop" interval="0s" timeout="60s" on-fail="block" id="httpd-stop-0s"/> </operations> </primitive> </bundle> bundleに関するコンテナ詳しく知りたかったら細についてはについては OSC 2018 Kyoto セミナー資料を参照を参照

36 Pacemaker bundle とSTONI)THによるコンテナコンテナHA コンテナ bundleリソースコンテナ bundleリソース STONI)THリソースコンテナ STONI)THリソースコンテナ external/ipmi external/ipmi bundle bundle I)PMI)制御機能によるコンテナ I)PMI)制御機能によるコンテナ物理ネットワークネットワーク共有ストレージストレージ 37 37

37 Pacemaker bundle とSTONI)THによるコンテナコンテナHA コンテナ bundleリソースコンテナ bundleリソース bundle STONI)THリソースコンテナ STONI)THリソースコンテナ external/ipmi external/ipmi IPMIによる電源断電源断 I)PMI)制御機能によるコンテナ bundle I)PMI)制御機能によるコンテナ物理ネットワークネットワーク共有ストレージストレージ 38 38

38 Pacemaker bundle とSTONI)THによるコンテナコンテナHA 安全にフェイルオーバにフェイルオーバ間の監視制御コンテナ bundleリソースコンテナ bundleリソース bundle STONI)THリソースコンテナ STONI)THリソースコンテナ external/ipmi external/ipmi IPMIによる電源断電源断 I)PMI)制御機能によるコンテナ bundle I)PMI)制御機能によるコンテナ物理ネットワークネットワーク共有ストレージストレージ 39 39

39 Pacemaker bundle コンテナHA構成などによる例 crm_mon 出かけたハンターからの救急電話力例 Online: [ worker1 worker2 ] GuestOnline: [ httpd-bundle-0@worker1 httpd-bundle-1@worker2 postgres-bundle-0@worker1 ] Full list of resources: Docker container: postgres-bundle [ :5000/pcmkdemo/postgres:0.1] postgres-bundle-0 ( ) (ocf::heartbeat:pgsql): Started worker1 Docker container set: httpd-bundle [ :5000/pcmkdemo/httpd:0.1] (unique) httpd-bundle-0 ( ) (ocf::heartbeat:apache): Started worker1 httpd-bundle-1 ( ) (ocf::heartbeat:apache): Started worker2 stonith-worker2 (stonith:external/ipmi): Started worker1 stonith-worker1 (stonith:external/ipmi): Started worker2 bundleリソースコンテナ STONI)THリソースコンテナ 40 40

40 デモ Pacemaker bundle vs. Kubernetes 41 41

41 Pacemaker bundle デモ環境構成などによる worker1 master worker2 Pacemaker クラスタ Kubernetes クラスタ c c 物理ネットワークネットワークネットワーク接続断が発生してが止まったそのときどうなる発コミュニティ生してしたネットワーク接続断が発生してが止まったそのときどうなる発コミュニティ生してした共有ストレージストレージ (Keisuke MORI)NFS masterに同じ状態居) 42 42

Pacemaker bundle デモ実行うことはできない結果(Keisuke MORI)予定しない) worker1 master worker2 Pacemaker クラスタ Kubernetes クラスタ c c 物理ネットワークネットワーク STONI)TH機能によるコンテナによりworker1は電源が落ちたらさすがに再起動するよね

42 Pacemaker bundle デモ実行うことはできない結果(Keisuke MORI)予定しない) worker1 master worker2 Pacemaker クラスタ Kubernetes クラスタ c c 物理ネットワークネットワーク STONI)TH機能によるコンテナによりworker1は電源が落ちたらさすがに再起動するよね STONI)TH機能によるコンテナによりworker1は電源が落ちたらさすがに再起動するよね断が発生して断が発生して状態となるコンテナ状態となるコンテナ Pacemakerクラスタは全コンテナが止まったそのときどうなる Pacemakerクラスタは全コンテナが止まったそのときどうなるフフェイルオーバェイルオーバ Kubernetesクラスタはデータベースが止まったそのときどうなる Kubernetesクラスタはデータベースが止まったそのときどうなる停停止めないこと止めないこと共有ストレージストレージ (Keisuke MORI)NFS masterに同じ状態居) 43 43

43 デモ 2: 初期状態(Keisuke MORI)Pacemaker) httpdは両ノードで起動ノードで起動 httpdは両ノードで起動ノードで起動 postgresはworker1で起動 postgresはworker1で起動 Online: [ worker1 worker2 ] GuestOnline: [ httpd-bundle-0@worker1 httpd-bundle-1@worker2 postgres-bundle-0@worker1 ] Full list of resources: Docker container: postgres-bundle [ :5000/pcmkdemo/postgres:0.1] postgres-bundle-0 ( ) (ocf::heartbeat:pgsql): Started worker1 Docker container set: httpd-bundle [ :5000/pcmkdemo/httpd:0.1] (unique) httpd-bundle-0 ( ) (ocf::heartbeat:apache): Started worker1 httpd-bundle-1 ( ) (ocf::heartbeat:apache): Started worker2 stonith-worker2 (stonith:external/ipmi): Started worker1 stonith-worker1 (stonith:external/ipmi): Started worker

44 デモ 2: 初期状態(Keisuke MORI)Kubernetes) httpdは両ノードで起動ノードで起動 httpdは両ノードで起動ノードで起動 postgresはworker1で起動 postgresはworker1で起動 Every 1.0s: kubectl get node; echo ; kubectl get pods -o wide NAME master worker1 worker2 STATUS Ready Ready Ready ROLES master <none> <none> NAME httpd-5f9cf547cc-dfsqn httpd-5f9cf547cc-tn9wd postgres-0 AGE 4d 4d 4d READY 1/1 1/1 1/1 Wed Oct 24 08:39: VERSION v v v STATUS Running Running Running RESTARTS AGE 13m 2m 2m IP NODE worker2 worker1 worker

45 デモ 2: ネットワーク切断が発生しての違いとは疑似故障 worker1の違いとは全ての違いとはアですダプターの違いとは worker1の違いとは全ての違いとはアですダプターの違いとはケーブル接続をオフにするコンテナケーブル接続をオフにするコンテナ 46 46

46 デモ 2: ネットワーク切断が発生して後の動向の違いとは状態(Keisuke MORI)故障サーバ) worker1はstoni)th機能によるコンテナにより worker1はstoni)th機能によるコンテナにより電源が落ちたらさすがに再起動するよねオフとなるコンテナ電源が落ちたらさすがに再起動するよねオフとなるコンテナ 47 47

47 デモ 2: マシン電源が落ちたらさすがに再起動するよねオフ後の動向の違いとは状態(Keisuke MORI)Pacemaker) Online: [ worker2 ] OFFLINE: [ worker1 ] GuestOnline: [ httpd-bundle-0@worker2 httpd-bundle-1@worker2 postgres-bundle-0@worker2 ] Full list of resources: Docker container: postgres-bundle [ :5000/pcmkdemo/postgres:0.1] postgres-bundle-0 ( ) (ocf::heartbeat:pgsql): Started worker2 Docker container set: httpd-bundle [ :5000/pcmkdemo/httpd:0.1] (unique) httpd-bundle-0 ( ) (ocf::heartbeat:apache): Started worker2 httpd-bundle-1 ( ) (ocf::heartbeat:apache): Started worker2 stonith-worker2 (stonith:external/ipmi): Stopped stonith-worker1 (stonith:external/ipmi): Started worker2 httpdはworker2で２つ起動するコンテナ httpdはworker2で２つ起動するコンテナ postgresもworker2で再起動するコンテナ postgresもworker2で再起動するコンテナ 48 48

48 デモ 2: マシン電源が落ちたらさすがに再起動するよねオフ後の動向の違いとは状態(Keisuke MORI)Kubernetes) Every 1.0s: kubectl get node; echo ; kubectl get pods -o wide NAME master worker1 worker2 STATUS Ready NotReady Ready ROLES master <none> <none> NAME httpd-5f9cf547cc-9qgh2 httpd-5f9cf547cc-dfsqn httpd-5f9cf547cc-tn9wd postgres-0 READY 1/1 1/1 1/1 1/1 AGE 4d 4d 4d Wed Oct 24 08:41: VERSION v v v STATUS Running Running Unknown Unknown RESTARTS AGE 1m 16m 5m 5m IP NODE worker2 worker2 worker1 worker1 worker1上のの違いとはpodは Unknown 状態となるコンテナ worker1上のの違いとはpodは Unknown 状態となるコンテナ httpdはworker2で２つ起動するコンテナ httpdはworker2で２つ起動するコンテナ postgres はworker2では起動しない postgres はworker2では起動しない (Keisuke MORI)ネットワーク切断が発生して時と同じ状態じ結果) (Keisuke MORI)ネットワーク切断が発生して時と同じ状態じ結果) 49 49

49 もくじ PacemakerとはオーケストレーションツールによるコンテナコンテナHA Pacemaker bundle 機能によるコンテナによるコンテナコンテナHA 今後の動向の違いとは動向 50 50

50 Pacemaker bundle の違いとは現する新機能状と今後の動向 Pacemaker によるコンテナコンテナHAが止まったそのときどうなる可能によるコンテナになった! とは言えるえ bundle機能によるコンテナもまだまだ発コミュニティ展途上のユーザインタフェースの違いとは対しては自動的にサー応 crmshは開発コミュニティ最新版のみ対応の違いとはみ対しては自動的にサー応 pcs の違いとは方が止まったそのときどうなる対しては自動的にサー応が止まったそのときどうなる早いいドキュメントサポート動作仕様の詳細の違いとは詳しく知りたかったら細についてはコンテナイメージの違いとは要件サポート作り方詳しく知りたかったら細については設定しないや故障解析方法などの情報などの違いとは情報コンテナ技術自体の発展の違いとは発コミュニティ展 podman(keisuke MORI)CRI)-O)対しては自動的にサー応 Dockerの違いとは今後の動向は? 実績サポートサポート Red Hat 社 HA add-on では Technology Preview Red Hat OpenStack Platform 12以降で利用可能の違いとはユースケースの違いとはみフルサポートオーケストレーションツールに取って代わるものではないって代わるものではないわるコンテナもの違いとはではない 51 51

51 Pacemaker bundle の違いとは利用シーンオーケストレーションツールが止まったそのときどうなる適している利用シーンしているコンテナ利用シーン DevOps, CI)/CD 頻繁なリリース大規模なスケーリングなリリース大規模なスケーリングなスケーリングと物理ネットワーク故障はマネージドサービスの違いとはSLA Pacemaker bundle が止まったそのときどうなる適している利用シーンしているコンテナ利用シーン物理ネットワーク環境と同じ状態様の詳細の違いとはHA運用が止まったそのときどうなる必要かつコンテナの違いとはメリットが止まったそのときどうなる欲しい場合しい場合のアですプリケーションの違いとはバージョンアですップが止まったそのときどうなる容易バージョン依存する必要はなが止まったそのときどうなる異なるコンテナ複数のアプリケーションの同居の違いとはアですプリケーションの違いとは同じ状態居コンテナと非コンテナアプリケーションの同居コンテナアですプリケーションの違いとは同じ状態居(Keisuke MORI)性能によるコンテナ上のの違いとは理ネットワーク由など) 比較的にフェイルオーバ小規模なスケーリングなコンテナHAクラスタ信が復旧するとそこで二重書き込みが発生します頼性を求められるオンプレミスシステムめら開発コミュニティへのフィードバック貢献れるコンテナオンプレミスシステムの最小化物理ネットワーク故障に対しては自動的にサーするコンテナ運用責任サポート説明責任を求められるオンプレミスシステムめら開発コミュニティへのフィードバック貢献れるコンテナようなシステムの最小化 Pacemaker bundle の違いとは利用実績例 Red Hat OpenStack Platform 12以降で利用可能コントローラノードの違いとは各種ミドルウェアのコンテナ化ミドルウェアですの違いとはコンテナ化 HAProxy, RabbitMQ, Galera, redis 52 52

Linux-HA Japan の違いとは今後の動向の違いとは活動 Pacemaker-1.1.19-1.1 リポジトリパッケージ近日リリース予定しない!

1の違いとはリリースはありません (Keisuke MORI)一部の利用方法で懸念事項が存在したための違いとは利用方法などの情報で懸念事項が存在したためが止まったそのときどうなる存する必要はな在したため

52 Linux-HA Japan の違いとは今後の動向の違いとは活動 Pacemaker リポジトリパッケージ近日リリース予定しない! PostgreSQL 11以降で利用可能対しては自動的にサー応など本日の違いとは bundle の違いとはデモでも使用しました! なおバージョンの違いとはリリースはありません (Keisuke MORI)一部の利用方法で懸念事項が存在したための違いとは利用方法などの情報で懸念事項が存在したためが止まったそのときどうなる存する必要はな在したためしたためでは解消済みですみです) 1.1.*系は今後も継続してメンテナンスしていきますは今後の動向も継続してメンテナンスしていきます Pacemaker-2.0以降で利用可能は RHEL 8 / CentOS 8 同じ状態梱版のみ対応と親和性の違いとは高い方式などもありますを検討中 53 53

53 参考資料を参照 (Keisuke MORI)1/2) 本日の違いとはデモ環境 (Keisuke MORI)README等準備中です) Pacemaker bundle 関連の活動 Bundle Walk-Through (Keisuke MORI)公式などもありますドキュメント) Red Hat OSP12 での違いとは利用事例 12/html/understanding_red_hat_openstack_platform_high_availability/ pacemaker#pacemaker-services STONI)TH関連の活動分散システムについて語らせてくれ熊崎宏樹システムの最小化について語らせてくれ熊崎宏樹ら開発コミュニティへのフィードバック貢献せてくれ世界で一番笑えるジョークで一番笑えるジョークえるコンテナジョーク (Keisuke MORI)wikipedia)

54 参考資料を参照 (Keisuke MORI)2/2) Kubernetes 関連の活動 StatefulSets (Keisuke MORI)公式などもありますドキュメント) StatefulSets の違いとは強制削除手順二重起動時の違いとはデータ喪失のリスクについても記載ありの違いとはリスクについても記載ありありノード停止めないこと時に StatefulSet が止まったそのときどうなる移動しないという issue 設計通りの違いとは動作であるコンテナとの違いとはコメントあり Kubernetes に対しては自動的にサーするコンテナ Fencing 機能によるコンテナの違いとは提案 Kubernetes の違いとはノード断が発生して検知の違いとはロジックパラメタチ作成などによるューニングと

55 おわり Pacemakerをこれから開発コミュニティへのフィードバック貢献もよろしくお願いしますいします! 56 56

Pacemakerでお手軽Dockerクラスタリング！

Pacemakerでお手軽Dockerクラスタリング！ Pacemaker でお手軽 Docker クラスタリング! 2018 年 8 月 4 日 OSC2018 Kyoto Linux-HA Japan 竹下雄大本日の内容 Pacemaker ってなに? Pacemaker でお手軽 Docker クラスタリング! Linux-HA Japan Project 2 Pacemaker ってなに? Linux-HA Japan Project 3 Pacemaker