運用統合ソフトウェア 2014/6/4 ミラクル リナックス株式会社 大和 一洋 Copyright MIRACLE LINUX CORPORATION All rights reserved

Transcription

1 運用統合ソフトウェア 2014/6/4 ミラクル リナックス株式会社 大和 一洋

2 自己紹介 大和 一洋 やまと かずひろ ミラクル リナックス勤務のエンジニア R&D部門リーダー Hatoholの開発を主導 その他 興味のある分野 低レイヤ技術 (kernel, C/C++, デバッグ) マルチメディア (動画/音声) 2

3 Hatoholの概要

4 Hatoholとは OSSの 運用統合ソフトウェアです 開発当初 昨年 統合ビューアと呼んでいました 4

5 統合ビューアのイメージ 複数の 監視サーバ に繋がる機器を 一括監視 6

6 統合ビューアの利点 既存の監視システムの変更不要 後からの追加 スケールアウト 可能 Nagiosにも対応 他ソフトも 要望あ れば対応検討可 hatohol Zabbix Zabbix 追加 Nagios 追加 10

7 運用統合ソフトウェアとしてのHatohol 様々なOSS運用ツールを統合し 商用並の統合管理のハブを目指すソフトウェア Nagios Zabbix イベント管理 Redmine インシデント管理 イベ 録 登 ト ント ン デ シ 通知 稼働監視 リソース監視 障害判定 アクション登録 アクション実行 イン 行 実 ン ショ 状況表示 イベント管理 イベント通知 自動起票 エスカレーション ステータス管理 ログ管理 リソース状況参照 問題 切り 分け アク 変更管理 問題管理 fluentd 7

8 OSSでの統合管理を目指す コスト削減のため 商用の統合管理ツール から乗り換えたい 死活監視 パフォーマンス管理 分散監視 分散管理 ログ管理 ジョブ管理 インシデント管理 OSSでは商用のような 統合管理ソフトはない 11

9 開発戦略 全部の開発は大変 個々のコンポーネント 既存OSSあり それらを積極的に活用 fluentd 変更通知 Nagios インシデント登録 イベント送信 Zabbix 実装済み イベント送信 イベント送信 実装済み リソース取得 hatohol Redmine 12

10 Hatohol開発プロジェクト

11 オープンな開発組織 Project Hatohol Hatoholの開発コミュニティ ミラクル リナックスの社員の有志を中心に設立 誰でもWelcome 世界中で使われるソフトウェアを目指す ドキュメントや議論 原則英語 最近日本語サイトの充実にも着手 これまでのコードコミット者の合計 10名以上 最近の活発な開発者 ミラクル リナックス 大和 中村 クリアコード 足永氏 13

12 OSSとしての変遷 時期 内容 2012/12/26 最初のコミット 試作着手 2013/06 レポジトリ一般公開 正式名称をHatoholに 2013/09/30 v0.1リリース - アクション機能追加 2013/12/27 v13.12リリース バージョンルール変更 - ユーザ機能追加 閲覧可能サーバの管理 - サーバの動的追加 削除対応 2014/03/31 v14.03リリース - ユーザー権限の詳細設定 - ホストグループ対応 15

13 ライセンス コードレポジトリ ライセンス GPLv2 コードレポジトリ GitHub 誰でも 手軽に新機能やバグフィックスの提案可能 Issue管理や解決への議論もこのサイト上で公開 16

14 リリースポリシー 3カ月ごとに定期リリース バージョン名はリリース時期がわかるようにした 13.12, 14.03など シンプルな機能でもリリース フィードバックをもらって改良 いまのところ 安定性より 機能追加やUIの改良を優先 17

15 アクティビティ コード 機能 をどんどん追加中 毎月500コミット前後 18

16 開発者は エンジョイしながら 夜 基本的に寝ます 週末 夜間は無理のない範囲で 53

17 Hatoholの技術的概要

18 Hatoholの構成 Hatohol Hatohol クライアント Hatohol サーバ 差分のみ取得 負荷小 21

19 Hatoholアーキテクチャの特長 必要なデータのみ収集 => 負荷 小 多数の監視サーバと連携可 APIを提供 標準UIの代わりにユーザーAPから利用可 監視停止を抑制する構造 1つの監視サーバとの通信が遅い 失敗 => 全体に影響しない 大量のアクションが発生 => バックグランドで数を制限し実行 22

20 Hatoholサーバー C++で開発 高速 きめ細かい制御容易 スレッド 子プロセス等 GLIB, libsoup, json-glib, MySQL, SQLite3など利用 入力 下記の方式で定期的にポーリング Zabbix API (REST) Naigos -> NDOUtils (MySQL protocol) 出力 REST API データ形式 JSON ユーザーアプリなどからも利用可能 22

21 Hatoholクライアント WebUIを提供 Djangoフレームワークを使用 通常 apache上で動作 JavaScriptを多用 CSS: Bootstrap ① HTTP html, css ② REST API on HTTP js データ json image 外観 Client apache Server Django ② Browse page: ① Exec JS code $getjson(): ② Draw data 22

22 動作環境 for CentOS 6.5 Ubuntu LTS (12.04) Hatoholバイナリ あり(RPM) 未 Django 1.5系 Project Hatohol製RPM apt/pip利用可 H/W要件 条件に強く依存 Core i5 Memory: 2GB Storage: 16GB ブラウザ: Firefox, Chrome, Safari IE: 表示不具合を確認 23

23 Hatoholの機能 (v.14.03) デモと共に

24 主な機能 機能 説明 ダッシュボード 全体の障害状況の一覧 概要 トリガー 監視項目の状態を色で表示 概要 アイテム 監視項目値を表形式で表示 最新データ 監視項目値の一覧表示 トリガー トリガーの一覧表示 イベント イベントの一覧表示 サーバ 監視システムの表示 追加 削除 アクション アクションの表示 追加 削除 ユーザー ユーザーの表示 追加 削除 権限の変更 25

25 画面の概要 メニュー 監視系 リンクのクリックで 各画面に遷移 設定系 ログインしているユーザー名 26

26 デモのセットアップ Hatohol testzbxsv1 testzbxsv2 testnagios1 監視対象ホスト 監視対象ホスト 監視対象ホスト 監視対象ホスト 監視対象ホスト 監視対象ホスト 監視対象ホスト 監視対象ホスト 26

27 デモ 監視画面一通り(adminで) ユーザー作成と閲覧制限 制限ユーザーでdashboardとevent 26

28 アクションの補足 コマンドタイプ 1イベントごとに指定されたコマンド実行 メール通知用のこのタイプのテンプレート実装済 レジデントタイプ 常駐プログラム(共有ライブラリ)を起動 イベントごとに それにメッセージを通知 大量イベントが発生した場合 負荷を低減 前回のイベントからの時間などで処理を柔軟に変更可 例 1回目はメール通知 ２回目 無視 10回ごとに メール 27

29 今後の開発計画

30 ２つの注力軸 運用統合機能拡充 インシデント管理 ログ管理 グラフ表示 ホスト管理 ホストの設定支援 監視対象システムの拡充 OpenStack連携 異なる論理ネットワーク上のデータ統合 Ceilometer/libvirt経由の監視情報読み出し 仮想環境上のZabbix Serverや監視対象ホスト の設定支援 29

31 インシデント管理 イベント発生時に自動起票 アクション実行開始 終了時に状況追記 回復時に自動追記 Hatoholの画面からステータス確認可 まず Redmineに対応 作業はすでに開始 14.06で実験的サポート 14.09で一通り実装 29

32 ログ グラフ管理 ログ管理 Fluentd連携 14.09で最初の実装を入れたい グラフ まだまだ検討中 WebGLとかでCoolにした い 29

33 OpenStack連携 OpenStack でのネットワーク 管理者 すべて閲覧 Net1 ZBX agent Customer VM ZBX agent Customer VM ZBX sever VM USER1 Net1のみ閲覧 Net2 ZBX agent Customer VM ZBX agent Customer VM Net3 ZBX agent Customer VM ZBX agent Customer VM Net4 NRPE Customer VM NRPE Customer VM Open Stack 物理マシン Ceilometer ZBX sever VM Hatohol USER2 Net1~3全て閲覧 ZBX sever VM USER3 Net3~4閲覧 Nagios ホストもゲストも 統合管理 30

34 APPENDIX

35 連載記事 (2014/02) OSC 2014 Tokyo/Spring 発表資料 (2014/02) ククログ セットアップ方法 2014/01) hbstudy発表資料 (2013/08)

36 お問い合わせ先 ミラクル リナックス株式会社 無断転載を禁ず この文書はあくまでも参考資料であり 掲載されている情報は予告なしに変更されることがあります ミラクル リナック ス 株 は本書の内容に関していかなる保証もいたしません また 本書の内容に関連したいかなる損害についても責 任を負いかねます 又 本資料の著作権は特に指定されている箇所を除いて ミラクル リナックスが有します ミラク ル リナックスが著作権を有するコンテンツにつきましては ミラクル リナックスに対して無断で複製 改変 頒布など をすることはできません MIRACLE LINUX の製品名 ロゴ サービス名などは ミラクル リナックスが所有するか 使用権許諾を受けている 商標もしくは登録商標です その他 本 Web サイトに掲載されている他社の製品名 ロゴなどは それぞれ該当する 各社が所有する商標もしくは登録商標です