実践 Infrastructure as Code

Size: px

Start display at page:

Download "実践 Infrastructure as Code"

しょうじさわい
4 years ago
Views:

1 実践 Infrastructure as Code ~ ~

2 自己紹介

3 本日のトピック本セッションでは DevOps というコンセプトを実現するうえで不可欠な要素である Infrastructure as Code の本質とそれを達成するための方式 ( ツールチェーン ) のサンプル実装を紹介します (1) 実践 Infrastructure as Code 2016 (2) ツールチェーンデモンストレーション

4 実践 Infrastructure as Code 2016

5 Infrastructure as Code (IaC) IaC... 手作業手順書をコード化して自動実行する例えば1 日に何度も行うような作業がある... そういった作業は人間が実行するよりもコード化してコンピュータに実行させたほうが効率も良いしミスも少ない! => 素晴らしい考えだ! ところが実際に始めてみると考えていたものと少し違っていた... 我々が触ってるレイヤーのインフラ設備ってそんなに高頻度で作業してたっけ?

6 誤解されがちですが IaC によって得られる恩恵に関して自動化による直接的なOPEXの削減という点が強調されていることが多いようです (1) オペレータの工数削減と負荷軽減 (2) 作業ミスの抑止 (3) 人海戦術からの脱却確かに正しいのですが目的はそれだけではありません

7 本来の目的は? Dev の現場で利用されている QA/ テストの仕組みを我々インフラエンジニアの仕事にも適用できて作業品質を高められるのが最大のメリットではないでしょうか 1. 手順書のコード化 2. コードのリビジョンの管理 3. チケットシステムによる課題管理 4. コードレビュー 5. テスト 6. デプロイシステム 7. インフラの構成管理 1 7 をシステマチックに連携させることで Infrastructure as Code を実現する出展 : Wikipedia

8 IaC の現状とツールチェーン 2016 年現在 Infrastructure as Code を単一のOSS プロダクトだけで実現することはできず役割毎にいくつかのツールを連携させることで実現してるケースがほとんどです [ 役割 ] ソースコード管理コードレビュー QA/ テストテストインフラデプロイ出展 : Wikipedia

9 各ツールの役割本セッションでは ( ) のツールについてデモを交えつつ少し掘り下げてご紹介します役割実例機能 1 ソースコード管理 - Git コード化された作業手順書を管理する 2 コードレビュー支援 ( ) - Gerrit 手順書のレビューを支援する 3 テスト支援 - Jenkins コードレビューの一貫として自動テストを行う 4 デプロイ管理 ( ) - Ansible - Ansible Tower 自動化された作業手順を様々な環境に適用する 5 インフラ管理 - OpenStack テスト環境を提供する

10 自動テスト環境構成例 check/fetch/review fetch/push fetch/push review exec operation TestVM deploy operation PHP MySQL Apache Playbook Linux

11 コードレビュー : Gerrit + Git + Jenkins コードレビューに特化したOSSでさまざまなOSSプロダクト (OpenStackやAndroid 等 ) のレビューに利用されていますバックエンドでのソースコード管理にはGitを利用しています

12 デプロイ : Jenkins + Ansible + OpenStack Gerritのイベントをトリガーとしてテストジョブを実行しますテスト環境は Ansibleを利用して動的にOpenStack などのクラウド基盤上に構築します

13 ツールチェーン本日ご紹介するデモは以下のような流れです (1) プロジェクトをソースコードリポジトリからチェックアウト... (Git, Gerrit) (2) ソースコードを改変... (Git,Gerrit) (3) Gerrit にレビュー登録... (Git,Gerrit) (4) ツールチェーンによりテスト環境をデプロイ... (Gerrit,Jenkins,Ansible,Ansible Tower) (5) レビューとテストを完了して改変コードを承認する... (Git,Gerrit)

14 デモ Developer Gerrit (1) (2) Ansible Tower (3) Reviewer Core-Reviewer (6) (4) (5) Jenkins さまざまなツールを連携させてインフラテストの自動化を実現しています OpenStack API

15 コードのチェックアウト Playbook をチェックアウトします (1) サンプルプロジェクト (sandbox) $ git clone $ cd sandbox $ git remote add gerrit $ git config --local user.name "Hideki Saito" $ git config --global user. "foo@example.com" Gerrit のリポジトリを設定する Developer git clone Source Code Gerrit

16 レビュー申請 Playbook を改変してレビューを申請します (1) $ vi config_switch/site.yml <... コード改変...> $ git commit -a $ git-review Gerrit への push とレビュー登録を行う Developer git review Source Code Gerrit

17 Gerrit->Jenkins->Tower->OpenStack Gerrit 上にコードレビューが登録されると Jenkins に登録されているジョブが発動 (2) して Ansible Tower が自動テスト用の Playbook を実行 (3,4) します

18 Gerrit->Jenkins->Tower->OpenStack Ansible Tower と OpenStack が連携してテスト用の仮想マシンインスタンスが起動します $ openstack --os-cloud=poc server list -c ID -c Name -c Status -c Networks ID Name Status Networks c882daad d cumulus ACTIVE poc_backend= , c5f76a b6-89ea-92c82eaa16b3 jenkins ACTIVE poc_backend= , da5a-670f-458e-95fa-b47d904d3d27 gerrit ACTIVE poc_backend= , e65e-a40f-432f-90ec-ad7b28d4d0f3 tower ACTIVE poc_backend= ,

19 改変したコードの承認権威のあるレビュアはコードレビューを完了すると Code-Review に "+2" か "-2 を投票することができます一般のレビュアは "+1" か "-1" のみ投票が可能です Jenkins は自動テストが成功すると Verified に "+1" を投票します失敗した場合は "-1" を投票します "+2" が投票されると Submit ボタンが現れてコードを upstream にマージすることができます

20 Gerrit と Ansible について少しだけ

21 Gerrit Git の仕組みを上手くラップしてコードのレビューを手助けしてくれる仕組みです (Git の知識が必須です ) CI SYSTEM 従来モデル CI SYSTEM fetch Gerrit Review fetch 公式リポジトリ fetch/push 開発者 A fetch push Gerrit 公式リポジトリ submit 改変コード fetch push 開発者 B 開発者 A 開発者 B fetch レビュア approve

22 公式サイト Gerrit 関連情報公式ドキュメント Jenkins 連携実例 : OpenStack のコードレビューサイト

23 Ansible Infrastructure as Codeというコンセプトを実現するための自動化ツールで以下の特徴を持っています (1) システム管理にエージェントを必要としない (2) 構成管理データベースを持たない (3) 多くの機能を提供する充実したモジュール群を提供 (4) 公式モジュールでは冪等性が担保される (5) Playbookにワークフローの実現 (6) 数多い利用実績

24 Ansible の構成要素 Ansible の主な構成要素は以下の通りです # 構成要素概要 1 Configuration Ansible の振る舞いを決める設定ファイル 2 Inventory 管理対象ホストの一覧が記述されたファイル 3 Module タスクとして Ansible が実行するプログラム 4 Command タスクや Playbook を実行するためのコマンド群 5 Playbook 複数のタスクから構成されるワークフロー定義ファイル

25 Ansible による自動化の仕組み (a) UNIX ホストに対する操作 (b)windows ホストに対する操作 (c) ネットワーク機器に対する操作

26 ansible コマンドによるタスク実行

27 ansible-playbook コマンドによるシナリオ実行 AnsibleはPlaybookによりオペレーションのコード化を実現しています Playbookは実施する一連のタスクを順序立ててYAML 形式で記述したものです

28 Ansible Tower Tower は Playbook を利用したジョブ管理システムです本来は CLI から利用する Playbook をジョブ管理システムのジョブの 1 つとして利用することができます今回のデモでは機能の制限されたトライアル版を利用しています (OSS 化に向けて準備を進めているそうです ) [Tower が拡張する Ansible の機能 ] 1. ジョブ (Playbook) 単位でユーザに実行権限を付与 2. ジョブの API エンドポイント Callback エンドポイントを提供 3. オペレータがより安全に利用できる CLI を利用可能 4. 実行時のログを集約して管理可能 5. git を利用したソースコード管理システムとの連携が可能

29 公式サイト Ansible 関連情報 Tower 公式サイト公式ドキュメントソースコードリポジトリ

30 公式サイト Ansible 関連情報 Tower 公式サイト公式ドキュメントソースコードリポジトリ

31 まとめ本セッションでは Infrastructure as Code によって実現するべきものは何なのか? そしてそれを実現するために利用できるツール群とその組み合わせ手法 ( ツールチェーン ) についてご紹介しました今回例として紹介した実現手法はそのままではないにせよ OpenStack のような OSS の開発にも利用されています本セッションの内容がみなさんのお役にたてば幸いです

クックパッドのテスト自動化

クックパッドのテスト自動化 JaSST 14 Tohoku クックパッド株式会社高井直人スマホアプリ累計DL数 ios 1,010万 Android 990万 2014年4月時点パズドラ 2,700万黒猫 2,500万 Apache Rails 3.2 Ruby 2.0 Unicorn nginx MySQL Redis Memcached Amazon Web Service Ｖ字モデルとＶ