PowerPoint プレゼンテーション

Size: px

Start display at page:

Download "PowerPoint プレゼンテーション"

みさえいちぞの
5 years ago
Views:

1 AccelPlatform のつくりかた Season2 株式会社 NTT データイントラマート開発本部 2015/10/09 1

2 はじめに EWS 2015 当日限定 2

3 2 年前 (EWS 2013) 3

4 今年はアジャイルのレフトウィング intra-martにおける開発環境 ~Commit, Build, Test, Deployを支える技術~ 弊社開発本部における開発の自動化への取り組みを2年間の変遷と共にご紹介します 4

5 アジェンダ 1. 概要 2. 開発開発環境 CI 概要開発テストビルドリリース 3. 運用バックアップ / リカバリ監視 4. 開発手法 5. 今後の取組分析チャレンジ 5

6 概要期間 2010/09 ~ 2015/10 開発者チームモジュール数モジュール数 ( 全バージョン ) ビルドジョブ 40~80 名程度 ( 現在約 50 名 ) 4~10 チーム ( 現在 7 チーム ) 251 モジュール (2 年前 80 モジュール ) 1794 モジュール 1163 ジョブ (2 年前 420 ジョブ ) 6

7 自動化前 ( 半自動化時代 ) 1. CVS / Subversion を利用したソースコード管理 2. リモートデスクトップでサーバへログイン 3. ビルド用スクリプト (build.bat) の実行ビルド時間 1 時間 ~ 4. 成果物を元に手動でインストールし確認問題があれば 1 へ戻る手戻りが発生した場合のコストが非常に高い 7

8 自動化前 ( 半自動化時代属人性ビルドスクリプトが複雑になり職人以外触れない特定の端末でしかビルドできないスクリプトも存在ビルド環境へは一部の人のみがアクセス可能ビルド環境がスケールしない / 直列化されているリリースが重なると待ち時間がとられるリリース作業が複雑リリース職人以外リリース作業が行えない 8

9 概要 9

10 開発サイクル年 4 回から年 3 回のリリースに変更 3~4 ヶ月単位のリリース 4 月 1 日 Spring 7 月 1 日 Summer X 月 X 日 Autumun 12 月 1 日 Winter リリーステスト開発 10

11 開発サイクル内訳 1ヶ月目計画設計等 + 実装タスクの洗い出しプランニングポーカー等 2ヶ月目実装翻訳 3ヶ月目試験結合試験総合試験セキュリティ検証実際には数シーズンかけて開発を行う機能も存在します 11

12 開発 12

13 開発環境 Windows7 Widnows10 Mac OSX Ubuntu Linux Cent OS RedHat Enterprise Linux CentOS RHEL Windows Mac OS X Ubuntu Linux 2 年前と比べて Linux 系 OS が減少 Mac OSX が増加 13

14 CI 環境 : 概要 14

15 CI 環境 : クライアント 15

16 CI 環境 : クライアント開発環境の構築は 1 クリックで実現完了内製の環境構築スクリプト初期導入コスト削減環境の差異による品質のブレを防止 16

17 CI 環境 : クライアント e-builder / Eclipse 静的解析プラグイン (Findbugs, Checkstyle) Sphinx( ドキュメント ) 用プラグイン各種業務スケルトンツール Apache Maven Apache Ant Sphinx Middleware Java SDK Python 内製ツール / プラグイン等 17

18 CI 環境 : 開発 18

19 CI環境: 開発ソースコードはGit及びSubversionで管理 Subversionのリビジョン番号は (2015/09/16時点) 1日辺りのコミット数は50回以上目的新規開発機能拡張/改善改修ドキュメントテスト 19

20 CI 環境 : ビルド 20

21 CI環境: テストビルドソースコードがコミットされる事により Jenkins上でコンパイルテストパッケージング等のビルドジョブが動作しますビルドジョブ: 約1200 ビルドサーバ: 3台テストケース: 6万以上 Jenkins: 9インスタンス 21

22 CI 環境 : テストビルド 1600 ビルドジョブ / 週 93 時間 / 週 ( 稼働率 55.3%) 4DB 環境のテスト (Oracle, PostgreSQL, DB2, SQLServer) Selenium を利用したブラウザテスト Coverity を利用したコード静的解析不具合密度 0.5 以下 22

23 CI 環境 : テストビルド Selenuim / WebDriver Web アプリケーションのテストを自動化実際のブラウザを動かしながらテストします Coverity Java 向けの静的コード解析ツール ( 有償 ) 単一のクラス内のコード解析だけではなくクラスを跨った解析を行います 23

24 CI 環境 : 独自のテストリンク切れチェックメッセージファイルチェック翻訳漏れが存在しないこと ( 日英中対応が行われているか?) モジュールを跨ってキーが重複していないことドキュメントチェックリンク切れ検出版日付が更新されていることスペルチェック (e.g. tenatid -> tenantid) 文言チェックですます調等の確認略称の使用の検出コードチェック Javadoc コメント不要な printstackstrace 全て内製ツール 24

25 CI 環境 : デプロイ 25

26 CI 環境 : デプロイプログラムの成果物は全て Maven リポジトリへ格納されます社内検証用 IM-Juggling 用リポジトリが更新されます成果物を元に Docker イメージを作成し Docker レジストリに登録されます 26

27 CI 環境 : デプロイ Maven リポジトリビルドされた成果物を管理するリポジトリ Sonatype Nexus Apache Archiva IM-Juggling リポジトリ Accel Platform を構成するモジュールファイルを管理するリポジトリ IM-Juggling から参照 27

28 CI 環境 : デプロイ Docker レジストリコンテナ型仮想化環境 Docker で利用イメージファイルを管理するためのレジストリ開発本部ではビルドが成功した後 Docker で利用可能なイメージファイルの作成を行っています 28

docker run t i p 8080:8080 p 5432:5432 p 2222:22

29 CI 環境 : デプロイデプロイされた成果物は各開発環境から参照される為最新の成果物が共有されます Docker イメージが有るためそのまま起動する事が可能です Vagrant Docker へ移行しました docker run t i p 8080:8080 p 5432:5432 p 2222:22 registry.intra.intramart.jp/xxx/iap_latest_standalone_postgres 29

30 CI 環境 : リリース 30

31 CI環境: リリースリリース作業の自動化公開サーバへのアップロード資材配置等のリリース作業の自動化を行いました結果半日かかっていた作業が1時間へまた手作業によるミスが無くなりました 31

32 自動化外のテスト打鍵試験脆弱性診断 IBM Security AppScan 負荷試験 Oracle Load Testing Apache JMeter 32

33 運用 33

34 運用 : 概要サーバ数モジュール数ビルドジョブ 7 サーバ (2 年前 5 サーバ ) 251 モジュール (2 年前 80 モジュール ) 1163 ジョブ (2 年前 420 ジョブ ) 34

35 運用 : バックアップ / リカバリ日時で Amazon S3 にバックアップビルドサーバはビルドサーバ間でバックアップを保持障害発生時に即時復旧出来るようにディスクリソースは常にある程度余裕がある状態を維持 5 年間の運用中障害が発生したのは 2 件ディスク障害電源が壊れた共に短時間で復旧 35

36 運用 : 監視内製ツール / 名称 : manabot ビルドジョブ / サーバ死活監視 36

37 運用: 監視監視內容はフロア上部に設置されているディスプレイに常時表示されますビルドの状況サーバ死活監視で何か問題が発生した場合には社内irc, IMBoxに通知が行われます IM-Noticeによりスマホにpush配信 37

38 開発手法 38

開発手法 Java7対応 Java8はJavaEE7, JavaEE8対応後検討予定 lombokの導入 @Data, val等を利用しコード量削減を実施コード解析ツール

39 開発手法 Java7対応 Java8はJavaEE7, JavaEE8対応後検討予定 val等を利用しコード量削減を実施コード解析ツール javadocと相性難あり DDD(Domain-Driven Design) ドメイン駆動設計ユビキタス言語の使用モデルへの反映モデリングが綺麗でわかりやすく品質の向上 39

40 開発手法フロントエンドのビルドシステム WebPackの導入 JavaScriptのモジュール化ビルド時に結合 (圧縮最適化) ES6(Babel)は今後検討 SPA (MV*)アプローチ Single Page Application Vue.js + page.js + α カスタマイズしない(と想定される)画面に適用生産性向上コード量削減再利用 (推測3割) 画面描画のパフォーマンス向上他言語化認可連携等で一部課題あり 40

41 今後の取組 41

42 今後の取組開発改善に取り組んで5年以上感覚ベースでの最適化は難しい段階データ収集と可視化の実施 ELKスタックを利用したデータ分析 (Logstash + ElasticSearch + Kibana) Jenkinsのジョブ結果をElasticSearchへ登録するプラグインを作成様々な傾向が可視化出来た改善へ 42

43 今後の取組 : 分析画面 43

44 今後の取組 : チャレンジ予防保全的なアプローチへの取り組み / 研究リリースサイクルを通しての統計データの分析機械学習を利用した予測開発に関する様々なデータの収集社内メンバーが気軽に可視化分析を行える環境 44

45 今後の取組 : チャレンジこれまでのノウハウを元にした外部への展開ミニマムな構成を VM イメージ化し配布等パートナー様エンドユーザ様等へ展開サポート導入支援コンサルティングを行っておりますお問い合わせ下さい詳細実物をご覧になりたい方は弊社まで! 45

46 ご清聴ありがとうございました 46

Microsoft PowerPoint - T-5_HowToMake_iAP_for_PRINT.pptx

Microsoft PowerPoint - T-5_HowToMake_iAP_for_PRINT.pptx Accel Platform のつくりかた NTTデータイントラマート開発本部 2013/10/18 アジェンダ 1. アジャイルのライトウィングとレフトウィング 2. intra-mart におけるチーム環境スクラムの実践と夫点 3. intra-mart における開発環境 Commit, Build, Test, Deploy をえる環境 4. まとめ 2 from An Agile