効率の良いテストシナリオ? テストの進め方テストプロセステストの設計より少ないテストケースでより多くのバグを見つける Mercury Interactive Japan KK all rights reserved. 2

効率の良いテストシナリオ -ソフトウェアテストミーティング - マーキュリーインタラクティブジャパン ( 株 ) 小崎将弘

業務フロー ( ビジネスプロセス ) ビジネスプロセス ( 業務連携 ) をテストするビジネスプロセスの数は膨大ビジネスプロセスを構成する単位をビジネスコンポーネントと呼ぶそれぞれのビジネスコンポーネントには入出力データが存在それぞれのビジネスプロセス毎に入出力データの利用パターンは異なる例えば税率が変更された場合全てのビジネスプロセスは正しいデータ連携を行えるか? ビジネスコンポーネントテストを繋ぎ合わせてビジネスプロセスのテストを作り上げる Mercury Interactive Japan KK all rights reserved. 11

対象範囲自動化ツール適用範囲テスト効率化テスト計画 ( 自動 / 手動合せた計画 ) テスト環境テスト設計テスト資産再利用テスト容易性向上テスト実行自動化欠陥予防サイクルテスト設計 -ツールの連携設計スクリプト作成手順設計実施手順設計スクリプト作成テスト設計 ( 投入パターン ) ツールによるテスト準備ツールによるテスト実施スクリプト保守 Mercury Interactive Japan KK all rights reserved. 15

対象範囲の状況自動化ツール適用範囲テスト設計 - ツールの連携設計スクリプト作成手順設計現行のテスト仕様書から自動化スクリプトへの変換できますか実施手順設計スクリプト作成テスト設計 ( 投入パターン ) ツールによるテスト準備テスト設計担当テスト実施担当ツールによるテスト実施スクリプト保守両者のノウハウを集めて設計する必要がある Mercury Interactive Japan KK all rights reserved. 16

自動化ツールと管理ツール活用自動化ツールと合わせてテスト管理ツール導入として 1. テスト実行自動化 2. テスト進捗管理 ( 成功失敗未実行 ) 3. テスト仕様書投入パターンの文書管理 ( 構成管理 ) ( 構成管理は変更履歴バージョン他成果物とのトレーサビリティの 3 つが常に簡単に調べられるようにする 4. 不具合追跡 Mercury Interactive Japan KK all rights reserved. 17

テストプロセスフロー ( 例 ) 要件要件 / 設計設計実装実装結合試験結合試験統合試験統合試験 QTP 試験追加パターン見直し計画結果の登録オブジェクト登録パラメータ準備スクリプト修正 QTP 実行 QC/ TD テスト計画要件確認登録パラメータファイル添付スクリプト登録テストラボの設定相関チェックデータ収集 QTPの操作本番テスト実施不具合追跡進捗把握分析 TD による管理 Mercury Interactive Japan KK all rights reserved. 19

要件とのトレース要件を一覧管理するテスト計画時に各要件に当てはまるテストの関係を設定することでテストが要件をどれだけ網羅しているかが一目でわかる各要件に関してどのような不具合が出ているかも同様にわかるテスト計画テスト全体の構成をツリー上に表現できるため計画の漏れや間違いが少ない各テスト手動テストを管理することでテスト全体の計画が立てられる Mercury Interactive Japan KK all rights reserved. 20

テスト準備テスト仕様書など Word EXCEL ファイルの文書管理可能構成管理機能もあり QTP 実行時は添付したパラメータファイルを読み込んでテストを実施実行漏れを防ぐ自動実行自動テストの集中管理スケジューラとなりテスト実績を収集できる通常のマニュアルテストの実績収集でも便利な機能が多数あり Mercury Interactive Japan KK all rights reserved. 21

テストプロセスの改善管理ツールの効果的活用また目的に対する効果を達成するためには全体の考慮が必要 1. 効果的なテスト設計テスト設計技法の使い方テスト計画ドキュメント類見直し 2. 不具合追跡 ~ 完了までの自動化可視化リリース前リリース後の不具合追跡を確実に行うための仕組み 3. テストプロセスの見直しモデルに基づいたテストプロセス改善 4. 不具合傾向のフィードバックと対策実施による PDCA 不具合除去から不具合予防へ Mercury Interactive Japan KK all rights reserved. 24

テスト設計テスト項目 ABC 契約者の契約状態がホールド状態のときに強制終了ができることテスト項目の条件データ投入パターン参照データ投入パターン参照投入パターン番号 xxxxx yyyyy テスト結果の確認項目確認内容契約者 ID を検索して強制終了が選択できること登録した ID を検索したときに契約状態にホールドと表示されること契約者 ID を検索して強制終了が選択できること登録した ID を検索したときに契約状態にホールドと表示されること分類が投入パターン中心になっていないため実施用に再変換が必要パターンの観点が ( 条件の違い ) がわからない投入するデータは不具合を見つけやすいデータ ( 境界値 ) にすべきだがどのようなデータを投入しているかわからない投入パターンの網羅が出来ているかがわからない ( テストの漏れ重複があるかもしれない ) 本テストの目的 ( ロジックの不具合検出コンポーネント組み合わせの不具合検出機能の間違い検出ユーザ観点での評価など ) がわからない Mercury Interactive Japan KK all rights reserved. 25

テストケース設計の粒度レベルスクリプト作成 ( パラメータ設定 ) 工数は現状の手動テストケースの粒度に依存するレベル 4:3~20 ページ手動でのテスト実施方法の詳細手順を含むレベル 3:1~3 ページテスト項目毎の概要データ条件予想結果レベル 2:1/4~1 ページ自動テストスクリプトへの変換が容易なレベルレベル 1:1~2 行テスト条件とテスト項目のリスト全体的な目的など簡単な説明自動テストスクリプトへの変換が困難なレベル RexBlack 基本から学ぶテストプロセス管理から Mercury Interactive Japan KK all rights reserved. 26

テストケース粒度の例あるシステムの検索機能のテストケース 1. ABC システムで検索機能が正常に動作することを確認 1.1 検索パラメータを入力せずに検索ボタンをクリックする 1.2 無効な検索キーを入力してみる 1.3 一意の検索キー全部または一部を入力一致するレコードが表示 1.3.1 苗字全体その他のパラメータはブランク説明 : 苗字のみの検索キーで検索 DB 内の一致するレコードを検索する初期条件 :Win2K で ABC システムの検索画面が開いている状態入力 :DB に存在する苗字入力後に Enter 押下予想結果 : 検索結果ウインドウに苗字と検索キーが一致するクライアントが表示レベル 1 レベル 2 レベル 3 レベル 4 は初期条件にて OS 対象システムバージョンウインドウカーソルの状態やデータベース ID( データも決まったものが入っている ) を定義して入力作業の操作手順入力文字予想結果の動作手順表示結果件数や文字まで明記するレベルをさしている Mercury Interactive Japan KK all rights reserved. 27

自動テスト

例基本方針投入データパターンの管理は Excel 上で行う投入データパターンでテストケースをあらわすテンプレート Global Local 契約種別種別選択契約の種類を選択顧客管理顧客管理会計処理科目選択勘定科目の選択 Global Iteration 契約種別顧客住所 1 契約種別 Iteration 種別選択 1xxxx 2 3 住所 Iteration 住所 1 住所 2 番地 1 東京都港区西新橋 2 2 3 Mercury Interactive Japan KK all rights reserved. 34

お問い合わせマーキュリーインタラクティブジャパン株式会社 105-0003 東京都港区西新橋 2-38-5 西新橋 MF ビル 7 階電話 03-5402-9300 FAX 03-5425-2288 ホームページ http://www.mer cury.co.jp e-mail info_jp@mer cur y.com

効率の良いテストシナリオ? テストの進め方 テストプロセス テストの設計 より少ないテストケースで より多くのバグを見つける Mercury Interactive Japan KK all rights reserved. 2

効率の良いテストシナリオ? テストの進め方テストプロセステストの設計より少ないテストケースでより多くのバグを見つける Mercury Interactive Japan KK all rights reserved. 2