1. 背 景 近 年 ソ フ ト ウ ェ ア の 多 機 能 化 肥 大 化 に 伴 い テ ス ト す べ き 項 目 は 膨 大 化 す る 一 方 と な っ て い る が テ ス ト に 投 入 で き る 工 数 及 び 時 間 は 限 ら れ て い る ま た 製 品 サ イ ク ル



Similar documents
雇用保険被保険者資格取得届(様式)編

第1回

Microsݯft Word - 91 forܠ2009November.docx

(Microsoft Word - \203A \225\345\217W\227v\227\314 .doc)

の と す る (1) 防 犯 カ メ ラ を 購 入 し 設 置 ( 新 設 又 は 増 設 に 限 る ) す る こ と (2) 設 置 す る 防 犯 カ メ ラ は 新 設 又 は 既 設 の 録 画 機 と 接 続 す る こ と た だ し 録 画 機 能 付 防 犯 カ メ ラ は

・モニター広告運営事業仕様書

イ ン チ ー ザ ヴ ィ チ ェ ン ツ ァ ヴ ィ ッ ロ ル バ ( ト レ ビ ゾ 近 郊 ) ヴ ィ ン チ ヴ ェ ル バ ニ ア ヴ ェ ロ ー ナ エ リ チ ェ カ タ ー ニ ャ ( 3 月 ~ 1 0 月 ) ( 1 1 月 ~ 2 月 ) 5 0 ユ ー ロ 以 上 介 護

第三十六号の二様式(第五条関係)(A4)

ATOK Syncの設定方法と使い方(Mac用)

目 次 第 1 章 は じ め に... 3 第 2 章 基 本 的 な キ ー 操 作... 4 第 3 章 メ ニ ュ ー 画 面... 6 第 4 章 入 荷 業 務... 7 第 5 章 出 荷 業 務... 9 第 6 章 商 品 照 会...11 第 7 章 棚 卸 業 務...12 第

東京都立産業技術高等専門学校

1 フ ラ ッ シ ュ カ ー ド ( サ ン プ ル ) の ス ラ イ ド を パ ワ ー ポ イ ン ト で 作 っ て み ま し ょ う 以 下 の ス ラ イ ド ( 2 枚 目 ~ 4 枚 目 を 作 り ま す あ ら か じ め 作 業 用 の フ ァ イ ル を デ ス ク ト

は じ め に 懸 賞 フ ァ ン の 皆 さ ん 毎 日 応 募 し て い ま す か? 成 果 は い か が で す か? イ ン タ ー ネ ッ ト で は 毎 日 非 常 に た く さ ん の ホ ー ム ペ ー ジ で 膨 大 な 数 の 懸 賞 プ レ ゼ ン ト が 実 施 さ

がん専門病院における薬剤師養成のあり方に関する調査研究

jouhoukyouikubukai

の た め 委 託 事 業 者 の 選 定 に あ た っ て は こ れ ら C M 業 務 の 遂 行 能 力 及 び 業 務 実 績 に つ い て も 本 業 務 の 審 査 項 目 と し て 重 視 す る も の と す る 3 参 加 資 格 提 案 書 を 提 出 す る も の(

2 シ ス テ ム が 2 4 時 間 日 安 定 的 に 稼 働 す る 機 材 と 設 置 環 境 を 整 え る こ と ( 2 ) ソ フ ト ウ ェ ア 1 既 に 導 入 実 績 の あ る CMS で あ る こ と 2 Windows7(Windows IE1 1 ) で

Microsoft Word - 養生学研究投稿規定(改)

人見知りを克服する方法

神の錬金術プレビュー版

ロ ペ ミ ッ ク 小 児 用 % C ゲ シ ン L 錠 5 0 m g G ソ レ ル モ ン S R カ プ セ ル m g N1

大田市固定資産台帳整備業務(プロポーザル審査要項)

-2-

Ⅰ. は じ め に 27 年 か ら の 不 況 の 影 響 で 不 動 産 競 売 物 件 が 増 加 し て い る 29 年 9 月 は 全 国 で 8 件 を 超 え た ( 前 年 同 月 は 約 6 件 ) ま た 不 動 産 競 売 の 情 報 が イ ン タ ー ネ ッ ト で 公

インターネット取引に関する調査結果(平成13年3月末)について

ソ フ ト ウ ェ ア ト ー ク ン の ダ ウ ン ロ ー ド 方 法 以 下 の サ イ ト か ら ダ ウ ン ロ ー ド 方 法 の 確 認 を 行 っ て く だ さ い な お ソ フ ト ウ ェ ア ト ー ク ン に つ い て の 詳 細 や ご 利 用 方 法 よ く あ る

3 会 場 使 用 費 の 支 払 い 大 会 当 日, 会 場 使 用 費 を 各 学 校 ご と に ま と め て 大 会 本 部 に 納 め る 4 各 地 区 主 任 に よ る 手 続 き 各 地 区 主 任 は, 参 加 校 分 の 大 会 申 込 書 地 区 大 会 結 果 を 代

158 高 校 講 座 習 モ 現 ラ 習 モ 距 離 置 示 終 向 据 示 唆 与 取 ょ 第 7576 回 第 :

<819A955D89BF92B28F BC690ED97AA8EBA81418FA48BC682CC8A8890AB89BB816A32322E786C7378>

2016年夏のボーナス見通し

Taro-学校だより学力調査号.jtd

道 内 シ ル バ ー 人 材 セ ン タ ー の 現 状 に つ い て は 契 約 金 額 に お い て は 請 負 契 約 で は 減 少 し た も の の シ ル バ ー 派 遣 事 業 の 大 幅 な 伸 び に よ り 5 年 ぶ り に 前 年 実 績 を 上 回 っ た が 会

一般資料選定基準

(Microsoft Word - \211\357\213c\230^)

サッカーの話をしよう 旅するワールドカップ 立ち読み版

資料提供招請(登録版)

ス ト の 結 果 で は, 本 県 は, 体 力 運 動 能 力 テ ス ト に お い て 得 点 合 計, 種 目 別 で も 小 学 校 5 年 生 男 子 の ソ フ ト ボ ー ル 投 げ を 除 く, す べ て の 種 目 に お い て 1 0 位 以 内 に 位 置 し て お

J A K カ イ ロ プ ラ ク テ ィ ッ ク 協 同 組 合 規 約 ( 目 的 ) 第 1 条 組 合 員 の 権 利 義 務 等 は 定 款 に よ っ て 定 め ら れ て い る が 定 款 の 第 6 条 の 規 定 に よ り 定 款 に 記 載 さ れ な い 必 要 事 項

編 5ヶ 月 6 総 論 7 抜 ピ ド ピ ド 速 永 久 繰 ロ セ 慣 容 易 結 共 通 決 々 5 照 づ 具 ご 紹 介 与 監 査 比 較 場 限 提 始 箇 提 進 ご 安 心 話 提 与 監 査 雑 把 与 締 役 緒 算 類 作 機 関 従 来 税 始 忘 生 物 繰 切 忘 葉

保 険. 甚 害 準 意 義 次 福 祉 士 従 喫 緊 意 義 認 優 先 急 性 期 経 験 豊 富 ベ 沿 岸 確 幅 広 躍 レ 量 住 民 啓 発 I T 母 葵 木 村 幸 博 代 外 来 特 フ 常 勤 非 常 勤 勢 車 片 道 圏 暮 ぼ 生 働 東 起 全 国 園 ~ 聞 東 レ

円 定 期 の 優 遇 金 利 期 間 中 に 中 途 解 約 す る と 優 遇 金 利 は 適 用 さ れ ず お 預 け 入 れ 日 か ら 解 約 日 ま で の 所 定 の 期 限 前 解 約 利 率 が 適 用 さ れ ま す 投 資 信 託 ( 金 融 商 品 仲 介 で 取 り 扱

0605調査用紙(公民)

こ の 印 刷 物 は 国 等 に よ る 環 境 物 品 等 の 調 達 の 推 進 等 に 関 す る 法 律 ( グ リ ー ン 購 入 法 ) に 基 づ く 基 本 方 針 の 判 断 の 基 準 を 満 た す 紙 を 使 用 し て い ま す リ サ イ ク ル 適 正 の 表 示

もくじ 1. 概 要 1 2. 作 成 で き る 帳 票 ( 付 は 新 帳 票 ) 2 3. 所 得 税 の 達 人 の 起 動 方 法 最 新 年 度 版 の 起 動 過 年 度 版 の 起 動 4 4. 関 与 先 割 付 手 順 翌 機 繰 越 と

2 役 員 の 報 酬 等 の 支 給 状 況 平 成 27 年 度 年 間 報 酬 等 の 総 額 就 任 退 任 の 状 況 役 名 報 酬 ( 給 与 ) 賞 与 その 他 ( 内 容 ) 就 任 退 任 2,142 ( 地 域 手 当 ) 17,205 11,580 3,311 4 月 1

資 料 -6 平 成 20 年 度 第 2 回 北 陸 地 方 整 備 局 事 業 評 価 監 視 委 員 会 特 定 構 造 物 改 築 事 業 事 後 評 価 説 明 資 料 平 成 20 年 11 月 北 陸 地 方 整 備 局 -0-

更 新 申 請 全 般 Q1 宅 建 業 免 許 の 更 新 は ど の よ う に す れ ば よ い の で し ょ う か? A1 申 請 書 類 を 作 成 し 必 要 書 類 を そ ろ え 埼 玉 県 庁 第 二 庁 舎 1 階 建 築 安 全 課 宅 建 業 免 許 担 当 の 窓 口

Microsoft Word - 現況_教育_61_06_神戸大学_人間発達環境学研究科

その 他 事 業 推 進 体 制 平 成 20 年 3 月 26 日 に 石 垣 島 国 営 土 地 改 良 事 業 推 進 協 議 会 を 設 立 し 事 業 を 推 進 ( 構 成 : 石 垣 市 石 垣 市 議 会 石 垣 島 土 地 改 良 区 石 垣 市 農 業 委 員 会 沖 縄 県 農

平成25年度 独立行政法人日本学生支援機構の役職員の報酬・給与等について

理数科1年校外研修しおり

目 次 1. 大 学 情 報 データベースシステムの 使 用 方 法 について EXCEL 一 括 登 録 EXCEL ダウンロード 検 索 条 件 の 指 定 プレビュー EXCEL ダウンロード(データ 抽 出 あ

<4D F736F F D CBB8BB55F8CA48B865F33335F30315F90AD8DF48CA48B8691E58A E58A775F90AD8DF48CA48B8689C82E646F63>

ら 情 報 せ 先 先 ホムペジ

会議顛末書

10【交付要綱】様式第5-1~13

検 討 検 討 の 進 め 方 検 討 状 況 簡 易 収 支 の 世 帯 からサンプリング 世 帯 名 作 成 事 務 の 廃 止 4 5 必 要 な 世 帯 数 の 確 保 が 可 能 か 簡 易 収 支 を 実 施 している 民 間 事 業 者 との 連 絡 等 に 伴 う 事 務 の 複 雑

(Microsoft Word - \202P\214\216\227\325\216\236\211\357.doc)

Microsoft Word - 【第3班】研究報告書.doc

大学と学生第545号ビジネスモデルからみた卒業生就職支援の課題_関西学院大学(澤谷 敏行)-JASSO

目 次 第 1. 土 区 画 整 理 事 業 の 名 称 等 1 (1) 土 区 画 整 理 事 業 の 名 称 1 (2) 施 行 者 の 名 称 1 第 2. 施 行 区 1 (1) 施 行 区 の 位 置 1 (2) 施 行 区 位 置 図 1 (3) 施 行 区 の 区 域 1 (4) 施

<4D F736F F D208ED089EF95DB8CAF89C193FC8FF38BB CC8EC091D492B28DB88C8B89CA82C982C282A282C42E646F63>

国立研究開発法人土木研究所の役職員の報酬・給与等について

電子マネーと企業ポイントの新たな交換システムの構築

富 山 市 総 合 体 育 館 9 月 利 用 案 内 H28 8 月 20 日 作 成 1 木 2 金 3 土 8ー ま つ わ か 保 育 園 運 動 会 富 山 県 教 職 員 組 合 特 別 新 学 校 支 部 青 年 部 の 集 い 8ー21:30 新 庄 交 流 会 (

Microsoft Word - 07②-2 補足説明資料1.docx

入札公告 次 の と お り 一 般 競 争 入 札 に 付 し ま す 平 成 2 4 年 6 月 1 1 日 経 理 責 任 者 独 立 行 政 法 人 国 立 病 院 機 構 東 京 医 療 セ ン タ ー 院 長 松 本 純 夫 調 達 機 関 番 号 所 在 地 番 号 1 3

m07 北見工業大学 様式①

0807.indd

›ïŁñ.qxd

(Microsoft Word - \221\346\202P\202U\201@\214i\212\317.doc)

主 要 な が ん 治 療 に つ い て 入 院 に か か る 医 療 費 の 支 払 い か ら 計 算 し た も の で す 例 え ば 胃 が ん に つ い て は 平 均 入 院 費 は 総 額 約 万 円 で 自 己 負 担 額 は 約 3 3 万 円 程 度 必 要

Taro-10入札公告_一般_最低価格_

Taro-入札公告(滅菌器)(青森病

入札公告 次 の と お り 一 般 競 争 入 札 に 付 し ま す 平 成 3 0 年 1 月 1 9 日 経 理 責 任 者 独 立 行 政 法 人 国 立 病 院 機 構 い わ き 病 院 長 関 晴 朗 調 達 機 関 番 号 所 在 地 番 号 0 7 第

1 LINE

Microsoft PowerPoint - 報告書(概要).ppt

西関東書式

地 方 銀 行 及 び 地 方 証 券 会 社 のあり 方 について 目 次 序 章 P3 第 一 章 地 方 銀 行 及 び 地 方 証 券 会 社 の 定 義 P4 第 一 節 : 地 方 銀 行 と は P4 第 二 節 : 地 方 証 券 会 社 と は P4 第 二 章 現 在 の 地 方

掛 金 負 担 金 の 給 料 月 額 に 対 する 割 合 ( ) ( 単 位 : ) 短 期 介 護 短 期 介 護 短 期 介 護 一 般 職 特 別 職 市 町 村 長 組 合 員 34

Microsoft Word - 05.doc

介護保険制度改正にかかる事業所説明会

入札公告 次 の と お り 一 般 競 争 入 札 に 付 し ま す 平 成 3 0 年 1 0 月 1 0 日 経 理 責 任 者 独 立 行 政 法 人 国 立 病 院 機 構 神 戸 医 療 セ ン タ ー 院 長 森 田 瑞 穂 調 達 機 関 番 号 所 在 地 番 号 2

< F2D E616C817A91E D868FF096F189BC>

< F2D A C5817A C495B6817A>


第316回取締役会議案

別紙3


柏市防犯灯LED化事業

2 導 入 に 係 る 各 課 の 役 割 部 署 名 危 機 管 理 室 主 な 事 務 番 号 法 に 規 定 さ れ た 事 務 へ の 個 人 番 号 の 導 入 に 関 す る こ と 制 度 導 入 に 向 け た 事 務 の 総 括 に 関 す る こ と 個 人 番 号 の 独 自

入札公告 次 の と お り 一 般 競 争 入 札 に 付 し ま す 平 成 2 7 年 7 月 1 6 日 経 理 責 任 者 独 立 行 政 法 人 国 立 病 院 機 構 富 山 病 院 長 嶋 大 二 郎 調 達 機 関 番 号 所 在 地 番 号 1 6 第

<4D F736F F D2095CA8E A90DA91B18C9F93A289F1939A8F D8288B3816A5F E646F63>

(Microsoft Word - \216\213\222\256\212o\214\264\215e.doc)

Taro-官報公告(院内清掃30

<6E32355F8D918DDB8BA697CD8BE28D C8EAE312E786C73>

国際観光振興促進事業業務委託実施要領(案1)

フ ェ ネ ル ミ ン 錠 鉄 5 0 m g F プ リ ン ド リ ル 細 粒 1 % C リ ザ ス ト 錠 3 m g F

Transcription:

第 5 分 科 会 ( 第 2 グループ) 組 み 合 わせテストを 用 いたソフトウェアテストとその 限 界 Software test that uses combinatorial test and its limit 主 査 高 橋 寿 一 (ソニー 株 式 会 社 ) 副 主 査 増 田 聡 ( 日 本 IBM 株 式 会 社 ) リーダー 能 瀬 正 博 ( 株 式 会 社 富 士 通 北 陸 システムズ) サブリーダー 中 子 勝 晴 ( 株 式 会 社 日 立 システムアンドサービス) 研 究 員 金 山 昇 平 ( 株 式 会 社 ナナオ) 那 須 俊 博 ( 株 式 会 社 セゾン 情 報 システムズ) 山 岸 重 幸 (ジャパンシステム 株 式 会 社 ) 加 藤 恒 (ヤマハ 株 式 会 社 ) ( 敬 称 略 順 不 同 ) 概 要 ソ フ ト ウ ェ ア の 多 機 能 化 肥 大 化 に 伴 い テ ス ト す べ き 対 象 が 膨 大 化 す る 一 方 テ ス ト 期 間 の 短 期 化 が 求 め ら れ て い る 組 み 合 わ せ テ ス ト を 効 率 的 に お こ な う 手 法 と し て 直 交 表 ( 実 験 計 画 法 ) が あ る こ の 直 交 表 の 有 効 性 及 び そ の 限 界 に つ い て 研 究 を お こ な っ た Ab st r a c t Soft wa re ha vi ng be comi ng huge a nd rich i n functi ons, the ti me we ca n spe nd on testing ha s been required t o be shorter a nd shorter. And in s uc h situa tions, orthogona l arra y (Design of Experime nts) e na bles us to exec ute t he combi na toria l test effe ctivel y. We ha ve resea rche d two side of orthogona l a rra y: its effecti ve ness, a nd the li mit.

1. 背 景 近 年 ソ フ ト ウ ェ ア の 多 機 能 化 肥 大 化 に 伴 い テ ス ト す べ き 項 目 は 膨 大 化 す る 一 方 と な っ て い る が テ ス ト に 投 入 で き る 工 数 及 び 時 間 は 限 ら れ て い る ま た 製 品 サ イ ク ル の 短 期 化 が 進 ん で い る に も 関 わ ら ず 品 質 に 対 す る 要 求 は 以 前 に も 増 し て 高 ま っ て い る 状 況 で あ る 研 究 会 メ ン バ ー は 各 社 で ソ フ ト ウ ェ ア の Q A 部 門 ( 品 質 保 証 部 門 )に 携 わ り テ ス ト 作 業 の 改 善 へ の 新 し い 手 法 を 日 頃 か ら 模 索 し て い る 研 究 テ ー マ の 選 定 に 当 た っ て 組 み 合 わ せ テ ス ト 項 目 の 作 成 や 実 施 に つ い て 改 善 し た い と い う 意 見 が 多 く あ が っ た 具 体 的 に は 次 の 点 が 挙 げ ら れ た Q A 部 門 と し て 組 み 合 わ せ テ ス ト を ど こ ま で お こ な え ば 十 分 な の か 組 み 合 わ せ ら れ る 全 機 能 テ ス ト を お こ な う と テ ス ト 項 目 が 膨 大 に 増 加 す る 組 み 合 わ せ テ ス ト の 網 羅 率 と 実 施 コ ス ト の 費 用 対 効 果 が 見 え に く い そ こ で 組 み 合 わ せ テ ス ト の 一 つ と し て 存 在 す る 直 交 表 を 対 象 に ど の よ う に 利 用 す れ ば 上 記 で 求 め ら れ て い る 効 果 が 得 ら れ る か 研 究 す る こ と と な っ た 2. 研 究 アプローチ 本 研 究 の 重 点 項 目 は 次 に 示 す も の で あ る 1 直 交 表 の 理 解 直 交 表 を 適 用 し た こ と が な く 詳 細 な 使 用 方 法 も 不 明 で あ る た め 文 献 や シ ン ポ ジ ウ ム 等 か ら の 調 査 を 図 る 2 直 交 表 を 用 い た 組 み 合 わ せ テ ス ト の 評 価 実 際 に 直 交 表 を 用 い た 組 み 合 わ せ テ ス ト 項 目 の 作 成 を お こ な い そ の 有 効 性 と 限 界 に つ い て 以 下 の 通 り 研 究 を お こ な う テ ス ト に 見 合 っ た 最 適 な 直 交 表 の 因 子 水 準 の 見 積 も り 方 法 直 交 表 を 用 い た 場 合 の テ ス ト 網 羅 率 及 び テ ス ト 効 率 直 交 表 を 用 い た 場 合 に 不 足 す る テ ス ト 内 容 及 び そ の 補 完 方 法 3. 直 交 表 とは 直 交 表 と は 実 験 計 画 法 と し て 代 表 的 な 直 交 表 実 験 計 画 法 で 用 い ら れ る 表 の こ と で コ ス ト ス ケ ジ ュ ー ル の 制 約 に よ っ て 全 て の ケ ー ス で 実 験 で き な い と き な ど に 用 い ら れ る 因 子 と そ の 水 準 が 均 等 に 現 れ る 実 験 条 件 を 決 め る た め に 一 つ の 列 の 各 水 準 の 中 に 他 の 列 の 各 水 準 が す べ て 同 回 数 ず つ 現 れ る よ う に 作 ら れ て い る ソ フ ト ウ ェ ア で 組 み 合 わ せ テ ス ト を 実 施 す る 際 に は 全 て の 機 能 の 組 み 合 わ せ を テ ス ト す る こ と が 理 想 で あ る が 限 ら れ た 時 間 と コ ス ト で そ れ ら の テ ス ト 項 目 を 全 て 実 施 す る こ と は 実 質 不 可 能 で あ る し か し 直 交 表 を 使 用 す る こ と に よ り 組 み 合 わ せ テ ス ト の 効 率 化 を 図 る こ と が で き る と 品 質 工 学 (タ グ チ メ ソ ッ ド )の 田 口 玄 一 氏 は 仮 説 さ れ て い る テ ス ト の 効 率 化 が で き る 理 由 は 以 下 の 通 り で あ る

1 因 子 ず つ の 場 合 の バ グ の 発 見 率 が p で あ る 場 合 直 交 表 を 利 用 し て 2 因 子 の 組 み 合 わ せ の 評 価 を す る と そ れ に 比 較 し て ほ ぼ p の 2 乗 に 期 待 さ れ る 具 体 的 に バ グ の 発 生 す る 確 率 を 1000 行 あ た り 4 件 と 仮 定 し て 計 算 し た 場 合 機 能 組 み 合 わ せ に よ る バ グ 発 生 率 は 下 記 と な る 単 機 能 バ グ 発 生 率 = 4/1000 = 0.004 2 因 子 間 バ グ 発 生 率 = (4/1000) 2 = 0.000016 3 因 子 間 バ グ 発 生 率 = (4/1000) 3 = 0.000000064 200 万 行 の 製 品 と す る と 単 機 能 バ グ 数 = 4/1000 2,000,000 = 8,000 件 2 因 子 間 バ グ 数 = (4/1000) 2 2,000,000 = 32 件 3 因 子 間 バ グ 数 = (4/1000) 3 2,000,000 = 0.128 件 こ れ ら の デ ー タ か ら 以 下 の こ と が 言 え る (a) 2 因 子 間 の バ グ は 漏 れ な く 検 出 し な け れ ば な ら な い (b) 多 因 子 の 組 み 合 わ せ (3 因 子 以 上 )バ グ は 非 常 に 件 数 が 少 な い ま た 3 因 子 間 の バ グ を 確 実 に テ ス ト す る た め に は 直 交 表 最 大 因 子 の 水 準 数 の テ ス ト 項 目 数 が 必 要 で あ り 通 常 数 10 倍 の テ ス ト 規 模 と な る こ れ ら を 考 慮 す る と 多 因 子 間 の 組 み 合 わ せ を 全 て テ ス ト す る こ と は そ れ が 3 因 子 間 で あ っ た と し て も テ ス ト 項 目 数 が 多 い 割 に 検 出 さ れ る バ グ 数 は 概 ね 2 因 子 間 バ グ 数 と 変 わ ら ず 効 率 が 悪 い と い う こ と に な る [1] 実 際 の テ ス ト 項 目 に 適 用 す る と 因 子 4 個 水 準 3 通 り の と き 全 て の 組 み 合 わ せ を テ ス ト す る 場 合 3 4 = 81 通 り の テ ス ト 項 目 が 発 生 す る 直 交 表 を 用 い た 場 合 9 通 り の テ ス ト 項 目 と な る 上 記 の 場 合 9 分 の 1の テ ス ト 項 目 で 2 因 子 間 網 羅 率 100% が 確 保 で き 全 て の 組 み 合 わ せ テ ス ト と ほ ぼ 同 等 の テ ス ト 結 果 が 得 ら れ る な お こ の 田 口 玄 一 氏 の 仮 説 に つ い て は ソ フ ト ウ ェ ア テ ス ト の 分 野 に お い て 2 因 子 組 み 合 わ せ の 網 羅 テ ス ト に よ り 効 果 の あ る テ ス ト が お こ な え て い る と 実 際 に 報 告 が な さ れ て い る [2] 表 3. 1 L9 直 交 表 P1 P2 P3 P4 TestCase1 0 0 0 0 TestCase2 1 1 1 0 TestCase3 2 2 2 0 TestCase4 0 1 2 1 TestCase5 1 2 0 1 TestCase6 2 0 1 1 TestCase7 0 2 1 2 TestCase8 1 0 2 2 TestCase9 2 1 0 2 こ れ ま で に 述 べ た 通 り 直 交 表 を 利 用 す る と 効 率 的 な テ ス ト が お こ な え る と い う こ と が 分 か る が 実 際 に 直 交 表 を 使 用 し て 組 み 合 わ せ テ ス ト 項 目 を 作 成 し よ う と す る と 以 下 の よ う な 問 題 が あ り 難 し い と さ れ る 禁 則 処 理 異 常 処 理 の 因 子 水 準 が 組 み 込 め な い 因 子 水 準 及 び 直 交 表 の 選 択 方 法 が 分 か り に く い 以 上 の 条 件 を 踏 ま え た 場 合 の 直 交 表 の 作 成 を 次 章 に 記 載 す る

4. 有 効 な 直 交 表 の 作 成 方 法 一 般 的 な 路 線 情 報 検 索 プ ロ グ ラ ム で 組 み 合 わ せ テ ス ト を お こ な う こ と を 想 定 し 直 交 表 の 作 成 方 法 を 具 体 的 に 記 述 す る ま た プ ロ グ ラ ム の 仕 様 に つ い て は 付 録 1 一 般 的 な 路 線 情 報 検 索 プ ロ グ ラ ム の 仕 様 説 明 に 示 す 作 成 に あ た っ て は 専 用 ツ ー ル が な く て も 作 成 で き る よ う Micros oft(r)excel を 使 用 し た 図 4. 1 4.1 因 子 と 水 準 の 決 定 4.1.1 因 子 の 洗 い 出 し 図 4. 1 の 画 面 よ り 因 子 と し て 妥 当 と 考 え ら れ る も の を 洗 い 出 す 考 え ら れ る 因 子 と そ れ ぞ れ の 因 子 が 保 有 す る 全 水 準 数 を 表 4. 1. 1. 1 に 示 す 表 4. 1. 1. 1 路 線 情 報 検 索 プ ロ グ ラ ム 路 線 情 報 の 因 子 と 全 組 み 合 わ せ 数 # 因 子 全 水 準 数 水 準 数 算 出 の 根 拠 1 出 発 駅 駅 名 と し て 登 録 さ れ て い る も の 全 て 2 到 着 駅 駅 名 と し て 登 録 さ れ て い る も の 全 て 3 利 用 設 定 ( 新 幹 線 利 用 ) 2 ONあ る い は OFFの 2 通 り 4 利 用 設 定 ( 空 路 利 用 ) 2 ONあ る い は OFFの 2 通 り 5 探 索 日 付 124 4( 月 ) 31( 日 ) = 124 通 り 6 探 索 方 法 4 出 発 時 刻 指 定 到 着 時 刻 指 定 終 電 指 定 な し の 4 通 り 7 時 刻 指 定 ( 時 間 ) 24 0~ 23の 24 通 り 8 時 刻 指 定 ( 分 の 10の 位 ) 6 0~ 5の 6 通 り 9 時 刻 指 定 ( 分 の 1の 位 ) 10 0~ 9の 10 通 り 10 OS 8 一 般 的 と 思 わ れ る も の を 挙 げ る と Win95 Win98 WinNT WinMe Win2000 WinXP MacOS9 MacOSⅩ の 8 種 類 11 ブ ラ ウ ザ 4 一 般 的 と 思 わ れ る も の を 挙 げ る と InternetExplorer NetscapeNavigator Safari Firefoxの 4 種 類 4.1.2 水 準 の 絞 込 み 表 4. 1. 1. 1 よ り 探 索 日 付 等 の 水 準 数 が 多 い 項 目 で は 全 水 準 に 対 し て テ ス ト を 実 施 し た 場 合 に 膨 大 な 作 業 量 が 発 生 す る そ こ で 同 値 分 割 や 限 界 値 / 境 界 値 分 析 の 手 法 を 用 い て 水 準 数 を 絞 る 例 と し て 時 刻 指 定 に つ い て 考 え る 時 刻 指 定 の う ち 時 間 は 0 時 か ら 23 時 の 24 通 り 分 の 10の 位 は 0か ら 5の 6 通 り 分 の 1の 位 は 0か ら 9の 10 通 り あ る( 分 に つ い て は 画 面 上 10の 位 と

1の 位 が 分 か れ て い る た め 別 々 に 考 え る こ と と す る ) そ れ ぞ れ に つ い て 同 値 分 割 お よ び 限 界 値 / 境 界 値 分 析 を お こ な っ た 様 子 を 表 4. 1. 2. 1 に 示 す ま た 水 準 を 選 択 す る 場 合 異 常 ( 無 効 ) 値 を 水 準 に 入 れ る と そ の テ ス ト 項 目 の 実 行 が 失 敗 し て し ま い 他 の 水 準 間 の 組 み 合 わ せ テ ス ト 結 果 を 得 る こ と が で き な く な る そ の た め 異 常 値 は 別 途 異 常 系 テ ス ト を 実 施 す る こ と と す る 表 4. 1. 2. 1 同 値 分 割 と 限 界 値 / 境 界 値 分 析 # 項 目 考 え ら れ る 値 有 効 / 無 効 境 界 値 選 択 し た 値 1 時 間 - ~ - 1 無 効 同 値 ク ラ ス - 1 0~ 23 有 効 同 値 ク ラ ス 0 23 0 9 10 23 24~ 無 効 同 値 ク ラ ス 24 2 分 の 10の 位 - ~ - 1 無 効 同 値 ク ラ ス - 1 0~ 5 有 効 同 値 ク ラ ス 0 5 0 5 6~ 無 効 同 値 ク ラ ス 0 3 分 の 1の 位 - ~ - 1 無 効 同 値 ク ラ ス - 1 0~ 9 有 効 同 値 ク ラ ス 0 9 0 9 10~ 無 効 同 値 ク ラ ス 10 以 上 の よ う な 分 析 を 他 の 因 子 に 対 し て も お こ な う そ の 際 使 用 す る 直 交 表 が 2 水 準 系 直 交 表 で あ る こ と か ら 1つ の 因 子 に 含 ま れ る 水 準 数 を 2の 累 乗 ( 2 4 8 ) と し て お く こ と が 望 ま し い 絞 込 み を お こ な い 最 終 的 に 決 定 し た 因 子 と 水 準 を 表 4.1.2.2 に 示 す 表 4. 1. 2. 2 絞 込 ん だ 後 の 因 子 と 水 準 # 因 子 水 準 数 水 準 1 出 発 駅 3 津 ( 最 も 短 い 駅 名 ) 東 京 2 到 着 駅 3 南 阿 蘇 水 の 生 ま れ る 里 白 水 高 原 ( ひ ら が な で 最 も 長 い 駅 名 ) 津 東 京 3 利 用 設 定 : 新 幹 線 利 用 2 南 阿 蘇 水 の 生 ま れ る 里 白 水 高 原 ON 4 利 用 設 定 : 空 路 利 用 2 OFF ON 5 探 索 日 付 4 OFF 2006 年 12 月 1 日 2007 年 1 月 1 日 2007 年 2 月 28 日 6 探 索 方 法 4 2007 年 3 月 31 日 出 発 時 刻 指 定 到 着 時 刻 指 定 終 電 7 時 刻 指 定 ( 時 ) 4 指 定 な し 0 時 9 時 10 時 8 時 刻 指 定 ( 分 ) 4 23 時 00 分 09 分 50 分 9 OS 4 59 分 WinMe Win2000 WinXP MacOSⅩ 10 ブ ラ ウ ザ 2 InternetExplorer NetscapeNavigator

4.2 直 交 表 の 決 定 と 作 成 4.2.1 直 交 表 サ イ ズ の 決 定 洗 い 出 し た 因 子 と 水 準 を 元 に 直 交 表 の サ イ ズ を 決 定 す る 2 因 子 間 網 羅 率 を 100%に す る た め に は 組 み 合 わ せ た い 因 子 の 中 で 最 も 大 き な 水 準 数 を も つ も の 同 士 を 掛 け 合 わ せ た 数 だ け テ ス ト を し な け れ ば な ら な い 表 4. 1. 2. 2 を 見 る と 最 も 大 き な 水 準 数 及 び 次 に 大 き い 水 準 数 は と も に 4 で あ る こ こ か ら 最 低 限 4 4= 16 項 目 の テ ス ト が 必 要 で あ る と わ か る し か し 突 出 し た 水 準 数 を も つ 因 子 が な い 場 合 ど ん な に 因 子 が 増 え て も 上 記 計 算 式 の テ ス ト す べ き 項 目 数 が 増 え る こ と が な く 妥 当 な 直 交 表 の サ イ ズ を 決 定 す る こ と が で き な い こ の よ う な 場 合 は 自 由 度 か ら の 見 積 も り を 実 施 す る 自 由 度 と は 平 均 が 与 え ら れ た 場 合 に 自 由 に 定 義 で き る 変 数 の 数 を い う 直 交 表 の サ イ ズ を 自 由 度 か ら 見 積 も る に は 下 記 の 計 算 式 を 利 用 す る 自 由 度 を 求 め る 式 と と も に 示 す 因 子 A の 自 由 度 = 因 子 A の 水 準 数 - 1 直 交 表 の サ イ ズ = 自 由 度 の 総 和 + 1 = Σ ( 各 因 子 の 水 準 数 - 1) + 1 こ の 計 算 式 を 用 い 再 度 計 算 す る と 直 交 表 の サ イ ズ = ( 4-1) 5+ ( 3-1) 2+ ( 2-1) 3= 22 以 上 よ り 2 水 準 系 で 最 も 近 い L32 直 交 表 を 選 択 す る こ と と す る 4.2.2 直 交 表 の 作 成 直 交 表 の 作 成 に つ い て は 付 録 2 直 交 表 の 作 成 方 法 に 示 す 4.3 禁 則 の 回 避 4.3.1 禁 則 マ ト リ ク ス の 作 成 禁 則 と は 同 時 に 選 択 で き な い 関 係 の こ と で あ る 路 線 情 報 検 索 プ ロ グ ラ ム で は 出 発 駅 と 到 着 駅 が 該 当 す る 同 じ 出 発 駅 と 到 着 駅 を 同 時 に 選 択 で き な い か ら で あ る 詳 細 は 付 録 2 直 交 表 の 作 成 方 法 に 示 す 4.4 直 交 表 の 完 成 こ れ ま で の 流 れ を 踏 ま え L 32 直 交 表 へ 因 子 お よ び 水 準 を 割 り 付 け る 付 録 表 3. 3 に 完 成 し た 直 交 表 を 示 す こ れ で 路 線 情 報 検 索 プ ロ グ ラ ム の 組 み 合 わ せ テ ス ト を 実 施 す る た め の 項 目 が 完 成 し た が 2 因 子 間 網 羅 率 が 100%で あ る か ど う か つ ま り 出 現 し て い な い 組 み 合 わ せ が な い か を 確 認 し て お く 確 認 す る に は Excelの ピ ボ ッ ト テ ー ブ ル を 使 用 す る 完 成 し た 直 交 表 に DATAと い う 列 を 1 行 追 加 し 表 全 体 を 対 象 と し て ピ ボ ッ ト テ ー ブ ル を 作 成 す る 作 成 さ れ た ピ ボ ッ ト テ ー ブ ル の 行 と 列 に 確 認 し た い 因 子 を ド ロ ッ プ す る と そ の 因 子 間 の 組 み 合 わ せ が 何 回 テ ス ト 項 目 に 現 れ て い る か が 数 字 で 示 さ れ る 空 欄 に な っ て い る 箇 所 が テ ス ト 項 目 に 現 れ て い な い 組 み 合 わ せ で あ る 図 4. 4. 1 に 時 間 指 定 時 間 と 探 索 方 法 と で 確 認 し た 例 を 示 す

合 計 : DATA 探 索 方 法 時 間 指 定 時 間 指 定 な し 終 電 出 発 時 刻 指 定 到 着 時 刻 指 定 総 計 0 時 2 2 2 2 8 10 時 2 2 2 2 8 23 時 2 2 2 2 8 9 時 2 2 2 2 8 総 計 8 8 8 8 32 図 4. 4. 1 図 4. 4. 1 を 見 る と 空 欄 と な っ て い る 箇 所 は な い た め こ の 2 因 子 間 網 羅 率 は 100% で あ る [3] そ の 結 果 路 線 情 報 検 索 プ ロ グ ラ ム で は 絞 り 込 ん だ 因 子 水 準 を 総 当 り で テ ス ト 実 施 し た 場 合 73,728 件 ( 全 水 準 数 を 掛 け 合 わ せ た 件 数 )の テ ス ト 項 目 と な っ て い た が 直 交 表 を 使 用 す る こ と に よ り 32 項 目 で 効 果 的 な テ ス ト が 実 施 で き る こ と に な る と い え る 5. 問 題 点 とその 改 善 案 本 章 ま で 直 交 表 の 使 用 方 法 及 び 有 効 性 を 述 べ て き た が 直 交 表 に よ る テ ス ト の 十 分 性 に つ い て は 検 討 を お こ な っ て こ な か っ た と と も に そ の 必 要 十 分 性 に つ い て 既 知 の 研 究 も さ れ て い な い そ の た め 直 交 表 に お け る テ ス ト の 不 足 し て い る と 思 わ れ る 点 及 び 改 善 案 を 以 下 に 記 載 す る 1 単 体 テ ス ト レ ベ ル の 品 質 が 事 前 に 確 保 さ れ て い る 必 要 が あ る 個 々 の 単 体 機 能 で バ グ が 出 る 場 合 は 本 来 直 交 表 を 用 い て テ ス ト を お こ な う 組 み 合 わ せ テ ス ト の バ グ を 検 出 し き れ な い 一 旦 差 し 戻 し 単 体 テ ス ト で バ グ が 存 在 す る 因 子 に 着 目 し た 全 水 準 の 再 テ ス ト を お こ な う べ き で あ る 2 異 常 系 項 目 が 含 ま れ て い な い 別 途 異 常 系 テ ス ト を 実 施 す る 必 要 が あ る 4 章 の 有 効 な 直 交 表 の 例 と し て あ り え な い 日 付 の 2 月 31 日 が あ る 3 仕 様 書 に あ ら わ れ な い 条 件 で の バ グ が 漏 れ る こ と が あ る 一 般 的 に バ グ は 偏 在 す る も の で あ り 経 験 則 か ら テ ス ト す る べ き 領 域 を 絞 り 込 む こ と に よ り 新 た な バ グ を 検 出 で き る [4] 過 去 の 経 験 を も と に し た 推 測 テ ス ト の 併 用 を す べ き で あ る 4 機 能 性 以 外 の テ ス ト が 不 十 分 で あ る ソ フ ト ウ ェ ア の 品 質 要 素 に は 非 機 能 部 分 も 存 在 す る 組 み 合 わ せ テ ス ト 以 外 に も 以 下 に 挙 げ る よ う な 非 機 能 テ ス ト を 必 要 に 応 じ て 実 施 す べ き で あ る ( セ キ ュ リ テ ィ テ ス ト 性 能 テ ス ト 等 ) 2 因 子 間 網 羅 率 が 100%で あ る か ど う か の 確 認 6. まとめ Q A 部 門 に お け る 直 交 表 の 活 用 に つ い て 以 下 の よ う な 有 効 性 が あ る と 考 え る 組 み 合 わ せ の 網 羅 率 を 定 量 的 に 評 価 で き る テ ス ト の 組 み 合 わ せ は 2 因 子 間 網 羅 率 100%で ほ ぼ 問 題 な い ま た 直 交 表 で は 因 子 水 準 が 平 均 的 に 現 れ る た め 3 因 子 間 網 羅 率 も 高 ま る テ ス ト 項 目 の 効 率 化 が で き る テ ス ト 内 容 を ほ ぼ 維 持 し な が ら テ ス ト 項 目 を 減 ら す こ と が で き る 具 体 的

に 4 章 で は 73,728 項 目 が 32 項 目 に 効 率 化 で き た 経 験 の な い 人 で も 正 確 な 組 み 合 わ せ テ ス ト が お こ な え る 組 み 合 わ せ 手 順 は 確 立 し て お り 誰 で も 2 因 子 間 網 羅 率 100%の テ ス ト 項 目 を 作 成 で き る 但 し 因 子 と 水 準 の 選 択 を 誤 る と テ ス ト 項 目 の 品 質 が 悪 く な る の で 因 子 と 水 準 を 決 め る と き に は 十 分 な 検 討 を 加 え る こ と が 必 要 で あ る 5 章 で 示 し た 問 題 点 と 改 善 案 を 踏 ま え て 直 交 表 を 活 用 す る こ と で 効 果 的 な 組 み 合 わ せ テ ス ト を 実 施 す る こ と が で き る 7. 今 後 の 課 題 今 回 の 研 究 で は 文 献 か ら の 直 交 表 の 理 解 作 成 方 法 の 調 査 か ら ス タ ー ト し た た め 既 存 の 情 報 メ ン バ ー の テ ス ト 経 験 か ら の 討 論 が 主 で あ っ た 直 交 表 の 有 効 性 テ ス ト 項 目 作 成 方 法 に つ い て 今 回 研 究 を お こ な っ た が 直 交 表 に よ る テ ス ト が 浸 透 し て い な い 理 由 は 直 交 表 へ の 理 解 作 成 の 難 し さ だ け な の か 他 に も 課 題 が 存 在 す る の か 今 後 実 際 に 現 場 で 直 交 表 を 使 用 し て 調 査 を し て い く 必 要 が あ る 参 考 文 献 [1] 秋 山 浩 一, 直 交 表 を 活 用 し た ソ フ ト ウ ェ ア テ ス ト の 効 率 化 ~ HAYST 法 の 活 用 ~, ソ フ ト ウ ェ ア テ ス ト シ ン ポ ジ ウ ム 大 阪 (J a SST 05 大 阪 ) 講 演 資 料, URL: www.ja sst.jp/ja sst05w/pdf/s4-1.pdf [2] 多 田 敏 彦, 組 み 合 わ せ テ ス ト 生 成 網 羅 率 評 価 ツ ー ル の 開 発, 第 25 回 ソ フ ト ウ ェ ア 品 質 シ ン ポ ジ ウ ム 発 表 報 文 集 ( 日 科 技 連 ), pp.305-310 [3] 秋 山 浩 一, ソ フ ト ウ ェ ア テ ス ト PRESS, 直 交 表 に よ る 組 み 合 わ せ 入 門, vo2, pp.89-107, Ja n.2006. [4] 西 康 晴, テ ス ト の 改 善 テ ス ト に よ る 改 善, 2006 年 度 ソ フ ト ウ ェ ア 品 質 管 理 研 究 会 第 6 回 例 会 講 演 資 料