テストマトリクス とは？

確認する組合せを見渡しやすくなるよ。たとえば2つの機能を2つの対応ブラウザで確認するなら、4マスに予定と結果を記録できる。ただし、表にない条件の漏れやテストの内容までは分からない。対象の製品・バージョンや期待結果も決めよう。

実際に提供・サポートしている組合せを先に確認しよう。使えない組合せや対象外は、未実施と分けて理由を残す。図は架空の結果の例で、特定のブラウザの対応一覧や実際の検証結果ではないよ。

matrixで条件の組合せごとのジョブを作れるよ。たとえばOS2種類と実行環境のバージョン2種類なら、除外がなければ4ジョブになる。ただし、準備やテストコマンドはstepsで定義する必要がある。includeで追加、excludeで特定の組合せを除外できるんだ。

重要な利用環境や失敗時の影響から範囲を決めよう。ペアワイズは2因子の組合せをカバーする方法で、件数を減らせる場合がある。ただし3因子以上の特定の組合せで起きる問題や、順序に依存する問題まで必ず見つかるわけではない。何を省いたかも残そう。

要件とテストケースなどを対応させる表のことだよ。「要件Aをケース1と2で確認する」のように、要件のカバー範囲や変更の影響を追う。環境の組合せ表とは軸と目的が違うんだ。どちらも、ケースがあることと実際に成功したことを分け、結果や不具合への参照を記録しよう。