条件パターン一覧生成

全組み合わせは、すべての因子の水準を掛け合わせたものです。3水準×2水準×2水準なら12件、因子が増えると掛け算で爆発します(3水準の因子が6つで729件)。ペアワイズは「どの2つの因子を取り出しても、その水準の組み合わせがすべて1回以上登場する」ように選んだ小さな集合です。3水準が6因子なら15件程度まで減りますが、2因子間の組み合わせのもれはありません。

ソフトウェアの不具合の多くは、1つの条件だけ、あるいは2つの条件の組み合わせで再現することが経験的に知られており(NISTの調査では2因子までで7〜9割前後)、3因子以上が絡む不具合の割合は小さくなります。そのため、限られた工数では「2因子の組み合わせを全部通す」ことを優先し、重要な組み合わせは別途手で足す、という進め方が実用的です。逆に、決済やセキュリティのように失敗の代償が大きいところは全組み合わせで確認します。

「iOS と Internet Explorer」のように、そもそもあり得ない組み合わせを禁則として指定できます。禁則に当たる行は全組み合わせの表から除外され、ペアワイズでも作られません。その禁則で潰れたペア自体も網羅対象から外れるので、「網羅したペア」の数が減ります。禁則が多いときは、その因子を分けて別の表にしたほうが読みやすくなることがあります。

CSVはテスト管理ツールへの取り込みに、TSVはExcelやGoogleスプレッドシートへの貼り付けに、Markdown表はGitHubのIssueやWikiにそのまま使えます。表の1行が1テストケースにあたるので、右側に「期待結果」「担当」「結果」の列を足して使うのが一般的です。入力した因子と水準はURLに入るので、チームで同じ表を再現できます。