ペアワイズ法テストケース生成が可能なOSS「PICT」

ペアワイズ法とは

ペアワイズ法（Pairwise Testing）は、ソフトウェアテストのテクニックの一つ

システムのテストケースを効果的に減らしながら、重要な組み合わせのバグを検出することを目的としている。

特に、複数の入力パラメータがある場合、すべての組み合わせをテストするのは現実的でないため、
ペアワイズ法を用いて、各パラメータのペア（2つのパラメータのすべての組み合わせ）をテストケースに含めるようにする。

オールペア法、ペアワイズテストとも呼ばれる

ソフトウェアでは多くの入力パラメータが存在し、各パラメータが複数の値を取る場合、
全てのパラメータの組み合わせ（直積）をテストするためのテストケースは爆発的に増加する。

この問題に対処するために、ペアワイズ法が導入された。

複数の研究結果によれば、

入力パラメータの組み合わせ数を削減: 全てのパラメータの組み合わせをテストするのではなく、2つのパラメータのすべての組み合わせを網羅するようにテストケースを作成する
コスト削減: テストケースの数を大幅に減らし、テスト作業を効率化する
バグ検出能力: 多くのバグは、2つのパラメータの相互作用によって発生するため、ペアワイズ法は多くの重要なバグを効果的に検出できる

例えば、あるシステムで3つのパラメータA、B、Cがあり、それぞれが次のような値を取るとする「

A: {1, 2}
B: {X, Y}
C: {True, False}

全ての組み合わせをテストする場合、2×2×2 = 8通りのテストケースが必要となるが、
ペアワイズ法を使用すると、次のような4つのテストケースだけで、2つのパラメータのすべてのペアの組み合わせを網羅できる

A=1, B=X, C=True
A=1, B=Y, C=False
A=2, B=X, C=False
A=2, B=Y, C=True

これにより、テストケースの数を削減しつつ、主要なパラメータ間の相互作用をカバーできる

pictは、コマンドラインから使用できるペアワイズ法によるテストケース自動生成ツール

これを用いて、実際にテストケースを作成する例を示す

例：パラメータ1、パラメータ2、システム設定でテストを作成する

パラメータ1: A, B, C
パラメータ2: 1, 2, 3, 4, 5
システム設定: ON, OFF

これらの組み合わせを全て網羅するには、3 x 5 x 2 = 30通りの組み合わせとなる