テスティングをしていくにあたって、ただ闇雲に複数のバナーを作ってAとBを比べてみると、もちろん結果は出ます。AかBのどちらかが良いか、AとBのどちらもそんなに変わらないです。

１回限りのテストであれば、これで良いかもしれません。でも実際は、サイトは常に運用され続けていくわけで、「良い知見を見いだして、次のバナーを作る際に活用できること」の方がより良いじゃないですか。次はさらに良い結果がでるわけです。