Здравствуйте, chebum, Вы писали:
C>Я понимаю, что чем меньше разница между вариантами, тем больше нужна выборка.
Чем меньше выборка тем выше т.н. вероятность ошибки нулевой гипотезы (то есть утверждения, что А лучше Б). Вот, к примеру случайная последовательность из ста 0 и 1 сгенеренная PHP функцией rand:

0000011001110001000001110011010100011011111111011011100111001101100110000011110100000100000011111101

Первые 9 цифр в точности ваш вариант — 7 нулей и две единицы (случайно так получилось, это правда скрипт нагенерил). Есть ли смысл, взяв первые 9 цифр утверждать, что rand генерирует больше нулей чем единиц?