Сплит-тестирование помогает выявить наиболее эффективную версию страницы, которая приводит на сайт больше всего клиентов. Но часто бывает так, что показатели сравниваемых страниц примерно одинаковы. Что же делать в данной ситуации? По сути, есть всего три варианта:
- продолжить тест дальше;
- выбрать первый вариант;
- отдать предпочтение второй версии.
Как поступить?
Сплит-тест следует держать несколько дней подряд до того, как появятся статистически значимые результаты. Даже если один из вариантов без сомнений выигрывает в первый же день, все равно нужно подождать некоторое время. В противном случае, узнать какая страница наиболее эффективна с большой точностью не получится.
Какое время необходимо держать тест запущенным, если результат не достигнут?
По сути, при накоплении информации погрешность падает и по этой причине какой-либо из вариантов непременно выиграет. Но на деле бывает по-разному. Например, сегодня победу одержал первый вариант, а завтра — второй. Выходит, суммарно они примерно одинаковы. И какое бы время бы не ждали, итоги кардинально не изменятся. Мы советуем выжидать около двух недель. Больше — не всегда целесообразно.
