Два варианта текста и сравнение

Два варианта текста уходят разным людям одного сегмента. Через неделю видно, на какой отвечают чаще.

На этой странице

• Что сравнивать
• Сколько ждать
• Где смотреть
• Чего не стоит делать
• Проверить себя

Что сравнивать

Одно отличие за раз. Если варианты отличаются началом, длиной и вопросом в конце, вы узнаете, что один лучше, но не поймёте почему — и не сможете применить это в следующий раз.

Меняйте что-то одно: только первую строку, только вопрос в конце, только длину.

Отличие по смыслу, а не по словам. Переставленные запятые и синонимы разницы не дают. Разные заходы — дают.

Сколько ждать

Пока в каждом варианте не наберётся достаточно отправленных. На двадцати сообщениях разница между «двое ответили» и «один ответил» — это случайность, а не результат.

Ориентируйтесь на сотни, а не на десятки. Подробнее про то, когда разница настоящая, — чтение результатов.

Где смотреть

Сравнение живёт в «Аналитике» — см. запуск опыта с двумя вариантами. Там же видно, сколько ушло по каждому и сколько ответов пришло.

Чего не стоит делать

Останавливать на полпути. «Уже видно, что первый лучше» на пятидесяти отправленных — самая частая ошибка: на трёхстах результат часто разворачивается.

Сравнивать на разных сегментах. Тогда вы сравниваете аудитории, а не тексты.

Проверить себя

1. Убедитесь, что варианты отличаются чем-то одним.
2. Дождитесь сотен отправленных, а не десятков.
3. Спросите себя заранее: что вы сделаете, если выиграет второй?