A/B-тест сравнивает две версии страницы на одинаковых посетителях. Разбираем, когда тест имеет смысл для небольшого сайта, что проверять первым, как поставить гипотезу и не ошибиться в выводах.
A/B-тест сравнивает две версии страницы, объявления или письма на одинаковых посетителях и показывает, какая версия лучше достигает одной цели. Малому бизнесу стоит начинать с элементов с наибольшим влиянием: предложения и заголовка, призыва к действию, формы и элементов доверия. Надёжный вывод требует достаточного трафика, одного изменения за раз и метрики, выбранной до старта.
В A/B-тесте посетителей случайно делят на две группы. Одна видит текущую версию (A), другая – изменённую (B). Через определённый период сравнивают долю тех, кто выполнил целевое действие: оставил заявку, купил, позвонил.
Для теста нужны достаточный поток посетителей и конверсий. Если на страницу заходит мало людей, сравнение двух версий будет идти месяцами, а результат останется ненадёжным. Точное число зависит от текущей конверсии и ожидаемого эффекта; его считают в калькуляторе размера выборки, который есть в большинстве инструментов тестирования. Обычно нужны десятки конверсий на каждый вариант; сотни дают более надёжный результат.
Если трафика мало, есть альтернативы: тестировать в рекламе и письмах, где показов больше, изучать поведение посетителей в записях сеансов и картах кликов, собирать отзывы клиентов и вносить значительные изменения со сравнением показателей до и после. Выводы из такого сравнения менее надёжны, потому что на результат влияют сезон и источники трафика.
Сначала тестируют элементы, которые сильнее влияют на решение посетителя. Приоритет определяют по трём признакам: возможный эффект, уверенность в гипотезе, сложность запуска. Мелкие визуальные правки, например оттенок кнопки, обычно дают слабый эффект.
| Элемент | Что проверяют | Почему имеет смысл |
|---|---|---|
| Заголовок и предложение | Конкретная выгода вместо общей фразы | Посетитель за считаные секунды решает, оставаться ли |
| Призыв к действию | Текст кнопки, место на экране, количество кнопок | Напрямую влияет на переход к заявке |
| Форма заявки | Количество полей, порядок, подсказки | Лишние поля часто снижают долю завершённых форм |
| Элементы доверия | Отзывы, кейсы, гарантии, реквизиты | Уменьшают сомнения перед покупкой или звонком |
| Условия и цена | Доставка, рассрочка, бесплатная консультация | Меняют восприятие выгоды |
| Карточка товара | Фото, описание, блок доставки и возврата | Влияет на добавление товара в корзину |
Когда идей много, их оценивают по шкале ICE: Impact (возможное влияние), Confidence (уверенность в гипотезе), Ease (простота запуска). Каждый параметр оценивают от 1 до 10, среднее значение даёт приоритет. Такая оценка субъективна, однако она заставляет команду объяснить выбор и отсеивает идеи, которые сложно реализовать без видимой пользы. Дополнительно проверяют, хватает ли на странице трафика для теста: идея с высоким влиянием на странице без посетителей остаётся теорией.
Гипотезу записывают в формате: если мы сделаем X, то метрика Y изменится, потому что Z. Например: если заменить общий заголовок на заголовок с конкретной выгодой, доля заявок вырастет, потому что посетитель быстрее поймёт предложение.
Тест запускают на целые недели, чтобы учесть разницу между днями недели. Завершают его после достижения запланированного количества посетителей и конверсий; ранний промежуточный результат часто оказывается случайным.
Есть сервисы A/B-тестирования, плагины для CMS, встроенные эксперименты в рекламных платформах и сервисах рассылок. Инструмент выбирают под CMS, трафик и состав команды. Для старта подходит самый простой вариант, который умеет делить трафик и считать конверсии.
Рекламные и почтовые тесты дают результат быстрее, потому что показов и писем обычно больше, чем визитов на отдельную страницу сайта.
После завершения сравнивают основную метрику в обоих вариантах. Инструменты показывают разницу и статистическую значимость: оценку того, можно ли объяснить эту разницу случайными колебаниями. Высокий показатель значимости говорит о надёжности вывода. Важность разницы для бизнеса оценивают отдельно.
Если разница недостаточна для вывода, тест завершают без победителя и переформулируют гипотезу.
План помогает не распыляться и накапливать знания. Например, для сайта услуг с умеренным трафиком он может выглядеть так.
| Период | Гипотеза | Основная метрика |
|---|---|---|
| Первый месяц | Заголовок с конкретной выгодой на главной посадочной странице | Количество заявок |
| Второй месяц | Более короткая форма заявки с тремя полями | Доля завершённых форм |
| Третий месяц | Блок с отзывами и кейсами рядом с формой | Количество заявок и доля целевых |
После каждого теста результат записывают в общую таблицу: гипотеза, даты, метрики, вывод. Через квартал такая таблица становится базой знаний о том, как реагируют ваши клиенты.
Единого числа нет. Оно зависит от текущей конверсии и ожидаемого прироста: чем меньший эффект нужно обнаружить, тем больше нужно посетителей. Размер выборки считают в калькуляторе до запуска.
Минимум одну-две полные недели, часто дольше. Длительность определяют размером выборки и циклом принятия решения у клиентов: для дорогих услуг он длиннее.
Можно, но это уже мультивариантный тест, которому нужно значительно больше трафика. Для небольшого сайта проще проводить последовательные тесты с одним изменением.
Это тоже результат: гипотеза не подтвердилась. Зафиксируйте вывод и проверьте следующее, более сильное изменение, например другое предложение.
Для старта достаточно встроенных экспериментов в рекламе и сервисах рассылок или простого плагина CMS. Платные инструменты имеют смысл, когда тестов становится много.
A/B-тестирование работает, когда есть гипотеза, достаточный трафик и одна переменная за раз. Малому бизнесу стоит начинать с предложения, заголовка, призыва к действию и формы, а там, где посетителей мало, использовать тесты в рекламе и письмах. Каждый завершённый тест добавляет знание о клиентах, даже если разницы между версиями нет. LightSEO, диджитал-агентство из Мукачева с опытом более 250 проектов, поможет определить, какие страницы стоит улучшать первыми. Посадочную страницу для проверки предложения удобно сделать в рамках разработки лендинга, а структуру сайта продумать под корпоративный сайт под ключ.
