Найкращі практики A/B-тестування.
Отримуйте чіткі відповіді від своїх тестів. Ця сторінка допомагає вибрати, що тестувати, налаштувати достатньо відмінні версії, вибрати правильну конверсію й знати, коли результат справжній. Самі кроки наведено на сторінці Налаштування A/B-тестів.
Що тестувати
Тестуйте частини, що вирішують, чи діятиме відвідувач:
- Заголовки й розділи-герої: перше, що бачать відвідувачі; малі зміни формулювань можуть мати значення
- Заклики до дії: текст, колір, розмір і місце кнопки
- Текст навколо форми: заголовок і обіцянка над формою реєстрації
- Пропозиції: як ви подаєте ціну, крайній термін або вигоду
Нижні колонтитули, юридичний текст і оформлення рідко змінюють дії відвідувачів. Для меню натомість дивіться свою веб-статистику.
Проєктування версій
Змінюйте щось одне в A/B-тесті
З двома версіями змінюйте одне між A і B. Якщо змінити заголовок, зображення й кнопку одразу, не можна сказати, яка зміна дала різницю.
З трьома або більше версіями кожна може спробувати іншу ідею. Решту елемента тримайте тією самою.
Зробіть версії чітко відмінними
«Розпочніть» проти «Розпочніть сьогодні» навряд чи покажуть різницю. Тестуйте справжні альтернативи:
- «Розпочніть» проти «Спробуйте безкоштовно» проти «Перегляньте демо»
- Велике фото проти зображення продукту проти відео
Вибір правильної конверсії
| Конверсія | Найкраще для |
|---|---|
| Час на елементі | Розділи-герої й текстові блоки, де час читання показує інтерес |
| Час на сторінці | Макети цілих сторінок, де мета це перебування на сторінці |
| Натискання на елементі | Кнопки, посилання й заклики до дії |
Задайте для параметра Секунди (від 1 до 60) реалістичний час читання: близько 5 секунд для короткого заголовка, 15–30 секунд для розділу тексту. Щоб зарахувати натискання в іншому місці сторінки, наприклад кнопки надсилання форми, введіть її CSS-селектор.
Проведення тесту
Чекання стабільних оцінок
Thompson Sampling адаптується з першого візиту, але ранні числа коливаються. За 20 показів одна додаткова конверсія рухає Оцінку конверсії приблизно на 4,5 бала; за 200 приблизно на пів бала. Стежте за оцінкою, а не за сирим Коефіцієнтом конверсії: оцінка враховує обсяг даних.
Не чіпайте версії
Редагування версії зберігає її старі числа, тож результати тоді змішують стару й нову версії. Якщо ви сильно змінюєте версію, скиньте тест кнопкою Видалити на сторінці звіту; див. Аналіз результатів.
Читання результату
Коли оголошувати переможця
Шукайте ці сигнали у звіті RL:
- У лідера Оцінка конверсії залишається стабільною кілька днів.
- Лідер отримує помітно більше Показів, ніж інші, бо модуль RL надсилає йому більше відвідувачів.
- Лідер залишається попереду, коли ви змінюєте Діапазон часу діаграми.
Потім залиште переможця: приберіть інші версії в редакторі й збережіть.
Коли результати лишаються близькими
Схожі оцінки після багатьох показів означають, що версії працюють однаково. Це дійсний результат: залиште версію, якій надаєте перевагу, і тестуйте щось інше.
Швидкість сторінки й кешування
Сторінка містить кожну версію, а браузер показує лише ту, що вибирає модуль RL. Доки вибір не надійшов, усі версії залишаються прихованими. Якщо rl.php недосяжний, відвідувачі отримують версію A.
Оскільки HTML однаковий для всіх, кеші сторінок і CDN можуть обслуговувати його далі. Браузер рахує кожен показ і конверсію один раз на версію за сеанс, тож перезавантаження сторінки не роздуває числа. Модуль RL позначає модуль ядра Page Cache у звіті про статус; дотримуйтеся його порад там.
Що далі?
Аналіз результатів ваших тестів, щоб продовжити знайомство з DXPR Builder.