Тестування трьох і більше версій одночасно.

Вивчення DXPR BuilderКерування сайтомТестування варіантів

Порівняйте кілька ідей в одному тесті: три заголовки, чотири hero-зображення або два макети поруч з оригіналом. Ви додаєте варіанти C, D і далі до наявного А/Б-тесту, і модуль RL знаходить найкращий з-поміж усіх. Почніть зі сторінки Налаштування А/Б-тестів, якщо елемент ще не має варіанта B.

Перед початком

  • Елемент уже виконує А/Б-тест із плашками A і B на панелі керування.

Налаштування

  1. Натисніть плашку версії, на основі якої хочете працювати. Новий варіант починається як її копія.
  2. Натисніть More і виберіть Create variant. З’явиться нова плашка, C.
  3. Змініть варіант C.
  4. Повторіть кроки 1-3 для кожної наступної версії.
  5. Натисніть Save на панелі інструментів.

Що ви бачите

Панель керування показує по одній плашці на версію, від A щонайбільше до Z. Усі версії використовують одну конверсію, яку ви вибрали в розділі Experiment settings.

Спочатку кожна версія отримує приблизно однакову частку відвідувачів, по третині за трьох версій. Коли надходять результати, модуль RL спрямовує більше відвідувачів до лідера. Слабші версії все одно отримують частину відвідувачів, тож пізній лідер може наздогнати. Додати версію пізніше нормально: вона долучиться з наступного перегляду сторінки.

Скільки трафіку потрібно

Більше версій ділять тих самих відвідувачів, тож кожна збирає покази повільніше. Conversion Score у звіті це (конверсії + 1), поділені на (покази + 2). За 20 показів одна додаткова конверсія змінює оцінку приблизно на 4,5 відсоткового пункта. За 200 показів вона змінює її приблизно на пів пункта. Зачекайте, поки оцінки перестануть стрибати, перш ніж довіряти їм.

Розумне сортування теж багатоваріантне

У розумному сортуванні кожен пункт акордеона чи вкладок це окрема версія. Модуль RL знову ранжує пункти для кожного відвідувача, і найсильніші зазвичай зверху.

Якщо новий варіант не відображається

  • Новий варіант скопіював неправильну версію. Новий варіант копіює версію, яку ви переглядали. Видаліть його, натисніть плашку, яку хочете скопіювати, і створіть варіант знову.
  • Здається, літеру пропущено. Нові літери йдуть за найвищою використовуваною літерою. Видалення B за наявного C робить наступний варіант D.
  • Оцінки всіх версій тримаються близько одна до одної. Трафік ділиться між багатьма версіями. Видаліть найслабші, щоб дати решті більше відвідувачів.

Що далі?

Найкращі практики проведення експериментів, щоб продовжити знайомство з DXPR Builder.