Аналіз результатів A/B-тестування.
Дивіться, як працює кожна версія вашого тесту і яка перемагає. Ви відкриваєте звіт RL, знаходите свій тест і порівнюєте оцінки його версій. Діаграми в часі необов’язкові; ви вмикаєте їх один раз у налаштуваннях RL.
Перш ніж почати
- Ваша роль має дозвіл Переглядати звіти RL.
- Для діаграм у часі ввімкнено Увімкнути журнал подій; див. Налаштування.
Налаштування
- Перейдіть до Звіти > RL: A/B-тестування
(
/admin/reports/rl). - Знайдіть свій тест у стовпці Експеримент. Його назва починається з типу вмісту й заголовка сторінки.
- Натисніть Переглянути у стовпці Операції.
- Порівняйте Оцінку конверсії варіантів.
З редактора меню Більше елемента має ярлик: Переглянути результати A/B-тесту відкриває ту саму сторінку в новій вкладці. Елементи розумного сортування пропонують Переглянути результати розумного сортування.
Що ви бачите
Огляд перелічує кожен тест із його підсумками.
Джерело повідомляє dxpr_builder для тестів, створених у
редакторі. Остання активність показує, коли його
числа востаннє змінювалися.
Сторінка деталей має один рядок на варіант:
| Стовпець | Значення |
|---|---|
| Варіант | літера або елемент для розумного сортування |
| Покази | як часто його бачили відвідувачі |
| Конверсії | як часто далі йшла вибрана дія |
| Коефіцієнт конверсії | конверсії, поділені на покази |
| Оцінка конверсії | (конверсії + 1), поділені на (покази + 2) |
Таблиця починається відсортованою за Коефіцієнтом конверсії; натисніть стовпець, щоб сортувати за ним. Більше довіряйте Оцінці конверсії: 2 з 4 і 200 з 400 дають коефіцієнт 50%, але надійний лише другий, і оцінка це показує.
З увімкнутим журналом подій діаграма Ефективність варіантів лежить над таблицею. До дев’яти варіантів показуються лініями в часі; більше показуються як 3D ландшафт. Діапазон часу, Вісь X, Вісь Y і Макс. варіантів змінюють показане на діаграмі.
Початок тесту заново
Натисніть Видалити у стовпці Операції, щоб скинути числа тесту. Тест розпочинається знову з нуля за наступного перегляду сторінки. Для цього потрібен дозвіл Адмініструвати експерименти RL.
Налаштування
Знайдіть їх у розділі Конфігурація > Вебсервіси > RL: A/B-тестування
(/admin/config/services/reinforcement-learning).
| Налаштування | Що робить | За промовчуванням |
|---|---|---|
| Увімкнути журнал подій | Записує знімки в часі для діаграм | вимкнено |
| Максимальна кількість рядків журналу подій | Cron обрізає старіші знімки понад це число | 100000 |
| Поріг лінійної діаграми | Найбільше варіантів, показаних лініями; понад нього першою відкривається 3D-діаграма | 9 |
| Увімкнути режим налагодження | Журналює оцінки вибірки; лише для короткого усунення несправностей | вимкнено |
Якщо ви не бачите своїх результатів
- Вашого тесту немає в списку. Тести реєструються, коли ви зберігаєте сторінку принаймні з двома версіями. Відкрийте сторінку в редакторі й натисніть Зберегти знову.
- Сторінка повідомляє «Журналювання подій вимкнено». Діаграми потребують журналу подій. Позначте Увімкнути журнал подій у налаштуваннях RL.
- Сторінка повідомляє «Даних ще немає». Журнал подій увімкнено, але тесту відтоді ніхто не бачив. Зачекайте на відвідувачів.
- Покази залишаються на нулі. Сайт не може
досягти rl.php. Перевірте RL: доступність rl.php
у звіті про статус (
/admin/reports/status).
Що далі?
Багатовимірне тестування для складніших експериментів, щоб продовжити знайомство з DXPR Builder.