WillDay - эксперименты с сайтами и трафиком
🚀 Эксперимент №15. 🎥 Видеоотзывы — усиливают доверие или просто отвлекают? (Итоги)
Снова провели небольшое исследование - A/B-тест 🧪
Что тестировали
На страницах услуг разместили видеоотзывы достаточно высоко —
3–4 блоком (участвовало 2 страницы в тесте)
И разделили трафик на два варианта:
A — видео показываются
B — видео не показываются
Что получилось
Вариант 🅰️ (с видео):
- 1420 визитов
- конверсия 1,55%
Вариант 🅱️ (без видео):
- 2462 визита
- конверсия 1,22%
Разница: +0,33 п.п. в пользу видео 📈
На первый взгляд не космос. Но если смотреть на экономику сайта — даже такие изменения могут давать заметный эффект.
Но есть важный момент ⚠️
P-value = 0,54
А значит статистически значимого преимущества пока нет.
Проще говоря:
мы видим сигнал, но данных ещё недостаточно, чтобы делать окончательные выводы.
Что для нас важно в таких тестах
Мы не пытаемся «доказать гипотезу любой ценой».
Иногда результат теста — это подтверждение, иногда — сомнение, а иногда просто новый вопрос.
Кстати, в конце теста конверсии немного просели.
Но причина здесь не в блоках на сайте. Мы отключили часть слабых источников трафика, которые раньше давали заявки, но были не очень эффективны.
Впереди много новых тестирований и исследований. Если у вас установлено приложение,
вы можете сразу перейти в канал