Первый реальный A/B тест с аналитикой по запросам 👀
Ну почти реальный, тестировали 2 одинаковых изображения. И вот почему:
• во-первых — так быстрее;
• во-вторых — так можно понять, как быстро наступает точка “достоверности”.
Да, конечно, на одном тесте это ещё очень далеко от истины. Но с чего-то же нужно начинать 🙂
Что интересно:
чем меньше показов/кликов по запросу — тем сильнее разброс CTR%.
💡 Для хоть каких-то минимальных выводов по отдельному запросу:
нужно хотя бы ~1000 показов на вариант.
И то — это ещё не гарантия достоверности.
А всё, что сильно ниже — туда смотреть можно разве что ради интереса, но точно не ради выводов 🥲
При этом:
средний CTR по всем запросам (рядом с изображениями) у вариантов тоже максимально близкий — что логично, учитывая что изображения одинаковые.
Что ещё есть на скрине, сверху под каждым запросом:
• сумма продаж по запросу / продажи нашего товара по этому запросу за 7/28 дней (из ЗМТ);
• CTR по запросу за 7/28 дней из ЗМТ;
• и всё это уже можно сопоставлять с A/B тестом по конкретному запросу 👀
То есть постепенно начинаем видеть не просто “CTR картинки”, а как конкретное изображение ведёт себя внутри конкретных запросов.
PS: допиливаем мелкие фиксы и уже скоро выпуск в свет 🙏🏻😇
👀 хотите протестировать сервис бесплатно?
Пишите Дане вот сюда ⚫
