Рекомендательная система в А/Б тестах выпущена
Что уже реализовано и что она дает?
— рекомендует когда отключить вариант из ротации (да, слабый вариант можно отключить из ротации)
— не даст сделать преждевременные выводы на малой выборке, затемняет данные если выборка недостаточна
— подскажет сколько еще нужно показов для уверенных выводов
— подскажет % вероятности победителя на текущей выборке
Скоро:
— добавим возможность отключать слабые варианты АВТОМАТИЧЕСКИ, при достижении достаточной вероятности
— завершать тест автоматически, при достижении целевой вероятности
— ставить победителя на Озон автоматом
— пороги достаточности можно будет выбирать, хотите отключение при достижении 95% вероятности - ок, хотите 80% - можно
— тест будет длиться до достижения уверенного вывода (сейчас при настройке можно выбрать сколько показов / кликов мы набираем на вариант, добавим возможность выбора именно % достоверности и тест будет идти "до талого", пока не получим желаемый вывод или не наберется достаточно данных для уверненного вывода, если варианты одинаковые)
все автоматические действия будут дополнительно, то есть: хотите - включаете, не хотите - не включаете, все на ваше усмотрение
Если вы еще не тестировали А/Б тесты, то уже можно тут, промокод на первые 2 теста: sellium-ab
