Прошлая часть: Составление проверок или первые шаги к тест-дизайну Всем привет. Мы продолжаем. После прочтения предыдущей главы у вас могло возникнуть много вопросов. Например, «Какие конкретно тестовые данные надо брать для конкретной проверки? Ведь если поле пароль длиной от 10 до 256 символов – какую длину брать правильнее – 11 символов или 243?». Или, например, вот такой вопрос - «Есть ли какой-то универсальный подход/подходы для составления проверок?». Ответы на эти вопросы дает «тест-дизайн»...

Важно: этот пост не для технарей, математиков или секси ML-инженеров. Этот пост для простых людей, кто работает над продуктом и хочет улучшать его путем экспериментов. Для новичков! Зачем нужны А/В тесты? Вы развиваете продукт и работаете над улучшением метрик. Вас посетила гениальная идея. Вы предполагаете, что сделав Х, увеличите показатель Y на Z процентов. Можно побежать сразу внедрять идею, нагружая команду разработки, а можно из земли и палок собрать идею и проверить её успешность на кусочке пользователей экспериментом. Теперь к делу! Разберем на простом примере, как запустить А/B тест, посчитать выборку и подвести итоги...