Как проводить эксперимент в минимально ограниченной выборке. Например, если выбор из всего 2 инструментов или всего 20 человек? И здесь учитываем, что фактическая выборка существенно больше, чем текущая возможность. Можно ли делать выводы на минимальных показателях тестов/экспериментов?
В большинстве случаев нет. Важно, чтобы выборка была релевантной, т.е. соответствующей актуальным данным и по качеству, и по количеству. Здесь есть смысл параллельного сравнения, если есть ограничения, например, по времени и/или бюджету. Параллельное сравнение или A/B-тесты позволяют выявить более быстрый результат в сравнительном эксперименте параллельно. Тогда будет понятно, какую группу аудитории, канал или, например, продукт усиливать в первую очередь.
А дальше уже выстраивать новый шаг экспериментов, тестов, аналитики.
Сергей Полторак
и команда "Символ роста"
http://simvolrosta.ru
+7-908-085-05-70 (V/WA)
+7-351-235-05-70 (офис)
ВКонтакте: vk.com/isoitil