В эксперименте вы рандомизируете пользователей, а целевая метрика — CTR, то есть клики, делённые на показы. Как правильно посчитать дисперсию и проверить значимость?

Как подойти

Проверяют, понимает ли кандидат несовпадение единицы рандомизации и единицы анализа и умеет ли корректно оценивать дисперсию ratio-метрики (дельта-метод, бутстрап, линеаризация), а не применять наивный z-тест по показам.