В A/B-тесте вы сравниваете десять метрик и пять сегментов, и в одном сегменте одна метрика значимо выросла. Продакт хочет катить фичу на этот сегмент. Как к этому отнесётесь?
~4 мин голосом
Как подойти
Проверяют, видит ли кандидат проблему множественных сравнений и умеет ли отличить подтверждённый результат от находки в исследовательском анализе, а также предложить корректный путь: поправки, отдельный подтверждающий тест и скепсис к величине эффекта.
Интервьюер задаст этот вопрос и послушает. Думай вслух, проси подсказку, если нужно. Закончил — пауза или «Я ответил», через минуту здесь балл и какие пункты закрыты.