Мок-интервью продакт-менеджера: A/B-тесты

Коротко о видео

Запись прямо заявлена как мок-интервью по решению продуктовых кейсов и показывает один большой кейс с кандидатом. Ведущие проверяют ход рассуждений об эксперименте: допустимость потери денег при проверке гипотезы, выбор метрик и способы интерпретировать результат. В техническом разборе отдельно объясняется ошибка второго рода — случай, когда эффект существует, но статистика его не обнаруживает. Во второй половине интервьюер разбирает ответ и дополняет его вопросами об A/B-тестах. Это материал для подготовки к продуктовым кейсам с акцентом на доказательное принятие решений.

Затронутые темы

Что взять на заметку

• Оценивать цену эксперимента до запуска теста.
• Учитывать ошибку второго рода при выводе об отсутствии эффекта.
• Связывать продуктовую гипотезу с измеримой метрикой.