🔥

Тред (Мария Любимцева)


Аналитика. Еще одна моя любимая тема :) Сюда я отношу вопросы про метрики, AB-тесты, матстат, теорию вероятностей, задачки на SQL

Самое ключевое, что спросят везде: опыт проведения AB-тестов, как вы принимали решение, успешен ли эксперимент, что такое репрезентативная выборка, и как определить ее нужный размер для эксперимента

Тут надо вооружиться знаниями про стат значимость – как следует разобраться в теории про AB-тесты и матстат Опыт, конечно, тоже важен. Тут я честно говорила, что пользуюсь калькулятором размера выборки)) Но при этом я понимаю суть расчетов и могу объяснить "на пальцах"

Обычно также просят сформулировать метрику или набор метрик для продукта, могут спросить про пирамиду метрик: ключевую North Star метрику и прокси-метрики к ней, из которых она складывается. В целом, метрики – это средство достижения цели продукта, не стоит забывать об этом

Могут давать задачки на расчет вероятности какого-то события или задавать базовые вопросы про матстат, типа чем отличается медиана от среднего, в каком случае что из этого больше подходит для оценки Или спросить что-то более упоротое, например, про ошибки первого и второго рода

Я еще каждый раз ждала, что меня попросят рассказать, как считать ту или иную метрику, ее формулу, но почему-то этого ни разу так и не произошло))

Мария ЛюбимцеваМария Любимцева