Программа и содержание

Программа курса:

1. От роста CTR до границ эксперимента

2. Метрики экспериментов

3. Статистическая неопределённость: язык для шума

4. Причинность: почему A/B работает

5. Проверка гипотез: H0, p‑value, ошибки

6. Мощность теста, размер выборки и peeking

7. Статистические критерии на практике

8. Виды метрик и анализ ratio

9. Дизайн эксперимента и смещения

10. Диагностика и доверительные интервалы

11. Снижение дисперсии: стратификация и CUPED

12. Параллельные эксперименты и масштаб

13. Байесовский подход и многорукие бандиты (new)

14. Когда A/B недостаточно: квазиэксперименты (new)

15. Сквозной пайплайн: от данных до решения о выкате (new)

16. Проектирование автоматизированной системы оценки A/B‑тестов с ИИ (new)