Покупайте мой курс по А/Б-тестам https://stepik.org/a/194930 Скидка 20% по промо коду YOUTUBE
Подписывайся на Телеграм https://t.me/mikhaylovgleb
Ноутбук: https://colab.research.google.com/drive/1oo61bDhA6qpSI1NkqSIW-TBJDgxZfyGp?usp=sharing
0:00 Начало стрима
3:22 Зачем нужен А/Б тест?
9:24 Планируем эксперимент у Эвана Миллера
19:27 Тестируем z test
35:37 Тестируем t test
37:08 Тестируем Манна — Уитни (как оказалось я неправильно запускал тест)
48:31 Считаем размеры сэмплов в питоне
1:01:29 Считаем размеры сэмплов для разных по размеру групп
1:04:02 Рассчитываем размеры сэмплов с помощью Монте-Карло
1:10:23 Проверка гипотез == проблема классификации
1:22:47 Баланс классов: успешные vs неуспешные эксперименты
1:27:32 Пример на сбалансированных классах
1:32:30 Пример на несбалансированных классах
1:43:45 Как бороться с несбалансированными классами? Понизить альфу (манифест)
1:51:44 Конец стрима (весь лохматый и седой)