A/B тестирование. Семинар 8

1.

A/B
тестирование
Семинар 8
Python применение стат критериев на
практике - пайплайн оценки а/б

2.

На этом уроке мы разберем
Закрепим знания полученные на лекции по использованию стат методов оценки
экспериментов на Python

3.

План
вебинара:
1. Обсудим задания для
работы в сессионных залах.
2. Начнём работу в группах.
3. Обсудим результаты.

4.

Задание:
Оцените результаты эксперимента :
Стат значимо ли отличается ARPU в двух группах ? Какие рекомендации дадите
менеджеру?
Решение

5.

Подводим итоги…

6.

Практическое задание
На сайте запущен А/В тест с целью увеличить доход. В приложенном excel файле вы найдете сырые данные по
результатам эксперимента – user_id, тип выборки variant_name и доход принесенный пользователем revenue.
Проанализируйте результаты эксперимента и напишите свои рекомендации менеджеру.
AB_Test_Results.xlsx