Серия из 4-х обучающий видео как правильно проводить AB-тесты. Определяем гипотезу, метрики, размер выборки, запускаем тестирование и смотрим результаты.
22 февраля 2019
Обучающие видео: как правильно проводить AB-тесты
Обучающие видео: как правильно проводить AB-тесты
Ведущий аналитик Mindbox Туркина Юлия записала 4 видео, где максимально просто объяснила как правильно проводить АВ-тесты
Серия № 1: «Определение гипотезы»
Из первой серии вы узнаете, что такое гипотеза, зачем она нужна и как правильно ее сформулировать
- Универсальная формула гипотезы
- Примеры простых гипотез
- Примеры сложных гипотез
Серия №2: «Целевой показатель»
Второй шаг — определение метрики эксперимента, показателя, который можно улучшать. Из этой серии вы узнаете:
- Основные три процентных показателя для прямого маркетинга, которые можно улучшать
- Как выбрать период расчета показателя
- Подводные камни при тестировании
Серия № 3: «Размер выборки»
Размер выборки — это количество людей, которые примут участие в тесте. В видео рассказывается
- Как определить точку завершения эксперимента
- Проблема «подглядывания»
- Параметры, которые влияют на размер выборки. Как посчитать выборку в калькуляторе достоверности АB-тестирования
Серия № 4: «Запуск и завершение теста, проверка результатов»
Любой инструмент АВ-тестирования делит клиентов на группы случайным образом. Если вы начали пользоваться новым инструментом, Юля советует вам провести АА-тест (оба варианта тестирования одинаковы), чтобы проверить качество рандомизатора. Из 4 серии вы узнаете:
- О проверке результатов по завершению теста
- Как пользоваться вкладкой «Итоги тестирования» в калькуляторе
- Как интерпретировать результаты эксперимента
