Embed Size (px)
Citation preview
Индивидуальные решения в Директе.
Эксперименты и проверки гипотез.
Пётр Сивков
TechSales Department
3
Эксперименты
Структурный
Функциональный Продуктовый
4
Эксперименты
Структурный
Функциональный Продуктовый
5
Структурная гипотеза
6
Структурная гипотеза
7
Структурная гипотезаCTR +4%
8
Эксперименты
Структурный
Функциональный Продуктовый
9
10
Функциональная гипотеза
Гипотеза
▌Согласование KPI
▌Анализ результатаA/B тест
Результат
11
Пример №1
▌Крупный шинный магазин
▌Биддинг за позицию против CPA
▌A/B тест в высокий сезон
▌Цель: Получить больше конверсий
12
Статистика по KPI
Биддинг CPA
-15%
Конверсии
13
Основные данные
Биддинг CPA
-35%
Биддинг CPA Биддинг CPA
-43%
Клики Конверсии Цена цели
-15%
14
Что выбрал клиент?
Удержание позиций CPA стратегию
Остановить Директ Водку и пиво
15
Что выбрал клиент?
Удержание позиций CPA стратегию
Остановить Директ Водку и пиво
16
Пример №2
▌Крупная сеть медицинских центров
▌Биддинг за позицию с разной частотой обновления
▌A/B тест в высокий сезон
▌Цель: Проверить гипотезу
17
Ставки нужно назначать чаще
18
Ставки нужно назначать чаще
19
Ставки нужно назначать чаще
20
Ставки нужно назначать чаще
Клики и СРС в динамике
Биддинг раз в 20 минут
Биддинг раз в 3 минутыКлики
СРС
21
Биддинг раз в 3 мин Биддинг раз в 20 мин
Показы
Биддинг раз в 3 мин
Биддинг раз в 20 мин
Клики
Среднедневные показы и клики
+2% +8%
22
23
Эксперименты
Структурный
Функциональный Продуктовый
О продуктах
25
Продуктовая гипотеза
Гипотеза▌Анализ входных данных
▌Согласование KPI
▌Создание инструментов
▌Анализ результатов
A/B тест
Результат
26
Продуктовая гипотеза
Гипотеза▌Анализ входных данных
▌Согласование KPI
▌Создание инструментов
▌Анализ результатов
Инструменты
A/B тест
Результат
27
Пример №3
▌Ограниченное тестирование. Несколько десятков клиентов
▌Соц-Дем мультипликаторы к ставкам
▌A/B тест с эталонной кампанией
▌Цель: Оценить качество работы инструмента
28
Ставка х2
Ставка х0,1
Ставка х0,5
Ставка х3
Чуть подробнее про Эксперимент
29Без мультипликаторов С мультипликаторами
М 18-24 M 25-34 M 35-44 M 45+ Ж 18-24 Ж 25-34 Ж 35-44 Ж 45+
Повышение Понижение
30
Подводные камни ▌Не знают свою аудиторию
▌Аудитория ведет себя не так, как думает клиент
▌Соц-Дем не важный параметр в аудитории клиента
▌На малых данных сравнивать нечего
▌Не все отслеживают трафик после клика
▌Важно учитывать точность
31
32
Спасибо за внимание!
