Результаты модели и проверка на скрытых месяцах

Прежде чем планировать бюджет по модели, проверьте, насколько она угадывает факт. Всё для этого — на странице «Результаты анализа эластичности».

Шаги

1. Страница открывается сама после расчёта. Если драйверов или зависимых несколько, вверху вкладки связок «драйвер → зависимая».
2. Карточка «Marketing Mix Model»:
   • «Эластичность» и вывод «При увеличении X на 1%, Y изменится на ~Z%». Пример: эластичность 0,4 — бюджет +10 % даёт около +3,9 % трафика, а не +4 %: каждый следующий рубль работает чуть хуже;
   • «Насыщение» — насколько канал близок к пределу отдачи. Шкала карточки канала: до 10 % — далеко от насыщения, 10–40 % — умеренное, от 40 % — высокое, новые деньги дают всё меньше;
   • «Надёжность»: «Высокая», «Хорошая», «Средняя» или «Низкая».
3. Блок «Проверка модели на скрытых месяцах» — главный. MARFOR прячет последние месяцы факта, учит модель без них и сравнивает её прогноз с фактом. Крупное число — «средний промах прогноза»:
   • до 10 % — «Точный прогноз»;
   • 10–20 % — «Хороший прогноз»;
   • 20–50 % — «Приемлемо: годится как ориентир, не как точная цифра»;
   • от 50 % — «Неточный прогноз: планировать по этой модели без перепроверки нельзя».

Пример: факт марта — 1 000 заказов, модель без этого месяца предсказала 920. Промах — 8 %. Под вердиктом — таблица по месяцам (Факт, Прогноз модели, Промах), «Промах по срезам» и «Помогают ли драйверы прогнозу».

4. «Кривая отклика и сценарный калькулятор»: ползунок «Изменение бюджета» от −50 % до +100 % показывает «Изменение метрики» и «Насыщение».
5. «Эластичность по срезам» — те же показатели по каждому срезу. Строка раскрывается щелчком, кнопка 📈 открывает кривую насыщения среза.
6. Если всё устраивает — «Моделировать сценарии».

Что получится

Вы знаете, каким срезам и насколько можно верить. Сценарий модели открывается кнопкой «Моделировать сценарии», а позже — из «Моделей и сценариев проекта».

Если что-то пошло не так

• Красная плашка «MMM не построена…», кнопка «Моделировать сценарии» неактивна → общая модель не получилась. «Новый расчет»: возьмите период длиннее или гранулярность мельче, чтобы точек было больше, и не ставьте «Точность расчёта» в крайнее левое положение.
• «Неточный прогноз…» → «Новый расчет»: другие или более крупные срезы, точность «Стандарт» и правее, период длиннее.
• «Надёжная модель не построена — результаты ненадёжны» → то же: «Новый расчет» с другими настройками.
• «Проверка на скрытых месяцах для этой связки не проводилась» или «…появится после пересчёта модели» → модель посчитана до появления проверки, пересчитайте её.
• В среднем модель стабильно завышает или занижает («В среднем модель завышает на N%») → ошибка систематическая; проверьте, не изменилось ли что-то в последние месяцы (новый канал, акция).

Дальше

• Правки в сценарии
• P10–P90 и обратный расчёт
• Оптимизатор бюджета