Коротко о главном
Базовый период показывает, в каких условиях товар работал до изменения. Без него новый результат сравнивают с памятью менеджера или случайной удачной неделей. Подготовка исходной точки занимает меньше времени, чем последующий спор о том, действительно ли реклама что-то улучшила.
- База должна соответствовать задаче и циклу спроса.
- Сохраняйте условия товара вместе с метриками.
- Нарушенный тест лучше признать, чем переобъяснять.
1. Определите вопрос эксперимента
Запишите, какое решение проверяется: новый источник, изменение ставки, рекламное сообщение или группа запросов. От вопроса зависит состав исходных данных. Для проверки изображения важны показы и переходы при сопоставимом предложении; для бюджета — дополнительный экономический результат и ограничения запаса.
Сразу обозначьте единицу сравнения и основную метрику. Если вопрос сформулирован после получения результата, появляется соблазн выбрать показатель, который случайно улучшился. Подготовленный заранее документ не делает тест идеальным, но ограничивает произвольную интерпретацию.
2. Выберите сопоставимую историю
Базовый период должен включать характерный для товара ритм спроса. Для некоторых задач важно покрыть повторяющиеся дни недели; для сезонного товара необходим более широкий контекст. Универсальная длина периода без знания объёма трафика и поведения покупателей не существует.
Исключения помечайте с причиной, а не удаляйте молча. Неделя с отсутствием товара может быть непригодна для сравнения конверсии, но важна для понимания ограничений бизнеса. Сохраните исходную историю и отдельную аналитическую выборку, чтобы другой человек мог воспроизвести подготовку данных.
3. Запишите состояние предложения
Сохраните цену, комплект, доступные варианты, остатки, сроки доставки и основные изображения. Добавьте события конкуренции, если они известны и существенны: крупная акция в сегменте или появление заметного нового предложения. Не превращайте предположения о рынке в установленные факты.
Для каждого поля укажите источник и дату. Скриншот текущей карточки через неделю не заменяет состояние на старте. Даже простая папка с версиями и таблица событий дадут больше пользы, чем воспоминание «кажется, цена была такая же».
4. Сведите базовые показатели
В условном базовом периоде получено 500 кликов, 25 учтённых заказов и 5 000 ₽ расходов. Конверсия составляет 5%, цена заказа — 200 ₽. Это исходное наблюдение, а не норматив, который новая кампания обязана повторить. Укажите, какие заказы успели завершиться и какие ещё предварительны.
Рядом полезно сохранить ежедневные значения. Одна общая сумма может скрыть сильные колебания и короткий сбой. Если половина расхода пришлась на один необычный день, средняя цифра плохо описывает обычную работу. Такой контекст влияет на выбор следующего периода и ожидаемую неопределённость.
| Показатель базы | Условное значение |
|---|---|
| Клики | 500 |
| Заказы | 25 |
| Расход | 5 000 ₽ |
| Конверсия | 5% |
| Цена заказа | 200 ₽ |
5. Задайте правила нарушения теста
Перечислите события, после которых результат нельзя интерпретировать прежним способом: существенное изменение цены, отсутствие главного варианта, техническая ошибка ссылки, параллельная акция или смена аудитории. Не нужно запрещать необходимые действия бизнеса ради чистоты эксперимента.
Нужно заранее понимать последствия. Например, тест продолжается как наблюдение, но причинный вывод откладывается; либо запускается заново после стабилизации условий. Это решение должно зависеть от характера нарушения и бюджета. Молчаливое игнорирование события создаёт более дорогую ошибку на этапе масштабирования.
6. Подготовьте пакет передачи
Соберите паспорт теста, исходную выгрузку, версии карточки, календарь событий и критерий решения. Назначьте дату итоговой проверки и ответственного. Если другой менеджер сможет понять задачу без устного пересказа, подготовка достаточно ясна.
Чек-лист перед стартом: вопрос один; источник данных доступен; базовый период объяснён; условия сохранены; ограничения заданы; правило неопределённого результата есть. После завершения не переписывайте исходную гипотезу под фактическую динамику. Сравнение ожидания и результата является главным полезным материалом для следующего решения.
7. Как хранить исходные данные без путаницы
Используйте понятное имя папки с датой, товаром и идентификатором теста. Внутри разделите исходные выгрузки, расчёт и версии материалов. Исходный файл лучше сохранять отдельно от рабочей таблицы, где применяются фильтры и формулы. Это позволяет вернуться к данным, если обнаружилась ошибка подготовки.
В кратком описании укажите, какие строки исключены и почему, как рассчитаны показатели и какой источник является главным для каждого события. Не нужно создавать сложную систему хранения ради одного маленького теста. Достаточно, чтобы коллега смог повторить расчёт и понять ограничения без длинной переписки.
После окончания добавьте итоговый документ в ту же папку, сохранив первоначальный план. Если гипотеза изменилась по ходу работы, запишите новую версию с датой и причиной. Такая история особенно полезна через несколько месяцев, когда похожая идея возникает снова. Команда сможет увидеть, что уже проверялось, в каких условиях и какой вопрос тогда остался открытым, вместо повторной оплаты того же неясного эксперимента.
Источники и методика
Источники ниже помогают проверить определения и возможности отчётов. Методика разбора и учебные расчёты подготовлены редакцией HelpStat. Доступность отчётов и условия работы проверяйте в своём кабинете. Расчётные примеры в статье — учебные, а не результаты клиентов.
