Принцип 1: краткость — не более 12 вопросов §

Оптимальная длина анкеты Brand Lift — 8–12 вопросов. Целевое время заполнения: 4–6 минут. Превышение длины ведёт к двум проблемам: росту dropout rate (неполных анкет) и усталости респондента, при которой ответы в конце анкеты становятся менее внимательными.

Типичная структура Brand Lift анкеты из 10 вопросов:

  1. Screening: категорийный фильтр («Пользуетесь ли вы [категорией]?») 2–3. Awareness (unaided + aided)
  2. Ad Recall 5–6. Brand Attitude (основной вопрос + уточнение)
  3. Purchase Intent 8–9. Демографические вопросы (возраст, пол)
  4. Контрольный вопрос качества

Всё, что не влияет на расчёт lift по четырём метрикам — awareness, ad recall, brand attitude, purchase intent — удаляется.

Принцип 2: нейтральные формулировки без подсказок §

Формулировка вопроса не должна подталкивать к определённому ответу. Это называется leading question — вопрос с встроенной оценкой.

Примеры правильных и неправильных формулировок:

Awareness (aided)

  • ✓ «Знаете ли вы бренд X?»
  • ❌ «Слышали ли вы про известный бренд X?» — прилагательное «известный» создаёт positive framing

Ad Recall

  • ✓ «Видели ли вы рекламу бренда X за последние 2 недели?»
  • ❌ «Видели ли вы яркую новую рекламу бренда X?» — «яркую» и «новую» подсказывают ответ

Brand Attitude

  • ✓ «Как вы относитесь к бренду X? (шкала 1–5, где 1 — крайне негативно, 5 — крайне позитивно)»
  • ❌ «Согласны ли вы, что бренд X лучше конкурентов?» — сравнение заложено в вопросе

Purchase Intent

  • ✓ «Насколько вероятно, что вы приобретёте продукт бренда X в ближайшие 3 месяца?»
  • ❌ «Хотели бы вы попробовать отличный продукт от бренда X?» — «отличный» — оценочное слово

Разницу между awareness и ad recall как метриками — как формулируется каждый вопрос и что он меряет — см. в статье Awareness vs Ad Recall.

Принцип 3: последовательность awareness → recall → attitude → intent §

Порядок вопросов в анкете должен следовать логике воронки восприятия. Нельзя спрашивать о purchase intent до того, как зафиксировано awareness — прайминг от позднего вопроса искажает ответы на ранний.

Правильная последовательность:

  1. Awareness (unaided) — «Какие бренды [категории] вы знаете?»
  2. Awareness (aided) — «Знаете ли вы следующие бренды?»
  3. Ad Recall — «Видели ли рекламу бренда X за последние 2 недели?»
  4. Brand Attitude — «Как вы относитесь к бренду X?»
  5. Purchase Intent — «Насколько вероятна покупка?»

Почему нельзя менять порядок: если спросить сначала «как вы относитесь к бренду X?», а потом «знаете ли вы бренд X?» — второй вопрос становится прайминговым. Ответы на awareness окажутся завышены, потому что упоминание бренда в attitude-вопросе уже «напомнило» о нём.

Принцип 4: контрольные вопросы для качества выборки §

Контрольные вопросы отсеивают некачественные ответы трёх типов:

Speeders — респонденты, прошедшие анкету слишком быстро (менее 40% от медианного времени заполнения). Признак кликания без чтения.

Straight-liners — одинаковый ответ на все вопросы шкалы. Например, все пятёрки на 5-балльной шкале attitude по всем брендам. Признак нечестного заполнения.

Honesty check — вопрос с заведомо ложным «бренд-ловушкой»: «Знакомы ли вам бренды X, Y, Z?», где Z — несуществующий бренд. Ответивший «да» на несуществующий бренд исключается из выборки.

Стандарт отрасли: 3–5% анкет отсеивается после контроля качества. Если процент отсева превышает 10%, это сигнал проблемы в дизайне анкеты или в источнике панели.

Принцип 5: идентичность тест и контрольной групп §

Анкеты тест- и контрольной групп должны быть идентичны — вплоть до формулировки каждого вопроса и порядка вариантов ответа. Любое различие между группами становится confounding variable — дополнительным источником разброса, который невозможно отделить от эффекта рекламы.

Типичная ошибка: в тест-группу добавляют вопрос «опишите рекламу, которую вы видели» — этот вопрос заставляет респондента вспоминать рекламу, что повышает ad recall и brand attitude искусственно.

Единственное допустимое различие: в тест-группе могут быть показаны скриншоты или описания рекламного материала после основных вопросов — только в post-exposure блоке и только после всех ключевых метрик.

Методологию контрольной и тестовой групп подробнее разбираем в статье Контрольная и тестовая группы в Brand Lift.

Принцип 6: pretest на 50 респондентах до основной волны §

Pretest — это мини-запуск анкеты перед основным исследованием. 50 респондентов из целевой аудитории, те же условия рекрутинга. Цели pretest:

  • Проверить среднее время заполнения (должно быть 4–6 минут)
  • Обнаружить вопросы с аномально высоким dropout (>15% в одном вопросе — сигнал проблемы)
  • Проверить формулировки: если более 20% выбирают «затрудняюсь» — вопрос непонятен
  • Проверить технические аспекты: корректное отображение шкал на мобильных устройствах

Pretest занимает 3–5 дней и стоит существенно меньше, чем перезапуск основного исследования с переформулированными вопросами.

Главное §

  • Качество анкеты Brand Lift определяется шестью принципами; нарушение любого из них искажает данные или делает их несопоставимыми.
  • Оптимальная длина анкеты — 8–12 вопросов, целевое время заполнения 4–6 минут.
  • Формулировки вопросов должны быть нейтральными — без оценочных слов вроде «известный», «яркий», «отличный».
  • Порядок вопросов следует воронке восприятия: awareness → ad recall → brand attitude → purchase intent; смена порядка создаёт прайминг.
  • Анкеты тест- и контрольной групп должны быть идентичны вплоть до формулировки каждого вопроса и порядка вариантов ответа.
  • Контрольные вопросы отсеивают speeders, straight-liners и ответы на бренд-ловушку; pretest на 50 респондентах проводится до основной волны.

Что дальше §