Это практическое руководство о том, как построить выборку для торгового аудита, ценового мониторинга и исследований в точке продаж, сколько точек закладывать на сеть и город и какие ошибки чаще всего делают результат непригодным для решений. Для трейд-маркетинга, продаж, инсайт-команд и всех, кто заказывает полевые исследования.
С чего начинается выборка: универсум
Выборка всегда представляет что-то конкретное. Прежде чем считать точки, нужно назвать это «что-то» — универсум: совокупность магазинов, о которой будут делаться выводы. Универсум задаётся тремя решениями.
- Каналы и форматы. Только федеральные сети или вся современная торговля; гипермаркеты, супермаркеты, магазины у дома, дискаунтеры; нужна ли традиционная розница.
- География. Вся страна, приоритетные регионы или конкретные города.
- Правило включения точки. Например, наличие категории на полке, собственная дистрибуция бренда, точки маршрутов агентства или адресная программа акции.
На выходе — перечень точек с признаками: сеть, формат, регион, населённый пункт и его размер. Из этого перечня отбирается выборка, поэтому его качество напрямую определяет качество результата. Как поддерживать перечень в актуальном состоянии, разобрано в статье «Сенсус торговых точек: зачем актуализировать базу розницы».
Три задачи — три разные выборки
Самая частая ошибка начинается до любых расчётов: одну и ту же логику выборки применяют к задачам, у которых разный универсум. На практике встречаются три типа задач.
Задача 01
Оценка мерчандайзеров или агентства — выборка по территориям
Вопрос здесь не «что происходит на рынке», а «как работает конкретный исполнитель». Универсум — точки маршрутов агентства, а выборка привязывается к территориям: к каждому мерчандайзеру, супервайзеру или зоне ответственности. Иначе оценку нельзя будет связать с тем, кто отвечает за результат.
Задача 02
Контроль промо — выборка из точек, где идёт акция
Универсум — адресная программа промо: сети, форматы и магазины, где акция должна проводиться. Магазины вне программы в выборку не включаются, иначе исполнение окажется заниженным. Время поля тоже задаётся акцией: первые дни после старта, чтобы успеть исправить отклонения, и середина периода.
Задача 03
Общие показатели рынка — репрезентативная выборка
Цены, дистрибуция, доля полки, доля коммуникации описывают категорию в целом и сравниваются между сетями и периодами. Универсум — вся розница выбранных каналов и регионов, а выборка должна воспроизводить её структуру по сетям, форматам и населённым пунктам. Именно для этой задачи действуют принципы ниже.
Пример: оценка агентства
Агентство обслуживает 2 000 точек силами 40 мерчандайзеров, по 50 точек на каждого. Если взять 200 точек случайно по всему списку, на одного мерчандайзера в среднем придётся 5 проверок, а на кого-то — 1–2: по такой выборке можно оценить агентство в целом, но не каждого сотрудника. Если задача — рейтинг мерчандайзеров и привязка бонуса, выборка строится по 8–10 точек на каждую территорию, оценка накапливается за несколько волн, а точки внутри территории от волны к волне меняются, чтобы проверка не была предсказуемой. Подробнее — в статье «Платите агентству за результат: аудит по OSA и доле полки».
Пример: контроль промо
Промо идёт в 1 200 магазинах одной федеральной сети в трёх регионах. Выборка — из этих 1 200 точек, по каждому региону отдельно и пропорционально форматам, с первой волной на 2–3 день акции.
Четыре принципа репрезентативной выборки
- 01
Сопоставимые сети и форматы. Если результат будет сравниваться по сетям, точность оценки по каждой сети должна быть сопоставимой — для этого задаются минимум и максимум точек на сеть (подробно ниже). Форматы внутри сети фиксируются отдельно: выкладка, ассортимент и промо в гипермаркете и магазине у дома одной вывески различаются кратно.
- 02
Распределение по стратам по численности населения. Населённые пункты делятся на группы, и выборка распределяется между ними пропорционально тому, сколько точек универсума приходится на каждую группу.
- 03
Случайный отбор внутри групп. Перечень делится на группы — сеть, формат, страта, — и внутри каждой точки отбираются случайно. Не по близости к офису, не по списку «показательных» магазинов от сети и не по выбору исполнителя. Образцовые магазины покажут образцовую полку, а ближайшие к маршрутам — то, что мерчандайзер успел поправить.
- 04
Сопоставимость состава между волнами. Динамика имеет смысл, только если от волны к волне меняется рынок, а не структура выборки. Между волнами сохраняется число точек в каждой группе: сеть × формат × населённый пункт. Сами магазины можно менять на сопоставимые — та же сеть, тот же населённый пункт, тот же формат, — и каждая замена документируется.
| Страта | Численность населения | Пример: доля магазинов сети |
|---|---|---|
| 1 | Города-миллионники | 30% |
| 2 | 500 тыс. – 1 млн | 15% |
| 3 | 100–500 тыс. | 25% |
| 4 | Менее 100 тыс. | 30% |
Если у сети магазины распределены так, как в таблице, то и выборка по этой сети распределяется в тех же пропорциях. Цены, ассортимент, промо-политика и качество исполнения в этих группах заметно различаются, и без такого распределения результат будет описывать ту группу городов, где удобнее проводить поле.
У сопоставимых замен есть дополнительный плюс. При ежемесячных волнах с заменой части точек за квартал будет посещено больше разных магазинов, чем в одной волне: охват растёт без увеличения размера волны, а квартальные итоги опираются на более широкую базу.
Сколько точек: размер выборки и точность
Размер выборки не делает её представительной — представительность обеспечивают принципы выше. Размер определяет точность: насколько оценка из выборки может отклоняться от значения по всему универсуму.
Формула погрешности для долевых показателей
Наличие товара, доля точек с выполненным промо, доля точек с корректным ценником: при уровне доверия 95% погрешность равна ±1,96 × √(p × (1 − p) / n), где p — измеренная доля, n — число точек. Максимальна она при доле около 50%.
| Число точек в группе | Погрешность при доле 50% | Погрешность при доле 80% или 20% |
|---|---|---|
| 50 | ±13,9 п.п. | ±11,1 п.п. |
| 100 | ±9,8 п.п. | ±7,8 п.п. |
| 200 | ±6,9 п.п. | ±5,5 п.п. |
| 400 | ±4,9 п.п. | ±3,9 п.п. |
| 1 000 | ±3,1 п.п. | ±2,5 п.п. |
Из таблицы следуют три практических вывода.
Точность считается для той группы, по которой делается вывод. Общая выборка в 600 точек даёт хорошую точность по рынку в целом. Но если результат будет читаться по шести сетям в пяти регионах, в каждой ячейке окажется около двадцати точек — и разница в 10 п.п. между двумя такими ячейками может оказаться шумом. Размер закладывается от самого детального разреза, который будет обсуждаться на ревью.
Сравнение волн требует большей точности, чем разовый замер. Чтобы уверенно увидеть изменение наличия на 5 п.п. между волнами, точность каждой волны должна быть заметно лучше 5 п.п.
Географическая концентрация снижает реальную точность. Если точки сгруппированы в нескольких городах, магазины внутри одного города похожи между собой — и эффективный размер выборки меньше номинального. Лучше больше городов с меньшим числом точек в каждом, чем наоборот.
Для непрерывных показателей — доля полки, число фейсингов, цена на полке — точность зависит ещё и от того, насколько сильно показатель различается между магазинами. Её оценивают по результатам первой волны и при необходимости корректируют размер выборки до второй.
Минимум и максимум точек на сеть
Частая ошибка — взять одинаковый процент от всех сетей, например 20%. Проблема видна на простом примере: в одном городе у сети А 20 магазинов, у сети Б — 500. Когда выборка составляет заметную часть всех магазинов сети, погрешность уменьшается: в формулу добавляется поправка на конечную совокупность √((N − n) / (N − 1)), где N — число магазинов сети в городе. Для небольшой сети это существенно, для крупной — почти нет.
| Подход | Сеть А (20 магазинов) | Сеть Б (500 магазинов) | Всего точек |
|---|---|---|---|
| 20% от каждой сети | 4 точки — ±45 п.п. | 100 точек — ±8,8 п.п. | 104 |
| Одинаковая точность ±15 п.п. | 14 точек | 40 точек | 54 |
| Одинаковая точность ±10 п.п. | 17 точек | 81 точка | 98 |
Погрешность для доли 50% при уровне доверия 95%, с поправкой на конечную совокупность. При подходе «20% от каждой сети» по сети А получается 4 точки, и результат по ней непригоден: при измеренных 50% реальное значение может оказаться где угодно между 5% и 95%. Сеть Б при этом получает 100 точек — больше, чем нужно для сопоставимой точности. Если задать одинаковую точность для обеих сетей, выборка по маленькой сети поднимается почти до сплошного замера, а по крупной сокращается: 50 точек из 500 дают погрешность около ±13 п.п., 80 — около ±10 п.п.
Рабочее правило
Задать допустимую погрешность для каждой сети, рассчитать от неё минимум для небольших сетей (вплоть до всех магазинов, если их меньше 15–20) и максимум для крупных, сверх которого дополнительные точки почти не повышают точность. Итог по городу или рынку затем собирается со взвешиванием — иначе сеть А с 14 точками получит в общем результате такой же вес, как сеть Б с 40.
Взвешивание: когда квоты не пропорциональны
Для сравнения сетей выборка строится с минимумами и максимумами, а не пропорционально числу магазинов. Поэтому итог по каналу или рынку взвешивается по структуре универсума.
Вес 01
По числу точек
Если вопрос звучит как «в какой доле магазинов есть товар». В примере выше вес сети А — 20 из 520 магазинов, около 4%, сети Б — около 96%.
Вес 02
По продажам категории
Если вопрос звучит как «какая доля покупателей категории видит товар на полке». Это аналог взвешенной дистрибуции, и для управленческих решений он обычно точнее. Как взвешенные и нумерические метрики соотносятся с панелью — в статье «Независимый аудит и ритейл-панель».
Правило взвешивания фиксируется вместе с выборкой и не меняется между волнами — иначе динамика будет отражать смену весов.
Как построить выборку: восемь шагов
Определить задачу и универсум
Оценка исполнителя — выборка по территориям агентства; контроль промо — из адресной программы акции; общие показатели — репрезентативная выборка по рынку. Одна выборка на все задачи не работает: рыночную выборку нельзя привязать ни к конкретному мерчандайзеру, ни к магазинам, где идёт акция.
Проверить перечень точек
Нужна актуальная база с признаками сети, формата, региона и размера населённого пункта. В традиционной рознице за год может меняться до 15% точек. Если перечень не обновлялся, часть выборки придётся на закрытые магазины, поле сорвётся, а замены будут делаться на ходу и без правила.
Задать группы и рассчитать размер
Распределить выборку по сетям, форматам и стратам, задать допустимую погрешность для самого детального разреза, который будет обсуждаться на ревью, и от неё рассчитать минимум и максимум точек на сеть. Выводы по подгруппам из 10–15 точек без указания погрешности не делаются.
Отобрать точки случайно и утвердить правило замен
Список фиксируется до начала поля. Не берутся магазины по близости, по маршрутам мерчандайзеров или по списку от сети — смещение здесь гарантировано. Замены — только на сопоставимые точки.
Зафиксировать взвешивание
По числу точек или по продажам категории — и откуда взяты веса. Без взвешивания итог по рынку определяется тем, какая сеть получила больше точек.
Провести первую волну и проверить точность
Для непрерывных показателей — доли полки, фейсингов, цен — уточнить разброс и при необходимости скорректировать размер до второй волны.
Сохранять структуру между волнами
Магазины можно обновлять на сопоставимые, но число точек в каждой группе сохраняется. Если в одной волне в городе было 10 магазинов у дома сети, а в следующей 6, изменение показателя будет отражать изменение структуры, а не полки.
Описать выборку и подтвердить данные в отчёте
«200 точек» без описания перепроверить невозможно. В отчёте указываются задача и универсум, источник перечня и дата его актуальности, группы и квоты, правило отбора и замен, взвешивание, погрешность по каждому обсуждаемому разрезу и даты поля. Каждое наблюдение подтверждается фото с геометкой и временем визита; на платформе TopMission данные проходят многоэтапную проверку, и итоговая точность составляет 99%. Точность сбора и точность выборки — разные вещи, и в отчёте стоит показывать обе.
«Достаточно ли точек» на деле значит «можно ли этим цифрам верить»
Ответ дают не размер выборки сам по себе, а прозрачная процедура: под какую задачу строили, из какого перечня отбирали, как делили, как выбирали, как заменяли и с какой точностью читаются результаты. Если эти пункты описаны и выдержаны от волны к волне, цифры аудита становятся аргументом, который принимают и внутренние заказчики, и сеть на переговорах.