Отчёт, в котором видно, где данные доказывают

Три сегмента, две разницы: одна значима, вторая — шум. Предел выборки посчитан и записан в отчёт, а не спрятан.

Что на входе

Ответы четырёхсот двенадцати респондентов по трём сегментам и один вопрос: готовы ли клиенты доплачивать за сборку. Ни весов, ни панели — потому в отчёте есть отдельный раздел «чего не хватает».

Доли с интервалами и вердикт по каждой разнице

Половина «инсайтов» в таких отчётах — шум: у каждой разницы стоит проверка.

Предел выборки

Сколько респондентов нужно, чтобы увидеть разницу в пять пунктов.

  1. 1

    Считано, а не на глаз

    Минимальная различимая разница при 120–150 респондентах в сегменте — около пяти пунктов.

Что в файле и как проверить

Лист «Выборка и метод»размер, погрешность по выборке, чего нет
Лист «Результаты»доли, интервалы, z и p по двум парам сегментов
Лист «Предел выборки»MDE и вывод, что доказать нельзя
Проверкаформулы z и p стоят в ячейках: поменяйте долю — увидите, как меняется значимость

Сценарий в системах: вход, шаги, выход

Форма/панель · читаем — по запросуСырые ответы: выгрузка CSV или API панели. Условие: доступ к выгрузке. Срок — день.
Таблица · пишем — по запросуРасчётная книга с интервалами и проверкой гипотез в вашем формате. Условие: куда положить.
CRM · читаем — по запросуСегменты по сделкам, чтобы сверить самоопределение респондента с фактической покупкой. Вебхук Битрикс24, срок — два дня.
Метрика · читаем — фактПоведение сегментов на сайте: доля дошедших до заявки.

Что подключим: обещание с условием

Выгрузка опроса — по запросучитаем: сырые ответы CSV или API панели · пишем: расчётную книгу · нужно: доступ к выгрузке · срок: день
Битрикс24 — по запросучитаем: сегменты по фактическим сделкам, чтобы сверить самоопределение с покупкой · нужно: вебхук с правами CRM · срок: два дня
Яндекс Метрика — работаетчитаем: долю сегментов, дошедших до заявки · пишем: ничего · нужно: доступ к счётчику · срок: день
Google Таблицы — по запросупишем: книгу расчётов в ваш формат · нужно: куда положить · срок: день

Что ещё берёт агент

Что обычно возражают

  • «Тогда зачем такое исследование?»

    Затем, что оно говорит, где доказанное кончается: сегмент B можно брать в работу, сегмент C — нет.

  • «Добавьте респондентов, чтобы всё стало значимым»

    Можно, но дешевле уточнить вопрос: разница в пару пунктов не изменит решение.

  • «А если выборка неслучайная?»

    Тогда проценты нельзя переносить на рынок. Это написано в отчёте, а не спрятано в сноске.

Вопросы

Что считается доказанным?

Разница, у которой p ниже пяти процентов и которая больше предела выборки.

Можно проверить расчёт?

Да: в файле формулы z, интервалов и MDE, а не готовые числа.

Чем отчёт отличается от выгрузки?

Выгрузка показывает проценты, отчёт — что из них следует и что не следует.

  • Формулы в ячейках
  • Предел выборки назван
  • Данные кейса сконструированы
  • Вывод — за владельцем

Роли

Справки

Разберём ваше исследование

Пришлите выгрузку ответов — вернём отчёт с границами доказанного.