Синтетические и классические исследования: сравнение
Здесь сравниваются методы исследования: что даёт фокус-группа, глубинное интервью, количественный опрос и тесты рекламы, названий, упаковки и интерфейсов, сколько участников для них обычно берут по методической литературе и где у каждого метода граница. Рядом с каждым классическим методом – что из этого можно провести как синтетическое исследование, где проходят его границы и как сочетать оба подхода. Ссылки на источники – в конце страницы.
Обновлено
Качественные и количественные методы исследования: чем отличаются
Качественное исследование – неструктурированный поисковый метод на небольшой выборке: он помогает понять, что стоит за проблемой, какие у людей мотивы и барьеры[1]. К его видам относятся фокус-группы, глубинные интервью и проекционные методы[1]; самый распространённый из них в маркетинге – фокус-группа[1]. Долю носителей того или иного мнения качественные методы не определяют – это не их задача; их результат – перечень мнений и гипотез, которые существуют в аудитории[3]. Поэтому выводы фокус-группы нельзя переносить на всю аудиторию[1][8].
Количественное исследование собирает данные в числовой форме и обрабатывает их статистически, чтобы перенести результат выборки на всю аудиторию[1].
Методы не соревнуются, а дополняют друг друга: качественный этап даёт гипотезы, количественный их проверяет[1]. Синтетическое исследование относится к первому классу.
Виды исследований: что даёт каждый метод и что можно провести синтетически
| Метод | Что даёт | Чего не даёт | Типичный объём (по литературе) | Что проводим мы | Границы синтетического варианта | Как сочетать |
|---|---|---|---|---|---|---|
| Фокус-группа | Обсуждение темы: мнения, мотивы, язык аудитории; обмен мнениями между участниками [9]; гипотезы для количественной проверки [1] | Долей и переноса выводов на всю аудиторию [1][3] | 6–10 человек в группе [4][8]; у Крюгера и Кейси – обычно 5–10, бывает 4–12 [2]. Групп в проекте чаще всего 3–5 – это описание практики, а не норма [4]; одной группы недостаточно [4] | Быстрый тест – ориентир по одной задаче; Стратегическое исследование. О самом методе – страница «Синтетическая фокус-группа» | Реплики персон смоделированы программой; это не групповая динамика живых людей. Доли в отчёте – ориентир, не замер | Синтетическое исследование – чтобы сузить число вариантов и уточнить гайд; полевые группы – по оставшимся вариантам |
| Глубинное интервью | Беседа один на один: мотивы и скрытые причины; ход беседы строится по ответам, интервьюер уточняет «почему» [1] | Долей; качество данных зависит от навыков интервьюера [1] | Насыщение по темам – около 9 интервью, по смыслам – 16–24 (одно исследование, одна тема) [12]; по обзору работ – 9–17 интервью при однородной аудитории и узкой цели [11] | Экспертное исследование – по вашему гайду интервью, строго как он задан. Беседа один на один с цифровым респондентом – по запросу, условия согласуем отдельно | Ответы смоделированы программой; это ориентир и гипотезы. Глубину ответа задают вопросы: уточнять и разворачивать тему можно, качество ответа мы не обещаем | Синтетическое исследование – проверить гайд и сформулировать гипотезы до полевых интервью |
| Количественный опрос | Доли и проверка гипотез на выборке, перенос результата на всю аудиторию [1] | Глубины «почему» без качественного этапа – поэтому его дополняют качественным [1] | Тест товара – от 200 анкет, обычно 300–500; реклама – от 150, обычно 200–300 на одно объявление; авторы называют эти величины ориентиром [1] | Не проводим – это другая методология. Вместо него: качественный этап; в каждом отчёте – план полевой проверки; по запросу – аудит и прогон вашей анкеты до полевого опроса – Экспертное исследование | – | Гипотезы синтетического исследования → проверка опросом по плану из отчёта |
| Претест рекламы и креативов | Реакция на ролик, макет, сообщение до запуска | Отклика в реальной кампании | Количественный претест – от 150 участников на одно объявление [1]; качественный – как у фокус-групп | Тест креатива, Тест сообщений | Отношение и суждение, а не поведение в кампании | Синтетическое исследование – отобрать сильные варианты; полевой претест или тест на рынке – по ним |
| Тест названия | Восприятие и ассоциации, которые вызывает название | Выбора на рынке | Отдельной нормы в методической литературе мы не нашли; качественный вариант – по нормам групп [2] | Тест названий | Отношение и суждение | Синтетическое исследование – сократить длинный список; проверка с людьми – по короткому |
| Тест упаковки и концепции | Понятность и привлекательность концепции, считываемость упаковки | Вкуса, запаха, тактильных свойств – это сенсорная оценка | Тест товара – от 200 анкет, обычно 300–500 [1]; отдельной нормы для упаковки мы не нашли | Тест упаковки, Тест продукта и концепции | Отношение и суждение; сенсорной оценки нет | Синтетическое исследование – отсеять слабые варианты; полевой тест – по финалистам |
| Ценовое исследование | Восприятие цены, пороги приемлемости | Абсолютной цены, по которой купят | Для исследований, решающих конкретную задачу (пример автора – определить цену), – от 200 анкет, обычно 300–500; ориентир [1] | Тест цены | Ранг и пороги восприятия; конкретную цифру подтверждают тестом на рынке | Синтетическое исследование – диапазон и аргументы; тест на рынке – итоговая цена |
| UX-тест (юзабилити) | Где пользователь спотыкается в сценарии | Долей и поведения на рынке | 5 участников со сходным опытом находят большую часть проблем: в модели автора – 85 % [13]; при трёх и более категориях пользователей – по 3 на категорию [13]; несколько небольших раундов вместо одного большого [13][10] | UX-тест | Суждения о сценарии, а не действия пользователя; время и успешность выполнения задач измеряют на пользователях | Синтетическое исследование – до раунда с пользователями, чтобы убрать очевидные барьеры |
| Сенсорные методы (дегустация, холл-тест) | Оценка вкуса, запаха, ощущений | – | – | Не проводим. Сенсорная оценка – отдельная методология: она требует физического контакта с продуктом | – | – |
О самой синтетической фокус-группе – на странице «Синтетическая фокус-группа». Нужного метода нет в списке? Опишите задачу – подскажем вид исследования или проведём его по вашей методологии в границах панели.
Риски методов исследования: как они устроены в классическом и синтетическом исследовании
Синтетическое исследование отличается от живого не только организацией – в нём не нужны набор участников, помещение и вознаграждение. Часть рисков, знакомых по живым исследованиям, в нём не возникает, часть принимает другую форму, а у модели есть и собственные искажения. В классических исследованиях эти риски снижают опыт и подготовка модератора и интервьюера[3]. Ниже – по строкам, без общих оценок.
| Риск | Где возникает | Что пишут методисты | Как устроено у нас |
|---|---|---|---|
| Давление группы: один участник задаёт тон, остальные подстраиваются | Фокус-группа | Если позволить одному участнику доминировать, остальные реже высказываются; возникает конформизм, «групповое мышление» [5]; давление доминирующего поведения мешает получить объективную информацию [3]; групповая динамика влияет на тип и качество информации [6] | Живого давления нет: некому перекричать остальных. Есть собственный аналог – склонность модели соглашаться и отвечать однообразно [14]. Его ограничивают: в текущей версии программы 30 % панели – скептики, лоялисты конкурента и ценово-чувствительные; при единодушии программа запрашивает возражения; слишком единодушные ответы отчёт помечает как подозрение на угодливость и снижает оценку согласованности |
| Социально желательные ответы: говорить «как принято», а не как думаешь | Фокус-группа, интервью, личный опрос | Люди отвечают через фильтр того, как они при этом выглядят [5]; склонность давать приемлемые с точки зрения общества ответы [1] | Собеседника, перед которым хочется произвести впечатление, нет. Аналог у модели – та же склонность соглашаться; ограничения те же (строка выше) |
| Влияние ведущего: кивки, улыбки, интонация подсказывают «нужный» ответ | Фокус-группа | Предвзятость модератора чаще всего выражается в одобряющих комментариях, кивках, улыбках [3]; поэтому активность модератора советуют ограничивать [3] | Невербальных сигналов, настроения и усталости ведущего нет; схема вопросов одна для каждой группы – воронка Крюгера и Кейси [2]. Цена этого – гибкость: опытный модератор развернёт неожиданную тему на месте, сценарий – нет. Для таких задач нужна полевая группа |
| Влияние интервьюера | Глубинное интервью, личный опрос | Интервьюер может влиять на результаты, а качество данных зависит от его навыков [1]; эффекты интервьюера связаны с тем, что он задаёт социальный контекст ответа [7] | В «Экспертном исследовании» гайд проводится строго как задан. В беседе один на один вопросы задаёт специалист или вы – влияние формулировок остаётся |
| Смещения ответа на шкалах: соглашаться с любым утверждением, отмечать одно и то же подряд | Количественный опрос | Угодливость шкалы – склонность соглашаться независимо от содержания вопроса; однотипные ответы на батарею вопросов [6] | Опросов мы не проводим. При аудите вашей анкеты проверяем формулировки и эти смещения |
| Формулировки вопросов и стимулов | Везде | Ответы зависят от точной формулировки, порядка вариантов и порядка вопросов [7] | Вопросы и стимулы строятся из вашего брифа – формулировки влияют на ответы и здесь. По запросу – аудит формулировок до запуска |
| Собственные искажения синтетического исследования: сужение разброса, однообразие, ложная уверенность при большом числе ответов | Синтетические панели | В проверке на опросе США ответы модели дали меньший разброс, чем ответы людей [15]; в виртуальных фокус-группах ИИ-участники от сессии к сессии чаще, чем люди, высказывали сходные мнения [14]; бездумное наращивание числа синтетических ответов грозит излишней уверенностью в результате [16] | Число респондентов задаёт охват аудитории, а не статистическую точность; доли в отчёте – ориентир, не замер. Каждый вывод привязан к репликам персон сноской. Индекс устойчивости выводов – балл 0–100 из четырёх оценок: «Согласованность», «Охват и непредвзятость», «Редкость и новизна», «Экспертная оценка»; у ключевых выводов – три метки устойчивости в таблице Excel. Индекс показывает, насколько вывод устойчив на этих данных, а не насколько он совпадёт с полевым исследованием |
Как сочетать синтетическое и классическое исследование
Качественный и количественный методы дополняют друг друга[1]: качественный этап даёт гипотезы, которые затем проверяют количественно[1]. Синтетическое исследование встаёт в эту цепочку первым шагом.
- Ориентир – синтетическое исследование. Гипотезы, причины, барьеры; отсев слабых вариантов; уточнение гайда или анкеты. Прогон программы занимает, как правило, до 1,5 часа, – это машинное время, а не срок заказа; отчёт по заказу передаём не позднее трёх рабочих дней. Перед передачей отчёт просматривает специалист с высшим маркетинговым или социологическим образованием.
- Полевая качественная проверка. Фокус-группы или глубинные интервью по оставшимся вариантам и уточнённому гайду.
- Количественная проверка. Опрос на выборке, подобранной под задачу, – когда нужны доли.
В каждом отчёте есть план полевой проверки: метод, выборка, ориентировочные бюджет и срок. Выводы синтетического исследования – гипотезы; при высокой цене ошибки их подтверждают на живой аудитории, а когда нужны доли – количественно. Какие шаги нужны вашей задаче, решаете вы.
Когда нужен полевой метод
Это границы методологии и охвата данных, а не оценка того, кто отвечает.
Нужна доля рынка или процент покупателей.
Это задача количественного опроса: абсолютную величину подтверждает опрос большой выборки.
Нужно оценить вкус, запах, ощущения.
Сенсорная оценка – отдельная методология (дегустация, холл-тест); она требует физического контакта с продуктом.
Аудитория – люди 65 лет и старше, жители малых городов или села.
Это граница охвата данных панели: 12–64 года, города от 100 тысяч жителей.
Нужно реальное поведение – покупки, клики.
Метод оценивает отношение и суждения; поведение измеряют наблюдением, данными продаж и тестом на рынке[8].
Нужна конкретная цена, по которой купят.
Тест цены показывает ранг и пороги восприятия; конкретную цифру подтверждают тестом на рынке.
Нужно связаться с респондентами повторно.
Метод строит обобщённые портреты аудитории; цитаты в отчёте – реплики участников исследования, а не контакты для связи.
Полный перечень – на странице «Виды синтетических исследований», раздел «Не подходит, если…».
Вопросы и ответы
Чем отличается качественное исследование от количественного?
Качественное отвечает на вопросы «что люди думают и почему»: небольшая выборка, свободный разговор, большая глубина погружения в мотивы и формулировки. Количественное отвечает на вопрос «сколько»: большая выборка и доли с оценкой погрешности. Фокус-группа – качественный метод: она даёт гипотезы и причины, а не точные цифры.
Какие бывают виды качественных исследований?
Среди них – фокус-группы, глубинные интервью и проекционные методы [1]; метод лестницы (laddering) – один из способов проведения глубинного интервью [1]. В маркетинге чаще всего проводят фокус-группы [1]. Синтетическое исследование – тоже качественный метод; глубинные интервью, проективные техники и метод лестницы по вашей методологии проводим в «Экспертном исследовании».
Чем фокус-группа отличается от глубинного интервью?
Глубинное интервью – беседа один на один с респондентом: раскрывает индивидуальные мотивы и личный опыт, но не показывает, как мнения складываются и сталкиваются в группе. Фокус-группа – обсуждение темы небольшой группой: видно, как мнения формируются и меняются, но участники влияют друг на друга. Мы проводим исследование по схеме фокус-группы; глубинное интервью – беседу один на один с цифровым респондентом – проводим по запросу, условия согласуем отдельно.
Можно ли заменить глубинное интервью синтетическим?
Нет – это разные методологии с разным результатом. Синтетический вариант – беседа один на один с цифровым респондентом или «Экспертное исследование» по вашему гайду – даёт ориентир и гипотезы: можно задавать уточняющие вопросы и разбирать конкретный мотив. Проверять их нужно полевыми интервью; план проверки есть в каждом отчёте.
Сколько респондентов нужно для качественного исследования?
Единой нормы нет. В фокус-группе обычно от пяти до десяти человек [2], групп – чаще всего 3–5, и это описание практики, а не стандарт [4]; в глубинных интервью насыщение в проверенных работах наступало на 9–17 беседах при однородной аудитории и узкой цели [11]. В синтетическом исследовании панель – от 8 до 50 цифровых респондентов: число задаёт охват аудитории, а не статистическую точность.
Проведёте ли вы быстрое количественное исследование? У вас более 2 000 синтетических респондентов.
Нет – это другая методология. Количественное исследование измеряет доли и проверяет гипотезы на большой выборке, подобранной и взвешенной под задачу. Мы специализируемся на качественных исследованиях: они отвечают на вопросы «что люди думают и почему», а не «сколько именно». Число 2 160 – размер нашей библиотеки профилей; панель исследования собирается из неё под задачу и составляет обычно до 50 респондентов. Что делаем вместо: качественный этап (гипотезы, причины, барьеры); в каждом отчёте – план полевой проверки (метод, выборка, ориентировочные бюджет и срок). Сам количественный опрос проводит полевое агентство.
Чем отличаются синтетические и цифровые респонденты?
Синтетический, цифровой, виртуальный респондент и ИИ-респондент – разные названия одного понятия: цифровой портрет представителя целевой аудитории, синтезированный на массиве исследовательских данных, который отвечает на вопросы исследования. От цифрового двойника он отличается тем, что не копирует конкретного человека: портрет собран по данным об аудитории.
Учитывает ли синтетическое исследование регион?
Да, если выбран слой географии. Меняется состав аудитории – он измерен по самому региону; добавляется контекст жизни региона: участники отвечают как его жители. Психологические портреты – характер, ценности, барьеры – общие для всех слоёв. Подробнее – на странице «Аудитория и панель», раздел «География».
Когда нужен полевой метод?
Когда задача требует другой методологии: точная доля рынка или процент покупателей – количественный опрос; вкус, запах и ощущения – сенсорная оценка (дегустация, холл-тест); аудитория 65 лет и старше или малые города – за границей охвата данных панели; реальное поведение и покупки – наблюдение и данные продаж. В остальных случаях, когда нужно понять, что думает аудитория и почему, синтетическое исследование – быстрый и доступный шаг: не нужно набирать участников и организовывать группы.
Источники
Методическая литература, на которую опираются утверждения о классических методах. Синтетические исследования – молодая область; работы о них приведены отдельно.
Классические методы
- Малхотра Н. К. Маркетинговые исследования. Практическое руководство. 3-е изд. / пер. с англ. – М.: Издательский дом «Вильямс», 2002.
- Крюгер Р. А., Кейси М. Э. Фокус-группы. Практическое руководство. 3-е изд. / пер. с англ. – М.: Издательский дом «Вильямс», 2003.
- Белановский С. А. Метод фокус-групп. – М.: Магистр, 1996.
- Morgan D. L. Focus Groups as Qualitative Research. – Thousand Oaks: SAGE, 1997.
- Babbie E. The Practice of Social Research. – Wadsworth, Cengage Learning, 2013.
- Peytcheva E., Yan T. A Practical Guide to Survey Questionnaire Design and Evaluation. – Routledge, 2025.
- Groves R. M. и соавт. Survey Methodology. 2-е изд. – Hoboken: Wiley, 2009.
- Kotler P., Keller K. L., Chernev A. Marketing Management. 16-е изд. – Pearson, 2022.
- Ulin P. R., Robinson E. T., Tolley E. E. Qualitative Methods in Public Health: A Field Guide for Applied Research. – San Francisco: Jossey-Bass, 2005.
- Sauro J. Customer Analytics For Dummies. – Wiley.
- Hennink M., Kaiser B. N. Sample sizes for saturation in qualitative research: A systematic review of empirical tests // Social Science & Medicine. 2022. Vol. 292. Art. 114523.
- Hennink M. M., Kaiser B. N., Marconi V. C. Code Saturation Versus Meaning Saturation: How Many Interviews Are Enough? // Qualitative Health Research. 2017. Vol. 27, № 4.
- Nielsen J. Why You Only Need to Test with 5 Users. – Nielsen Norman Group, 18.03.2000.
Исследования синтетических респондентов
- Zhang и соавт. Focus Agent: LLM-Powered Virtual Focus Group // IVA ’24. 2024 (arXiv 2409.01907).
- Bisbee J., Clinton J. D., Dorff C., Kenkel B., Larson J. M. Synthetic Replacements for Human Survey Data? The Perils of Large Language Models // Political Analysis. 2024. Vol. 32. P. 401–416.
- Huang и соавт. How Many Human Survey Respondents is a Large Language Model Worth? // ICML 2025 (arXiv 2502.17773).