Количественные и качественные опросные исследования

Считать ответы или понимать их? Один этот вопрос отделяет количественное исследование от качественного, и неверный выбор тратит время и деньги впустую. Количественное исследование говорит вам, сколько и насколько; качественное говорит, почему и как. Это руководство объясняет оба подхода, когда какой из них уместен, как сочетать их в опросе со смешанными методами и как избежать ошибок анализа, свойственных каждому.

• Что такое количественное исследование?
• Что такое качественное исследование?
• Ключевые различия с первого взгляда
• Когда выбирать количественный подход
• Когда выбирать качественный подход
• Опросы со смешанными методами
• Анализ каждого типа
• Ловушки, свойственные каждому подходу
• Часто задаваемые вопросы

Что такое количественное исследование?

Количественное исследование собирает структурированные числовые данные, которые можно подсчитать, усреднить и статистически проверить. В контексте опроса это означает закрытые вопросы, шкалы оценок, варианты с одиночным и множественным выбором, которые дают точки данных, агрегируемые по большой выборке. Его сила — в измерении: оно говорит вам, какая доля клиентов удовлетворена, как различается ценовая чувствительность между сегментами или сдвинуло ли изменение тот или иной показатель. Поскольку оно опирается на числа и достаточные объёмы выборки, его выводы можно распространить на более широкую совокупность с известной погрешностью.

Что такое качественное исследование?

Качественное исследование собирает неструктурированные, описательные данные — слова, истории и наблюдения, — чтобы понять смысл, мотивацию и контекст. В опросах оно живёт в открытых вопросах; в более широком смысле оно включает интервью и фокус-группы. Его сила — в глубине: оно раскрывает, почему люди ведут себя именно так, какой язык они используют и какие проблемы для них важны, включая вопросы, которые вам и в голову не пришло бы задать. Оно работает с малыми выборками, потому что цель — озарение, а не статистическое обобщение.

Ключевые различия с первого взгляда

• Данные: количественные — числовые и структурированные; качественные — текстовые и открытые.
• Вопрос: количественное отвечает на «сколько / насколько»; качественное отвечает на «почему / как».
• Выборка: количественному нужно много респондентов для надёжности; качественному нужны немногие, но содержательные ответы.
• Анализ: количественное использует статистику; качественное использует тематическое кодирование.
• Результат: количественное даёт проценты и тенденции; качественное даёт темы и цитаты.
• Обобщаемость: количественные результаты обобщаются на совокупность; качественные результаты проливают свет, но не обобщаются статистически.

Когда выбирать количественный подход

Выбирайте количественный подход, когда нужно измерить, сравнить или отследить. Оценка объёма рынка, отслеживание удовлетворённости во времени, сравнение сегментов, тестирование цены или расстановка приоритетов функций по числу желающих каждой — всё это требует чисел из репрезентативной выборки. Количественный подход уместен и тогда, когда вы уже понимаете проблемное поле и вам просто нужно узнать масштаб. Исследования цен — наглядный пример, где структурированные методы дают сопоставимые числа по всем респондентам.

Когда выбирать качественный подход

Выбирайте качественный подход, когда вы исследуете, диагностируете или ищете нужный язык. Выход на новый рынок, изучение причин падения показателя, понимание эмоциональных движущих сил выбора или выработка гипотез, которые вы позже проверите, — всё это качественные задачи. Это верный первый шаг всякий раз, когда вы ещё недостаточно знаете, чтобы составить хорошие закрытые вопросы, ведь навязывание преждевременной структуры скрыло бы те самые озарения, которые вам нужны. Открытое исследование подсказывает, что измерять, когда вы перейдёте к количественному подходу.

Опросы со смешанными методами

На практике самое сильное исследование часто сочетает оба подхода. Опрос со смешанными методами объединяет преимущественно закрытые вопросы, дающие поддающиеся подсчёту тенденции, с несколькими открытыми вопросами, которые объясняют эти тенденции словами самих респондентов. Вы можете измерить, что удовлетворённость упала до 70 %, а затем прочитать открытые комментарии и узнать, что причина — задержки доставки. Последовательность тоже важна: распространённая схема — сначала качественные интервью, чтобы выявить проблемы и язык, затем количественный опрос, чтобы измерить, насколько широко распространена каждая проблема, и наконец качественное продолжение, чтобы объяснить любые неожиданности. Наши опросы для исследования рынка созданы для поддержки такого сочетания, а для постоянных программ формат опроса об обратной связи по продукту по умолчанию объединяет оценки с открытыми комментариями.

Анализ каждого типа

Количественный анализ начинается с частот и средних значений, затем переходит к сегментам и перекрёстным таблицам, чтобы найти различия между группами, всегда сообщая результаты с их погрешностью, чтобы аудитория знала, насколько они точны. Качественный анализ использует тематическое кодирование: прочитать ответы, пометить повторяющиеся идеи, сгруппировать их в темы, а затем подсчитать, как часто встречается каждая тема, чтобы даже открытый текст давал измеримую картину. Оба подхода дополняют друг друга: числа показывают, что происходит, а темы показывают почему, — именно поэтому исследование со смешанными методами так убедительно для заинтересованных сторон. Если вы выбираете инструмент, который хорошо справляется и с аналитикой по закрытым вопросам, и с кодированием открытого текста, наше сравнение SurveyMaker и Jotform охватывает различия в отчётности.

Ловушки, свойственные каждому подходу

Каждый метод даёт сбой по-своему. Классическая количественная ловушка — ложная точность: сообщать число вроде 73 % без его погрешности, отчего зашумлённая оценка выглядит как факт. Родственная ловушка — относиться к нерепрезентативной выборке так, будто она говорит за всю совокупность, отчего опрос ваших самых лояльных клиентов превращается в утверждение о рынке. Количественная работа также подталкивает путать корреляцию с причинностью: видя, что два показателя движутся вместе, предполагать, что один вызвал другой.

Классическая качественная ловушка — чрезмерное обобщение: услышав один и тот же яркий комментарий от трёх респондентов, представить его как мнение большинства, тогда как качественные выборки слишком малы, чтобы подкрепить такие утверждения. Другая — предвзятость подтверждения при кодировании, когда аналитик бессознательно помечает ответы так, чтобы они совпадали с предпочтительным выводом; вы защищаетесь от этого, определяя темы до чтения или поручая второму человеку независимо закодировать часть данных. Осознание того, что количественный подход рискует избыточной уверенностью, а качественный — избыточной интерпретацией, удерживает вас честным в обоих режимах, и именно поэтому представление обоих вместе — чисел для масштаба и цитат для смысла — даёт исследование, которому доверяют заинтересованные стороны.

Ещё одно правило применимо к обоим: всегда связывайте вывод с решением, которое он обосновывает. Красивый график или запоминающаяся цитата, не меняющие того, что вы делаете, — это украшение, а не исследование. Будь ваше доказательство процентом или темой, критерий хорошего анализа один и тот же, а именно: подводит ли он вас к более ясному и лучше обоснованному выбору, чем тот, который вы могли бы сделать без него.

Часто задаваемые вопросы

В чём разница между количественным и качественным исследованием?

Количественное исследование собирает числовые, структурированные данные от многих людей, чтобы измерить, сколько или насколько, и поддерживает статистический анализ. Качественное исследование собирает насыщенные, открытые данные от меньшего числа людей, чтобы понять, почему и как, выявляя мотивы, язык и контекст. Количественное отвечает на масштаб явления; качественное объясняет его смысл.

Может ли один опрос быть одновременно количественным и качественным?

Да. Многие опросы используют смешанные методы: преимущественно закрытые вопросы, дающие поддающиеся подсчёту данные, плюс несколько открытых вопросов, фиксирующих причины и цитаты. Такое сочетание позволяет измерить тенденцию численно, а затем прочитать собственные слова респондентов, чтобы понять, что её движет. Открытые ответы также можно закодировать в темы и подсчитать, наводя мост между двумя подходами.

Что делать первым — качественное или количественное?

Обычно сначала качественное, когда вы исследуете незнакомую проблему, потому что оно раскрывает, какие вопросы задавать и какой язык использует ваша аудитория. Затем количественное, чтобы измерить, насколько широко распространён каждый вывод. Обратная последовательность тоже работает: проведите количественный опрос, заметьте неожиданный результат, а затем используйте качественное продолжение, чтобы его объяснить.

Сколько людей мне нужно для каждого?

Количественному исследованию нужна выборка, достаточно большая для статистической надёжности, — часто несколько сотен респондентов для достижения обычных целевых значений уровня доверия и погрешности. Качественному исследованию нужно гораздо меньше, нередко менее 30, потому что цель — глубина и достижение тематического насыщения, точки, в которой новые беседы перестают раскрывать новые темы, а не статистическая репрезентативность.