Разберитесь в разнице между открытыми и закрытыми вопросами опроса, в сильных и слабых сторонах каждого типа и в том, как сочетать их для получения более глубоких выводов.
Каждый вопрос опроса относится к одному из двух больших семейств: открытые вопросы, которые предлагают респондентам ответить своими словами, и закрытые вопросы, которые предлагают фиксированный набор вариантов. Выбор между ними — или, что лучше, их удачное сочетание — одно из самых значимых решений в проектировании опроса. От него зависит, насколько богаты ваши данные, как быстро вы сможете их проанализировать и насколько уверенно вы сможете действовать по результатам. Это руководство сравнивает оба типа и даёт практические советы о том, когда применять каждый.
Определения и примеры
Закрытые вопросы ограничивают ответы заранее заданными вариантами. К ним относятся вопросы с выбором ответа, «да/нет», шкалы оценки, ранжирование и вопросы с выпадающим списком. Пример: «Насколько вы довольны нашим процессом оформления заказа?» по шкале от 1 до 5. Респондент выбирает; развернуть ответ он не может.
Открытые вопросы позволяют респондентам отвечать свободно текстом (или голосом). Пример: «Что, если что-либо, вызвало у вас раздражение при оформлении заказа?» Респондент пишет что хочет, своими словами и такой длины, какой пожелает.
Различие не в важности — оба необходимы, — а в том, какого рода данные они дают. Закрытые вопросы дают количественные данные, которые можно подсчитать и представить на графике; открытые вопросы дают качественные данные, богатые нюансами и неожиданными деталями. Полезный способ запомнить этот компромисс: закрытые вопросы просты для респондентов и просты для вас, открытые вопросы сложнее для респондентов и сложнее для вас, и эти дополнительные усилия с обеих сторон — как раз то, что покупает более глубокое понимание, которое дают только открытые вопросы. Ни одно из семейств не является вариантом по умолчанию; правильное сочетание целиком зависит от того, что вы пытаетесь узнать, и от того, насколько далеко продвинулось ваше исследование.
Закрытые вопросы: сильные и слабые стороны
Закрытые вопросы блистают масштабом и скоростью. Респонденты отвечают на них быстро, что повышает процент завершений, и они до предела просты в анализе — вы можете мгновенно вычислять проценты, средние значения и тенденции и сравнивать результаты по тысячам респондентов или во времени. Они стандартизируют ответы, так что каждый респондент измеряется по одной и той же мерке, а это необходимо для отслеживания показателя на протяжении месяцев.
Их слабость — жёсткость. Респондент может выбрать только из предусмотренных вами вариантов, поэтому вы рискуете упустить причины, о которых никогда не задумывались. Плохо составленные списки вариантов — недостающие варианты, пересекающиеся категории, отсутствие «запасного выхода» в виде «другое» — вынуждают респондентов давать неточные ответы. И закрытые вопросы раскрывают, что люди думают, но редко — почему. Стандартизированные показатели, такие как опрос NPS, опираются на закрытую шкалу от 0 до 10 именно потому, что эта согласованность позволяет надёжно сравнивать и отслеживать динамику показателя.
Открытые вопросы: сильные и слабые стороны
Открытые вопросы превосходны в открытии нового. Они выявляют мотивы, эмоции и проблемы, которых вы не предвидели, улавливают собственную лексику респондента (бесценную для маркетинговых текстов и нейминга продуктов) и дают голос неожиданному пограничному случаю, который оказывается важным. Они идеальны на ранних этапах исследования, когда вы ещё не знаете полной картины возможных ответов.
Цена — усилия, с обеих сторон. Написание вдумчивого ответа занимает больше времени, поэтому открытые вопросы могут снижать процент откликов и завершений, особенно при чрезмерном их использовании. Анализ трудоёмок: ответы нужно прочитать, закодировать по темам и подсчитать, прежде чем их можно будет обобщить. А свободный текст провоцирует расплывчатые или не относящиеся к делу ответы, добавляющие шум. Практическое правило — применять открытые вопросы умеренно и целенаправленно.
Когда применять каждый
Применяйте закрытые вопросы, когда вам нужны измеримые, сопоставимые данные; когда вы уже знаете реалистичный диапазон ответов; когда размеры выборки велики; и когда вы хотите согласованно отслеживать показатель во времени. Они — основа отслеживания удовлетворённости, сегментации и любого исследования, где вы будете сообщать проценты.
Применяйте открытые вопросы, когда вы исследуете новое проблемное пространство, когда вам нужны подлинные рассуждения респондента, когда вы разбираетесь в неожиданном результате закрытого вопроса или когда совокупность достаточно мала, чтобы прочитать каждый ответ. Разведочное исследование — например, ранние ознакомительные интервью со SaaS-стартапами прежде, чем вы поймёте их рабочие процессы, — сильно опирается на открытые вопросы.
Сочетание обоих для более глубоких выводов
Самые мощные опросы сочетают оба типа. Проверенный приём — закрытый вопрос, за которым следует открытый уточняющий: попросите оценку, а затем спросите почему. «Насколько вероятно, что вы порекомендуете нас?» (0–10), а затем «Какова главная причина вашей оценки?» даёт вам отслеживаемое число и стоящий за ним рассказ. Именно поэтому даже строго количественные методики включают один открытый уточняющий вопрос.
Другой приём — начать с открытых, а затем перейти к закрытым по фазам исследования: проведите небольшое качественное исследование с открытыми вопросами, чтобы изучить обстановку, используйте возникшие темы для составления обоснованных закрытых вариантов, а затем запустите крупный количественный опрос, чтобы измерить, насколько распространена каждая тема. Структурированное маркетинговое исследование часто следует именно этой последовательности. Открытая фаза гарантирует, что ваши закрытые варианты исчерпывающи и взаимоисключающи; закрытая фаза сообщает, насколько на самом деле распространён каждый вывод.
Анализ ответов на открытые вопросы
Чтобы превратить свободный текст в пригодные к использованию выводы, закодируйте его. Прочитайте репрезентативную партию ответов, выявите повторяющиеся темы и постройте кодовую книгу — список категорий с чёткими определениями. Пометьте каждый ответ одним или несколькими кодами, а затем подсчитайте частоты кодов, чтобы количественно оценить качественные данные. Сохраняйте дословные цитаты, чтобы придать отчётам живость; числа убеждают, но меткая цитата клиента делает вывод запоминающимся. Современные инструменты, включая анализ текста с помощью ИИ, могут кластеризовать и обобщать большие объёмы открытых ответов, но всегда выборочно проверяйте категории машины по исходному тексту, прежде чем доверять им.
Хорошие кодовые книги обладают несколькими общими чертами. Категории должны быть достаточно взаимоисключающими, чтобы кодировщик редко мучился, куда отнести ответ, и при этом достаточно исчерпывающими, чтобы корзина «другое» оставалась небольшой. Когда два человека кодируют одни и те же ответы, их согласие — иногда формально измеряемое как межэкспертная надёжность — показывает, ясна ли кодовая книга или категории размыты. Если согласие низкое, решение обычно в более чётких определениях и нескольких примерах ответов на каждый код, а не в большем числе кодировщиков. Стройте кодовую книгу на основе первого прохода по реальным ответам, а не навязывайте категории, которые вы вообразили заранее, ведь весь смысл открытых вопросов — уловить темы, которых вы не предвидели.
Написание эффективных открытых вопросов — это своё небольшое ремесло. Расплывчатые подсказки вроде «Есть ли другие комментарии?» приглашают к расплывчатым ответам; конкретные подсказки вроде «Что единственное мы могли бы изменить, чтобы упростить оформление заказа?» фокусируют внимание и дают поддающиеся кодированию ответы. Закрепите респондента в конкретном моменте или решении, избегайте спрашивать о двух вещах сразу и делайте подсказку короткой. Метко нацеленный открытый вопрос нередко даёт больше пригодных к использованию выводов в одном поле, чем три пространных, — ещё одна причина применять их умеренно и составлять с тщанием.
Часто задаваемые вопросы
Что лучше — открытые или закрытые вопросы? Ни один не лучше повсеместно; они отвечают на разные вопросы. Закрытые вопросы эффективно дают измеримые, сопоставимые данные, тогда как открытые вопросы раскрывают рассуждения и неожиданности за числами. Лучшие опросы осознанно используют оба типа.
Сколько открытых вопросов должно быть в опросе? Применяйте их умеренно — часто от одного до трёх на опрос, — поскольку они требуют усилий для ответа и могут снижать процент завершений. Распространённая передовая практика — один открытый уточняющий вопрос после ключевого закрытого.
Как анализировать открытые ответы в больших масштабах? Закодируйте текст по темам с помощью кодовой книги, а затем подсчитайте частоты тем, чтобы количественно оценить результаты. Анализ текста с помощью ИИ может кластеризовать и обобщать большие объёмы, но вам следует сверить категории с исходными ответами.
Снижают ли открытые вопросы процент откликов? Могут, особенно когда их несколько или они появляются рано. Размещение одного, явно необязательного открытого вопроса ближе к концу, после более простых закрытых вопросов, сводит к минимуму влияние на завершаемость.
Легко сочетайте закрытые и открытые вопросы с SurveyMaker, а затем позвольте ИИ обобщить ваши свободные текстовые ответы.
Создайте опрос бесплатно или начните с шаблона маркетингового исследования.