Понятное объяснение метода опроса MaxDiff: как работает шкалирование «лучшее-худшее», почему оно превосходит рейтинговые шкалы и когда использовать его для приоритизации.
Если вы когда-нибудь проводили опрос, прося респондентов оценить пятнадцать функций по шкале от одного до пяти, вы наверняка замечали проблему: почти всё возвращается с оценкой четыре или пять, и вы не можете понять, чему люди на самом деле отдают приоритет. MaxDiff, сокращение от Maximum Difference Scaling (шкалирование максимальных различий), решает это. Это метод опроса, который заставляет респондентов выбирать лучший и худший элементы из небольших наборов, давая чёткое ранжирование того, что они ценят больше всего. Это руководство объясняет, как он работает и когда его применять.
Что такое MaxDiff
MaxDiff — это метод опроса для измерения относительной важности или предпочтительности списка элементов, таких как функции, сообщения, выгоды или атрибуты. Вместо оценки каждого элемента респондентам показывают небольшие подмножества, обычно четыре или пять элементов за раз, и просят выбрать, какой из них лучший (самый важный, самый предпочтительный), а какой худший. Повторяя это по многим подмножествам, где каждый элемент появляется несколько раз в разных сочетаниях, метод выстраивает точное ранжирование всего списка.
Его также называют шкалированием «лучшее-худшее», что в точности описывает то, что делают респонденты: определяют крайности внутри каждого набора. Из этих простых выборов лучшего и худшего анализ выводит непрерывный балл для каждого элемента, выявляя явных победителей, аутсайдеров и всё, что находится между ними.
Проблема рейтинговых шкал
Традиционные рейтинговые шкалы страдают от двух хорошо известных недостатков. Первый — недостаток различения: когда респонденты могут оценить всё высоко, они часто так и делают, оставляя вас с кучей элементов, набравших примерно одинаковый уровень, и без чёткого порядка приоритетов. Второй — смещение в использовании шкалы. Люди используют шкалы по-разному; одни щедры и оценивают всё высоко, другие скупы, а некоторые культуры систематически смещаются к середине или к краям. Эти различия искажают сравнения между респондентами.
MaxDiff обходит обе проблемы. Поскольку респонденты должны выбрать один лучший и один худший элемент в каждом наборе, они не могут оценить всё как важное. А поскольку задача — это относительный выбор, а не абсолютная оценка, индивидуальные склонности в использовании шкалы в значительной мере взаимно компенсируются, делая ответы более сопоставимыми между людьми.
Как работает опрос MaxDiff
Проектирование исследования MaxDiff начинается со списка элементов, которые вы хотите приоритизировать. Затем программа для опросов генерирует серию наборов выбора, каждый из которых показывает небольшое подмножество элементов, расположенных согласно экспериментальному плану так, чтобы каждый элемент появлялся сбалансированное число раз и в разном окружении. Респондент может увидеть от восьми до пятнадцати таких наборов на протяжении опроса, каждый раз выбирая лучший и худший показанный элемент.
Опыт респондента быстрый и интуитивно понятный, что отчасти и составляет привлекательность MaxDiff. Выбор самого и наименее привлекательного варианта из короткого списка ощущается естественно и требует малых усилий, поэтому показатели завершения остаются высокими, а ответы вовлечёнными, даже когда исходный список длинный. Строить такое структурированное исследование проще на проверенной основе; наш шаблон опроса для маркетинговых исследований даёт вам чистую отправную точку.
Как рассчитываются баллы MaxDiff
Каждый раз, когда элемент выбирается как лучший, он получает положительное свидетельство, а каждый раз, когда его выбирают как худший, — отрицательное. Агрегированные по всем наборам выбора и всем респондентам, эти выборы преобразуются в баллы, часто перешкалированные так, чтобы в сумме давать 100, или выраженные как доли предпочтения. В результате получается ранжированный список, где каждый элемент имеет числовое значение, указывающее на его относительную важность, и, что принципиально, разрывы между элементами значимы: элемент, набравший вдвое больше другого, действительно ценится примерно вдвое сильнее.
Такой результат интервального типа гораздо полезнее для принятия решений, чем груда похожих средних по пятибалльной шкале. Вы можете уверенно сказать, какие функции заслуживают верха дорожной карты, какие сообщения находят наибольший отклик или какие выгоды выделить в маркетинге, потому что MaxDiff разносит элементы по чёткой шкале вместо того, чтобы сбивать их в кучу.
Преимущества MaxDiff
Главные преимущества MaxDiff вытекают из его устройства. Он обеспечивает сильное различение, разделяя элементы, которые рейтинговые шкалы оставили бы на равных. Он снижает смещение в использовании шкалы и культурное смещение в ответах, улучшая сопоставимость между респондентами и между рынками, что делает его ценным для международных исследований. Он даёт ранжированные баллы со значимыми расстояниями вместо неоднозначных оценок. И респонденты, как правило, находят его увлекательным, что поддерживает качество данных. Для вопросов приоритизации он стабильно превосходит простую оценку важности, которую заменяет.
Когда использовать MaxDiff
Обращайтесь к MaxDiff, когда нужно приоритизировать список элементов, а обычные оценки оставили бы всё выглядящим важным. Классические применения включают ранжирование функций продукта для дорожной карты, выбор самых убедительных маркетинговых сообщений, приоритизацию выгод или заявлений и выбор среди множества возможных улучшений при ограниченных ресурсах. Это не тот инструмент, когда нужно абсолютное измерение, например насколько клиенты удовлетворены в целом, или когда вы изучаете компромиссы между атрибутами и ценой, где лучше подходит совместный анализ (conjoint). Для широкого измерения установок стандартный опрос для маркетинговых исследований остаётся более простым выбором.
Советы по дизайну и ограничения
Чтобы получить хорошие результаты, держите список элементов сосредоточенным на действительно различающихся вариантах, поскольку почти одинаковые элементы сбивают респондентов с толку и дробят их предпочтения. Убедитесь, что каждый элемент появляется достаточное число раз по наборам выбора для устойчивой оценки, чем занимается экспериментальный план программы при правильной настройке. Следите за общей длиной опроса; очень длинные списки элементов требуют больше наборов выбора и могут утомить респондентов. Наберите выборку, представляющую вашу реальную аудиторию, потому что приоритеты различаются между сегментами, и анализ MaxDiff по сегментам часто выявляет самые действенные инсайты. Помните, что MaxDiff измеряет относительную, а не абсолютную важность: он говорит вам, что элемент A превосходит элемент B, но не то, достаточно ли хорош любой из них в абсолютном выражении. Команды, часто проводящие исследования приоритизации, могут стандартизировать свой подход с помощью шаблонов для исследовательских команд.
Формулируйте элементы тщательно и последовательно. Поскольку респонденты сравнивают элементы напрямую друг с другом, любой элемент, сформулированный привлекательнее или конкретнее соседей, может выигрывать выборы за счёт одной лишь подачи, а не сути. Стремитесь к параллельной структуре и сопоставимой конкретности по всему списку. Предварительное тестирование здесь особенно оправдано: покажите черновые элементы нескольким людям из вашей целевой аудитории и убедитесь, что они трактуют каждый так, как вы задумали, потому что один неоднозначный элемент может незаметно исказить ранжирование. Сообщая результаты MaxDiff, представляйте перешкалированные баллы вместо сырых подсчётов и подумайте о том, чтобы показать долю предпочтения, которую собрал бы каждый элемент, — руководителям она интуитивно понятнее абстрактных полезностей. Помните, что высоко ранжированный элемент не заслуживает реализации автоматически; MaxDiff сообщает вам порядок приоритетов внутри вашего списка, но бизнес-обоснование всё равно зависит от стоимости, осуществимости и стратегического соответствия. При вдумчивом использовании — с различающимися элементами, аккуратной формулировкой, репрезентативной выборкой и анализом на уровне сегментов — MaxDiff превращает расплывчатый спор о том, что важнее всего, в чёткое, обоснованное ранжирование, вокруг которого команды могут сплотиться, когда ресурсы ограничены и выбор неизбежен.
Часто задаваемые вопросы
Сколько элементов может обработать опрос MaxDiff? MaxDiff может вместить довольно длинные списки, часто от десятка до нескольких десятков элементов, потому что каждый респондент видит лишь часть за раз. Более длинные списки требуют больше наборов выбора для надёжной оценки, поэтому балансируйте широту и длину опроса.
Чем MaxDiff отличается от совместного анализа? MaxDiff приоритизирует один список элементов по относительной важности. Совместный анализ изучает компромиссы между несколькими атрибутами, которые сочетаются в профили продукта, включая цену. Используйте MaxDiff, чтобы ранжировать список, и совместный анализ, чтобы моделировать конфигурации продукта.
Даёт ли MaxDiff абсолютные баллы? Нет. MaxDiff измеряет относительное предпочтение. Он сообщает вам порядок и относительные разрывы между элементами, но не то, удовлетворителен ли какой-либо элемент в абсолютном выражении. Сочетайте его с другими измерениями, если вам нужны абсолютные ориентиры.
Почему MaxDiff лучше рейтинговой шкалы для приоритизации? Рейтинговые шкалы позволяют респондентам называть важным всё, давая мало различения и смещение в использовании шкалы. MaxDiff вынуждает делать выбор лучшего и худшего, разнося элементы по чёткой, сопоставимой шкале, которая поддерживает уверенную приоритизацию.
Приоритизируйте важное с уверенностью. Создайте исследовательский опрос за считанные минуты. Создайте бесплатный аккаунт или изучите наши шаблоны, чтобы начать.