定量与定性问卷调查研究详解:各自衡量什么、何时使用、如何在混合方法调查中结合两者,以及如何正确分析每种类型。
你应该统计答案,还是理解答案?仅这一个问题就区分了定量研究与定性研究,而选错方向会浪费时间和金钱。定量研究告诉你有多少、程度如何;定性研究告诉你为什么、怎么样。本指南将解释两者,说明各自何时适用,如何在混合方法调查中结合它们,以及如何避免各自特有的分析错误。
什么是定量研究?
定量研究收集结构化的数值数据,这些数据可以计数、求平均并进行统计检验。在问卷调查的语境中,这意味着封闭式问题、评分量表以及单选和多选选项,它们会产生可在大样本上汇总的数据点。它的优势在于测量:它告诉你有多大比例的客户感到满意、不同细分群体的价格敏感度有何差异,或某项改动是否使某个指标发生了变化。由于它依赖数字和足够的样本量,其结论可以在已知误差范围内推广到更广泛的群体。
什么是定性研究?
定性研究收集非结构化的描述性数据,即文字、故事和观察,以理解含义、动机和情境。在问卷中,它体现在开放式问题里;更广泛而言,它包括访谈和焦点小组。它的优势在于深度:它揭示人们为何如此行事、他们使用什么样的语言,以及哪些问题对他们重要,包括那些你从未想到要问的问题。它适用于小样本,因为目标是洞察,而非统计推广。
关键区别一览
- 数据:定量是数值化且结构化的;定性是文本化且开放的。
- 问题:定量回答"有多少 / 程度如何";定性回答"为什么 / 怎么样"。
- 样本:定量需要大量受访者以保证可靠性;定性需要少量但内容丰富的回答。
- 分析:定量使用统计学;定性使用主题编码。
- 产出:定量产出百分比和趋势;定性产出主题和引述。
- 可推广性:定量结果可推广至某个群体;定性结果具有启发性,但不能进行统计推广。
何时选择定量研究
当你需要测量、比较或追踪时,选择定量研究。估算市场规模、随时间对满意度进行基准比较、比较不同细分群体、测试价格,或按有多少人想要每项功能来排定功能优先级,都需要来自代表性样本的数字。当你已经了解问题所在、只需知道其规模大小时,定量研究同样适用。定价研究就是一个明显的例子,其中结构化方法能在各受访者之间产生可比较的数字。
何时选择定性研究
当你在探索、诊断或寻找合适的表达语言时,选择定性研究。进入新市场、探查某个指标为何下降、理解某个选择背后的情感驱动因素,或生成日后将要检验的假设,都是定性研究的任务。每当你尚未足够了解、无法写出好的封闭式问题时,它就是正确的第一步,因为过早强加结构会掩盖你恰恰需要的那些洞见。开放式探索会告诉你,在转向定量研究时应当测量什么。
混合方法调查
在实践中,最有力的研究往往两者兼用。混合方法调查将大部分封闭式问题(为你提供可计数的趋势)与少量开放式问题(用受访者自己的话解释这些趋势)配对使用。你可能测得满意度降至 70%,然后阅读开放式评论,得知配送延误正是原因所在。顺序同样重要:一种常见模式是先进行定性访谈以了解问题和语言,再用定量调查测量每个问题的普遍程度,最后用定性跟进来解释任何意外发现。我们的市场调研调查正是为支持这种结合而设计的,而对于持续开展的项目,产品反馈调查格式默认将评分与开放式评论配对。
分析每种类型
定量分析从频数和平均值入手,然后借助细分和交叉列表来发现各组之间的差异,并始终连同误差范围一起报告结果,以便受众了解其精确程度。定性分析采用主题编码:阅读回答,为反复出现的想法打标签,将它们归类为主题,然后统计每个主题出现的频率,如此一来即便是开放式文本也能呈现出可量化的图景。两者相辅相成——数字显示正在发生什么,主题显示原因何在,这正是混合方法研究对利益相关者极具说服力的原因。如果你正在挑选一款既能很好地处理封闭式分析、又能处理开放式文本编码的工具,我们的 SurveyMaker 与 Jotform 对比介绍了两者在报告方面的差异。
每种方法特有的陷阱
每种方法都有各自的失败方式。典型的定量陷阱是虚假精确:报告像 73% 这样的数字却不附带其误差范围,从而让一个充满噪声的估计看起来像事实。与之相关的一个陷阱是,把不具代表性的样本当作能代表整个群体来对待,于是一项针对你最忠实客户的调查就变成了关于整个市场的断言。定量工作还会诱使人们混淆相关与因果,看到两个指标一起变动就假定其中一个导致了另一个。
典型的定性陷阱是过度概括:从三位受访者那里听到同一句生动的评论,就把它当作多数人的观点来呈现,而定性样本远远太小,无法支撑此类断言。另一个陷阱是编码过程中的确认偏差,分析者会不自觉地为回答打上契合其偏好结论的标签;你可以通过在阅读前先定义主题,或让第二个人独立编码其中一部分来加以防范。认识到定量研究有过度自信之险、定性研究有过度解读之险,会让你在两种模式下都保持诚实,这也正是为什么把两者一起呈现——用数字体现规模、用引述体现含义——能产出让利益相关者信任的研究。
最后一条纪律对两者都适用:始终把每个发现与它所支撑的决策联系起来。一张漂亮的图表或一句令人难忘的引述,如果不能改变你的做法,那就是装饰,而非研究。无论你的证据是一个百分比还是一个主题,衡量好分析的标准都是一样的,即它是否促使你做出比没有它时更清晰、更有依据的选择。
常见问题
定量研究与定性研究有什么区别?
定量研究从大量人群中收集数值化的结构化数据,以测量程度或数量,并支持统计分析。定性研究从较少人群中收集丰富的开放式数据,以理解为什么和怎么样,揭示动机、语言和情境。定量研究回答某一现象的规模;定性研究解释其含义。
单份调查能同时兼具定量和定性吗?
可以。许多调查采用混合方法:大部分是产生可计数数据的封闭式问题,加上少量捕捉原因和引述的开放式问题。这种组合让你既能对某一趋势进行数值化测量,又能阅读受访者自己的话来理解其背后的驱动因素。开放式回答还可以编码为主题并加以计数,从而在两种方法之间架起桥梁。
我应该先做定性还是定量?
当你在探索一个不熟悉的问题时,通常先做定性,因为它能揭示应当提出哪些问题以及你的受众使用什么语言。然后再做定量,以测量每项发现的普遍程度。相反的顺序也可行:先进行一次定量调查,发现某个出人意料的结果,然后用定性跟进来解释它。
每种方法各需要多少人?
定量研究需要足够大的样本以保证统计可靠性,通常需要数百名受访者才能达到常见的置信水平和误差范围目标。定性研究所需的人数则少得多,往往不到 30 人,因为目标是深度以及达到主题饱和——即新的对话不再揭示新主题的那个点,而非统计代表性。