一份关于设计、分发和分析政府与公共部门调查的实用指南:涵盖方法论、无障碍性、隐私、抽样以及经得起审查的报告撰写。
政府与公共部门调查所承载的分量,是极少数商业调查所能比拟的。它们所收集的答案可能会影响预算编制、重新分配服务资源、为政策提供依据,并成为公共记录的一部分。这份责任对研究应如何设计、受访者应如何得到保护以及结果应如何报告都提出了更高的要求。本指南将带您走遍一项公共部门调查的完整生命周期,从厘清政策问题,到发布能让公民和审计人员都信服的调查结果。
为什么公共部门调查与众不同
零售商开展客户调查时,可以容忍样本存在偏差和几个诱导性问题;即便略有偏差,代价也不过是一次营销上的失误。但是,衡量公众对某项全国性服务满意度的部委却承受不起这样的偏差。公共部门研究之所以要接受更高标准的检验,是因为它常常被用来分配公共资金、彰显问责,并对民选官员作出回应。其方法论可能会受到审计人员、记者或反对党的审视,因此每一个决策都需要有据可查、经得起辩护。
公共调查所服务的对象,也是商业研究极少需要完整覆盖的:每一位居民,无论其年龄、收入、语言、残障状况或是否能上网。这种普遍性改变了调查的设计。您不能悄悄地把不使用智能手机的人排除在外,也不能假设人人都能读懂主流语言。人人平等享有政府服务这一原则,必须贯穿于整份问卷和分发计划之中。
确定一个经得起推敲的目标
公共部门调查最常见的失败,就是在目标尚不明确之前就仓促启动。"我们想知道公民怎么想"并不是一个目标;它只是一个愿望。一个可用的目标应当明确指出这些数据将为哪项决策提供依据。例如:"判断三个试点区的居民对新办证门户的满意度是否足以支持将其推广至全国,并找出那些不满意者最主要的三项障碍。"
把目标写下来,并在起草任何一个问题之前,将其分发给每一位利益相关方。这样做可以防止"既然都做了,不如顺便"式问题的缓慢堆积,避免调查臃肿、降低完成率。一次能把一个问题回答透彻的、聚焦的公众咨询,其价值胜过一次泛泛地把十个问题都答得很糟的调查。如果您正在开展范围更广的探索性工作,一套结构化的市场调研问卷框架可以帮助您把"必须了解"的问题与"了解更好"的问题区分开来。
抽样与代表性
代表性正是公共部门调查成败的关键所在。如果您的受访者无法反映您所服务的人群,那么您的结论就可能在不知不觉中出现偏差,而这种偏差往往会对那些最不可能作答的人群造成不利。大体上有两种方法。普查试图触及目标群体中的每一个人,适用于规模较小、界定清晰的人群,例如某一栋楼的居民或某项专业服务的使用者。抽样则触及一部分人,适用于规模庞大的人群。
抽样时,应事先确定哪些人口统计维度对该决策至关重要:年龄、性别、地区、语言、城市与农村、以及服务使用状况都是常见维度。为每一维度设定配额目标,这样您就能在调查仍在进行时发现代表性不足的情况,并相应地加大外联力度。实地调查结束后,加权可以校正中等程度的失衡,但加权无法挽救一个完全遗漏了某个群体的样本。最稳妥的防范办法,是尽早在触及难以接触的群体上加大投入,而不是事后再来修补数据。
撰写中立且易于理解的问题
在许多公共研究中,中立性不仅仅是良好的做法,更是一项法律和伦理要求。一个把受访者往政治上便利的答案上引导的问题,会损害整个调查活动的合法性。避免使用带有倾向性的形容词,避免预设满意度,也要避免一次询问两件事的"双管齐下"式问题。"您对我们员工的办事速度和友好程度有多满意?"应当拆分成两个独立的问题,因为受访者对这两点的感受可能截然不同。
无障碍性不止于措辞。使用普通公众能够看懂的、阅读难度适中的通俗语言,对任何不可避免的专业术语都加以解释,并在整份问卷中保持评分量表的一致性。提供一个真实的"不适用"或"不愿透露"选项,而不是强迫受访者作答,同时确保调查能兼容屏幕阅读器等辅助技术。一个平衡、对称的评分量表(正面和负面选项在中性中点两侧数量相等)可以减少偏差,而且如果日后有人对该测量工具提出质疑,也更容易为其辩护。
隐私、知情同意与数据治理
公民向政府提供信息时,隐含着一种期待,即这些信息将得到合法、适度的处理。首先,只收集您所需要的信息;每多一个个人信息字段,都会在不一定能提升分析质量的情况下增加风险。在收集信息时应明确说明:由谁开展本次调查、目的是什么、数据将保存多久,以及作答是匿名的还是仅仅保密的。这两个词并不能互换:匿名意味着即便您想把某份回答与某个人对应起来也做不到,而保密意味着您能做到,但承诺不会那样做。
在适用当地数据保护法律的情况下,应记录处理数据的合法依据,将可识别数据的访问权限制在尽可能小的团队范围内,并制定保留和删除时间表。除非这种关联已被披露并有正当理由,否则应避免将调查回答与其他行政记录相结合。良好的数据治理不仅是一项合规任务;它还直接影响作答率,因为当人们相信自己所说的话不会被反过来用来对付自己时,他们会回答得更诚实。
触及公众的每一个群体
由于公众中包括不上网的人,对于一项声称具有代表性的政府调查而言,仅提供一个在线链接往往是不够的。应将数字渠道与线下方式结合起来:在服务窗口提供纸质表格、通过电话协助填写、在公共建筑内设置自助终端,以及借助那些已经赢得边缘群体信任的社区组织进行外联。许多经常开展公众咨询的机构会建立一套可重复使用的分发方案;如果您的职责涵盖此类工作,那么面向政府机构的调查中所描述的模式会是一份有用的入门清单。
无论您使用哪些渠道,都要让参与尽可能顺畅无阻。简短的调查、清晰的说明、适配移动端的版式,以及对所需时间的如实预估,都能提升完成率。在人群多元的地区,多语言投放不可或缺;而服务于海湾地区及更广泛阿拉伯语群体的团队,则会希望获得完整的从右到左(RTL)支持,好让阿拉伯语版本读起来与原文一样自然流畅。其目标是:不因您选择的提问方式,而在事实上把任何一位公民排除在外。
透明地报告结果
公众的信任是在报告阶段赢得的。在公布调查结果的同时,也应公布方法论:调查了哪些人、有多少人作答、作答率、实地调查的日期,以及所采用的任何加权方法。应报告不确定性区间,而不是把每一个百分比都当作精确无误来呈现,并且要抵制只突出那些好看数字的诱惑。当结果令人失望时,坦然承认并说明计划采取的应对措施,对机构公信力的提升远胜过任何粉饰。
最后,要与受访者形成闭环。当人们看到上一次的咨询确实产生了成果时,他们会更愿意参与今后的咨询。用一份简短的公开摘要说明因这次调查而发生了哪些改变,就能把一次性的数据收集,转变为机构与其所服务人群之间的一种持续关系。
常见问题
一项政府调查需要多少份回答才可信?并没有一个通用的数字;它取决于您所服务人群的规模以及您所需要的精度。对于规模庞大的人群,几百份分布均匀的回答就能得出足够狭窄、可用的不确定性区间,但在关键人口统计特征上的代表性,远比原始的回答数量重要。一个能反映公众面貌的较小样本,胜过一个做不到这一点的较大样本。
公共部门调查是否应当匿名?在涉及敏感话题时,匿名能提高作答的诚实度,而当您无需对个人进行后续跟进时,匿名是最稳妥的默认选择。如果您必须将回答与记录关联,或需要再次联系当事人,那就改用带有明确知情同意的保密收集方式,并确切说明这些数据将如何使用。
我们如何确保不上网的公民不被排除在外?在提供在线链接的同时,也提供纸质表格、电话协助填写和有专人值守的自助终端等非数字渠道,并借助能触及低上网率群体的社区组织开展外联。在实地调查期间监控人口统计配额,以便在收官之前加大对代表性不足群体的覆盖。
我们可以在不公布方法论的情况下发布结果吗?可以,但不应如此。公布方法论、作答率、实地调查日期和加权方法,正是使公共调查结果经得起推敲的原因所在。将其隐去只会招致怀疑,并削弱任何基于该数据所作决策的合法性。