在完成问卷后,应让现场工作的专家和数据检査专员来系统地检査问卷。特别要注意 的是,应校对问卷以确保路径和编码指导清楚准确;问卷还要有足够的空间可以记录或填 写答案(纸质问卷上,有足够的空间填写编码);针对人工数据录入,编写的代码(和数列 个数,若使用的话)应该在数据录入人员容易看到的位置。后面我们将看到问卷获得批准 的过程。现在先讨论一下怎样进行问卷的前期试验性调研。
有时客观评估一份问卷或一个讨论指南对其目标人群的适用性是很困难的,因为为 了接近该群体你可能会做过多假设,而且你并不属于该目标人群。在你全心投入调研工作 前,你必须知道这些:目标人群理解问题吗?他们是按照你预想的方式理解问题吗?问题 提供了你想要的数据吗?进行一次前期试验性研究是测试这些事情、这份问卷,以及评估 问卷和单个问题的最好方法。如果问卷是新的并且没有对以前的工作进行重复或是与其他 问卷类似,那么试验性研究就显得更有帮助。对于面对面访谈,前期试验性研究并不费时 费钱,相反,在前期试验性研究的最后发出一份有效的收集高质量数据的问卷会节约时间 和金钱。前期试验性研究在跨国合作项目中是至关重要的,它可以确保问卷被修改以适用 于当地的语言和文化。各个国家的前期试验性研究的结果应该进行对比,以确保问题在衡 量相同的事物,收集同等的数据。
前期试验性研究可以在问卷开发的任一阶段进行——从概念化阶段(探索概念的本 质,理解目标人群使用的语言),到完整的草案(检査它是否传达了设计所需要传达的信 息;检査是否不存在软件瑕疵;检查路径指导工作,“返回”和“下一步”按钮是否正常; 检查是否存在逻辑错误等)。试验性访谈的方式取决于问卷是如何设计的。问卷初始设计 阶段使用的前期试验性访谈可以采取非正式的定性深度访谈。问卷设计更为完整时采取的 前期试验性访谈则更适合于正式的定量访问(在开始时使用面对面的方式,而后在最终阶 段使用数据收集方法)。
对于面对面和电话访谈,一旦问卷进入终稿阶段,访问者要进行一系列前期试验性访 谈。从有经验的访问者和一些相对无经验的访问者身上可以获得有价值的反馈,他们会提 供不同的对访谈过程和对前期试验性问卷有效性的看法——问卷是否容易跟进,是否说明 清楚等,有经验的访问者会从受访者的观点中吸收经验教训。他们会给你指导问卷填写需 要的时间和问卷的可操作性的反馈。对于需要在特定设备(如智能手机)上完成的在线调 查,确保在前期试验性研究中检测査访者的反应。例如,他们在屏幕上能看到什么,他们 必须滚动多少页面,所有的问卷要素在设备上如何体现(比如拖拽、图片、视频和音频等)。
无论前期试验性研究的形式和草案所处的阶段是什么,设计问卷或讨论指南的人参与 进来指导或观察前期试验性访谈是很有必要的,这在提升问卷设计水平上很有帮助,因为 你可以看见你所设计的问卷如何真实地应用于受访者身上。如果完整的、合适的前期试验 性研究无法进行,务必请另一个与你一起工作的人(未直接参与该项目,如果有可能的话 最好是目标人群)和你一起做试验性访谈。
无论最终版本的问卷是在电话上实现的还是自我独立完成的问卷,首先与目标人群的 成员进行面对面的前期试验性研究是很有帮助的。面对面访谈使得访问者可以观察和记录 受访者对问题的肢体反应,这样,你就可以在访谈中进行先导试验。为了观察调査问卷是 如何工作的,你要发起至少12次访谈(对于讨论指南,相对年轻的定性访问专员应该进 行三四次试验性访谈;更有经验的访问者可能只需要一两次前期试验性访谈便可看清其中 奥秘)。一种指导前期试验性访谈的方法是把它当作真正的访谈,将受访者对问题的反应 做记录。在访谈的结尾,你可能会重新返回到每个问题,寻求受访者对该问题的评论,你 也可以让受访者直接对那些问题进行评论,你甚至可以给受访者一份印有每个问题对应的 调研目的的副本。把前期试验性访谈进行录音并再次收听会对整个过程有所帮助。
示例:前期试验性研究的清单
在进行一个前期试验性研究时,要考虑以下几点:
•阐述目标。问题是在测量它们应该测量的变量吗?受访者如何解读问题?问题和受 访者相关吗?对受访者有意义吗?
・问题措辞。有没有一些问题用词模糊、不清楚,容易造成歧义,或是使得理解变得 复杂?问题中有没有使用不常用的词语,或是在一个问题里问了不止一件事,有没 有使用双重否定句?有没有问题过长,难以理解?
・问题内容。有没有一些问题妨碍受访者完成问卷?有没有对于受访者来说,回答起 来过于尴尬的问题?
•问题类型。开放式问题和封闭式问题的分配数量平衡吗?每种类型的问题使用合适 吗?量表使用的适宜吗?有没有一些可能会引导受访者选择一串相同答案的问题, 比如在一页中全部回答“倾向同意”?有没有线索引导受访者选择中立答案? “不 知道”的选项安排是否过多?
・应答选项。应答选项是否充分完整?清单是否过长?
・问题模块的顺序和模块中问题的顺序。问卷中问题到问题、模块到模块的过渡是否 自然?顺序对于受访者和访问者来说是否有逻辑?是否有看起来奇怪、不衔接的地 方? 一般性问题是否出现在针对性问题之前?敏感问题是否出现在正确的位置?有 没有顺序偏移或顺序效应?
•问卷的排版和外观。它对于收集数据的方法来说合适吗?如果是自我独立完成的格 式,受访者能够清楚不费力地发现指导说明并遵从它吗?如果是访问者引导的,问 卷容易跟进吗?记录应答容易吗?
・长度。需要花费多长时间来完成问卷?访问者和受访者对长度的预期是多少?是否 过长或过短,还是正好?
扫码关注调研家公众号,随时随地获取调研家观点
关注公众号
调研家将为您提供
一对一专业服务,根据您的项目情况,为您定制专属解决方案
Copyright © 2023 SurveyPlus 瀚一数据科技(深圳)有限公司 粤ICP备18114013号
粤公网安备44030502004015号