社会科学研究中的问卷设计：实用建议

英文原文：Survey Design in Social Science Research: Practical Tips（2023年9月10日发布）

问卷设计是社会科学研究人员从目标群体中收集可靠且有效数据的一项基本技能。然而，设计一份优秀的问卷并非易事。需要考量的因素很多，例如问卷目标、测量指标的选择、调研平台的确定、伦理规范的处理以及数据质量的保障。在这篇博文中，我将结合自身的实践经验，分享社会科学研究中问卷设计的一些实用建议。

如果您需要更多学术文献，以下提供一些实用的参考资源：

• Stantcheva, S. (2022). How to run surveys: A guide to creating your own identifying variation and revealing the invisible. Annual Review of Economics, 15.
• Gideon, L. (Ed.). (2012). Handbook of survey methodology for the social sciences. New York: Springer.
• Chiang, I.-C. A., Jhangiani, R. S., & Price, P. C. (2015). Constructing survey questionnaires. In Research Methods in Psychology – 2nd Canadian Edition. BCcampus.

明确研究目标

问卷设计的第一步是明确研究目标。您希望通过问卷回答的核心研究问题是什么？您希望检验哪些研究假设？您需要测量哪些变量？对这些问题的回答将指导您选择恰当的测量工具与抽样方法。您还应考量将如何分析数据，以及预期得出何种研究结果。

查阅ICPSR 中的参考范例

https://www.icpsr.umich.edu/web/pages/

学习社会科学问卷设计的一个有效途径是研读ICPSR中的其他问卷。ICPSR是一个数据档案库，提供涵盖政治学、经济学、公共卫生、教育学等诸多学科与主题的数千项研究及数据集。您可以浏览或检索与自己研究兴趣相关的课题，了解其他研究者如何设计问卷、采用了哪些测量工具、如何收集与分析数据，以及得出了哪些结论。您还可以下载相关数据与说明文档，供个人研究使用或进行结果复现。

如需在ICPSR中查找问卷范例，您可以访问其官方网站，利用搜索框或浏览选项检索符合您关键词或筛选标准的研究。您还可以根据主题、地理范围、时间跨度、系列研究、主要研究者或数据格式对结果进行多重筛选。

寻找测量工具

下一步是寻找能够准确衡量您所关注变量的测量工具。

A. 您可以从阅读相关领域的文献入手，直接查阅相关论文中的Measures （测量）部分。您可以使用电子表格整理以往研究者使用过的测量量表，同时记录其数据来源、参考文献和计分方法。例如在下图中，您可以看到量表名称及选项设置。若需获取完整的测量量表，通常需要查阅其原始参考文献。

B. 您还可以利用APA PsycTests archive检索已公开发表或经过同行评审的心理学测验与测量工具。例如，您可以访问APA PsycNet（通常需要通过机构数据库权限登录），输入检索词并勾选“Test Available”。随后即可在界面右侧看到可供下载收集的“Test”PDF文件。

APA PsycTests档案库仅向订阅了该资源的机构成员开放。作为替代，您可以使用面向公众免费开放的文库：https://db.arabpsychology.com/

这是一个示例电子表格，包含概念构念、量表名称、题目数量、优先级（是/否）、是否已收集（是/否）、参考文献以及备注说明。collected（已收集）一栏表示我是否已经收集到该量表的具体题项内容（例如从APA PsycNet下载的PDF文件）。

在电子表格中汇总好备选测量工具后，您可以与他人（合作者、共同作者或指导导师）进行讨论，以最终确定最契合研究目标的题项。您还应审查测量工具的信效度，以及其对目标人群与调研平台的适配性。例如，如果您的调研对象具有不同的语言背景，部分量表可能需要经过规范的翻译程序。

设计问卷结构

确定好测量指标后，即可着手设计问卷。您可以创建一份专门文档，按照问卷施测顺序列出完整的题目清单。您也可以将其划分为不同模块，并与合作者按模块展开讨论。以下是问卷设计文档的一个范例，其中包含计分步骤与参考文献。定稿后，只需直接复制粘贴至调研平台即可。

以下是我的几点建议：

1. 您需要明确问卷调研的时间节点和经费预算，并确定目标人群与抽样方法。
2. 您需要选择一个能够承载您的问卷并提供所需功能的调研平台。常用的平台包括[Qualtrics]和[SurveyMonkey]，它们为在线创建和分发问卷提供了丰富的选项。许多高校都以机构身份订阅了Qualtrics，您可以先核实所在学校是否有此权限。
3. 对于多语种问卷，Qualtrics和SurveyMonkey均提供多语种问卷支持。您可能需要聘请专业翻译人员，或者考量跨语言环境下的量表效度检验。
4. 在设计问卷时必须牢记的一点是，在整个问卷中适度加入若干注意力检测题项 。这些题项有助于识别未认真作答或随机勾选的被试，例如要求他们选择某个特定选项或回答一个简单常识问题。详情可参阅the post from Qualtrics on the best practice of attention check。
5. 如果您的调研涉及刻板印象、健康状况或心理健康等敏感话题，也可以考虑加入社会赞许性题项。这类题项可以评估被试在作答时受到社会规范或期望影响的程度。
6. 另一个需要审慎考虑的方面是问卷的伦理规范。如果您的研究涉及脆弱人群或敏感议题，务必确保已获得被试的知情同意，切实保护其个人隐私与信息机密性，并将他们可能遭受的任何潜在伤害或不适感降至最低。在开展调研时，还应严格遵循所在机构或组织的伦理准则与规章制度。
7. 最后，您应当考量本问卷与其他调研之间的可比性。在可能的情况下，尽量采用其他学者在类似背景或群体中使用过的成熟测量工具。这将有助于您将研究结果与其他成果进行对比，并增强研究发现的推广度。

收集数据

完成问卷设计后，您便可以在选定的平台（如Qualtrics）上开始收集数据。在此有几点需要注意：

1. 在正式向目标群体分发问卷之前，应当在与目标人群相近的小样本被试中进行预调查。这有助于估算填答所需时间，检查跳转逻辑是否正常运行，并及时发现并排查其中的错误。
2. 您可以通过电子邮件、社交媒体、网络社区或网站等多种渠道分发问卷。然而，您需要密切关注填答者的质量，尤其是在使用向所有人开放的网络平台时。网络上存在大量机器人或虚假作答者，可能会试图访问您的问卷并提供无效或不可靠的数据。您应当采取相应措施进行防范或甄别，例如使用验证码、IP地址过滤或邮箱验证等手段。

数据清洗

收集到足够的问卷样本后，在开展正式分析前应严格把关数据质量。我的建议如下：

• 您应当对数据进行清洗，剔除所有未完成或重复的问卷，以及未能通过注意力检测题项的样本。
• 您还可以检验所使用的知名量表的内部一致性信度。
• 如果有开放式问题，您也可以逐一阅读文本回答。部分填答者可能会随意胡乱填写，导致其个案数据不可信。

您可以参考这篇关于在STATA中使用以下命令获取信度与效度得分的博文： validscale 命令：

[Stata] Convergent and discriminant validity and reliability of subscales: validscale command

构建代码本

如果您能同时编制一份描述数据结构及测量变量的代码本，那将非常有益。代码本是提供数据来源、结构、内容及变量编码信息的说明文档。它不仅能帮助您自己，也能帮助他人更好地理解数据，以便用于后续分析或深入研究。

以下是一个代码本示例。您可以在首页呈现人口统计学特征，随后依次列出各项测量的详细信息，包括描述性统计量与内部一致性信度（Cronbach’s alpha）。

希望这篇博文能为您在社会科学研究中的问卷设计提供一些有益参考。感谢您的阅读。