为何要在系统综述中评估问卷质量
系统综述旨在整合高质量证据,若纳入研究使用的问卷工具信效度不佳,则会直接影响综述结论的可靠性。因此,对原始研究中使用的测量工具进行质量评估,是系统综述,尤其是定性或量性调查类综述中一个必不可少但常被忽视的步骤。它有助于识别研究间的异质性来源,并为后续研究推荐更优的测量工具。
评估问卷工具质量的三个核心维度
评估应基于公认的框架,通常涵盖以下维度:
| 评估维度 | 关键问题 | 常用证据来源 |
|---|---|---|
| 开发与内容效度 | 问卷条目是否基于理论或定性研究生成?是否经过专家评审或认知访谈? | 问卷开发研究报告 |
| 结构效度 | 问卷的因子结构是否通过探索性或验证性因子分析得到支持? | 心理测量学特性研究 |
| 信度 | 内部一致性(如Cronbach's α)和重测信度是否达到可接受水平(通常>0.70)? | 信度研究报告 |
| 反应度与跨文化适应性 | 问卷能否检测到有意义的变化?翻译版本是否经过严格的跨文化调适? | 应用研究、跨文化研究 |
系统评估流程与工具推荐
进行系统评估时,建议按以下流程操作:
- 制定纳入标准:预先明确需要评估的问卷类型及最低质量标准。
- 检索心理测量学文献:不止于目标研究,需专门检索评估该问卷信效度的文献。
- 使用标准化工具提取信息:可采用如COSMIN(共识选择健康测量工具标准)检查清单,系统化地提取问卷开发、效度、信度等信息。
- 进行批判性评价与报告:在综述的方法部分或附件中,明确报告评估过程、发现的局限性及其对综述结果可能产生的影响。
在综述论文中的报告规范
在系统综述的正文或补充材料中,应设立独立章节或表格报告问卷质量评估结果。内容应包括:评估了哪些问卷、评估所依据的维度、关键发现(如信度系数范围、结构效度验证情况)以及问卷的总体质量等级。这不仅增强了综述的透明度,也为读者提供了关于证据强度的额外信息,是高质量系统综述的重要标志。