评估框架的核心维度
一个完整的问卷工具质量评估应涵盖四个核心维度:内容效度(问卷项目是否全面覆盖了目标构念)、结构效度(数据是否支持问卷设计的理论结构,如因子分析结果)、信度(测量结果的一致性,如内部一致性信度Cronbach's α)以及跨文化/情境适应性(在不同群体中应用时的等值性)。系统综述应优先纳入在这些维度上报告充分的工具。
数据提取与编码的实操方法
在综述过程中,需设计标准化的数据提取表,用于系统记录每项研究中所用问卷的质量证据。编码条目应包括信效度检验的具体统计方法、报告的数值、样本特征以及适用限制。由两名及以上研究者独立进行提取与编码,并计算编码者间一致性信度,以确保评估过程的客观性与可靠性。
效度验证与证据汇总
对于问卷的效度,应关注其验证研究的类型。例如,是否有研究通过因子分析验证了其结构效度?是否与成熟的金标准问卷进行了相关分析以验证效标效度?在综述中,应汇总不同研究报告的效度证据,形成对问卷工具的整体质量判断,并讨论其测量特质与综述研究问题的匹配程度。
整合应用与报告规范
在综述报告的“方法”部分,应明确说明采用了何种框架对问卷工具质量进行评估。在“结果”部分,可以设立专门小节汇报评估情况,说明纳入研究使用工具的总体质量水平。在“讨论”部分,需反思问卷工具质量对综述结论可能产生的偏倚,并提出对未来研究使用或开发更优工具的建议。