操纵检验：确保实验效度的基石
操纵检验是实验研究中用于验证自变量操纵是否成功的专门问卷。设计良好的操纵检验能直接测量参与者是否感知到了预期的实验操纵，从而排除混淆变量，增强研究内部效度。其核心目标是评估操纵的“强度”和“区分度”，确保实验组与对照组在关键变量上存在预期差异。
设计流程与核心原则
一个规范的操纵检验问卷设计应遵循以下步骤：
- 明确构念与操纵意图：清晰定义希望通过操纵影响的具体心理构念（如感知风险、品牌态度），并确定检验的重点是操纵的“存在性”还是“强度”。
- 题目来源与编写：题目应直接源于操纵材料本身。最佳实践是改编自相关构念的成熟量表，或根据操纵内容直接编写。问题应聚焦于被操纵刺激的感知，而非泛泛的态度或行为意图。
- 结构与锚点设置：通常采用李克特量表（如5点或7点）。确保量表方向与操纵预期一致。为减少反应偏差，可考虑设置反向计分题。
- 预测试与优化：在小样本中进行认知访谈或预实验，检查题目是否清晰、有无歧义，并初步检验其能否区分不同实验条件。
常用题目设计策略与实例
根据操纵内容，可选择不同的题目设计策略：
- 直接感知法：最常用。例如，在广告操纵后询问：“您认为这则广告传递的风险感有多高？”
- 比较感知法：适用于对照设计。例如：“与您刚看到的另一则广告相比，您觉得这则广告的信任度如何？（1=低很多，7=高很多）”
- 事实核查法：适用于信息或知识操纵。例如，询问被试是否记住了操纵材料中的特定事实。
数据分析与效度验证
完成数据收集后，需通过统计分析验证操纵检验的有效性。首先进行独立样本t检验或方差分析，确认实验组与对照组在操纵检验得分上存在显著差异。其次，应计算并报告其内部一致性信度（如Cronbach's α）。此外，检验得分应与因变量指标呈现理论预期的相关关系，以提供聚合效度证据。若操纵检验未能显示预期效应，则实验结果的解释需极为谨慎。