信度与效度缺失:基础但关键的硬伤
这是审稿人最先审查的环节。常见问题包括:
- 信度不足:未报告或未计算量表的内部一致性(如Cronbach‘s α),或α值过低(<0.7),表明题项间一致性差。
- 效度存疑:缺乏结构效度检验(如探索性/验证性因子分析),或内容效度仅凭主观判断,未经过专家评审或预测试。
抽样与数据收集过程描述不清
模糊的抽样方法和数据收集流程会严重削弱研究的外在效度和可信度。审稿人常质疑:“样本代表性如何保证?”“回收率为何过低?”。常见疏漏包括:未说明抽样框、采用便利抽样却推论总体、问卷发放与回收方式描述过于简略。
选项与量表设计的陷阱
具体到问卷题项设计,细节问题层出不穷,直接影响数据质量:
- 选项设计缺陷:选项未互斥且未穷尽(特别是多选题)、存在诱导性或模糊表述、李克特量表点数不当(如仅有3点,区分度低)。
- 问题表述问题:一题多问(双管问题)、使用专业术语或负向提问,导致受访者理解偏差。
- 逻辑与顺序错误:问题跳跃逻辑设置不当,或敏感问题前置引起拒答。
整体优化与呈现建议
为赢得审稿人认可,应系统化提升问卷质量:首先,明确每个问题与研究假设的对应关系,杜绝无关问题。其次,在论文附录中完整呈现问卷,并对题项来源(如引用自何处)进行标注。最后,对于使用网络问卷的研究,需说明数据质量控制措施(如设置陷阱题、IP限制等)。一份设计严谨、报告透明的问卷是支撑论文结论的坚实基石。