实验设计是最难的研究设计之一,因此不能草率为之。这类研究也经常出现大量的方法论问题。第一,尽管实验研究需要理论作为假设检验的基础,现在大量的实验研究不是基于理论的。如果没有理论,假设检验将会是临时构建的,不合逻辑的,并且没有意义的。第二,很多实验研究中用到的测量量表并没有进行信度与效度检验,而且这些量表在不同实验中是不兼容的,因而基于这些量表的结果也将是不兼容的。第三,许多实验研究采用不合适的研究设计如不相关的因变量,没有交互效应,没有实验控制或者在不同实验组采用不对等的实验刺激等。基于这些研究的发现也是缺乏内部效度而备受质疑的。第四,实验研究中的实验处理(任务)在不同研究中是有差异的,不兼容的和不一致的,有时这些实验处理对被试而言是并不合适的。例如本科生经常被要求扮演营销经理来制定负责的预算,然后其并没有这方面的经验。采用这样的不合适的任务也会给内部效度带来威胁(如被试的绩效很可能是由任务情景的内容或难度形成的人为产物),这样得来的研究发现是难以表述和没有意义的,将这些发现与其他研究进行整合就更不可能了。
合适的实验控制设计是实验设计的最重要的任务,因为实验控制是实验方法的根本所在,决不能草率或忽视。为设计好一个令人满意的合适的任务,研究者需要事先验证任务的有效性,进行实验处理的操控检测以证实任务的充分性(在被试完成任务后简要向其询问情况),进行预测试(需要时可重复进行),如有疑问最好采用对被试来说简单熟悉而非复杂的不熟悉的任务。
总之,本章介绍了实验研究的主要概念以及各种各样的真实验与准实验的设计方法。尽管这些设计在内部效度上千差万别,内部效度不佳的设计也不能轻视,因为根据某些特殊情境和研究需要,他们可能会非常适用。
- 2352 reads