实验效度
- 实验效度本质上研究的是该实验多大程度上达到研究目的，符合研究的结论。
内部效度
- 含义
- 指实验中自变量和因变量之间因果关系的明确程度，即实验数据本身能在多大程度上推出研究结论
- 内部效度高：因变量的变化确定是由自变量引起的
- 额外变量对实验的干扰会降低内部效度
- 影响因素
- 成长与成熟 对青少年的研究要额外关注
- 历史因素 在研究的时刻发生过重大的社会事件
- 前测 对于一些纸笔类、存在练习效应的操作性的研究
- 被试的选择偏差
- 被试的缺失 对于持续时间长的研究，特别是发展性的纵向研究
- 仪器、环境或程序的不一致 几乎所有实验
- 统计回归 对于因变量本身会波动的实验，特别是被试本身比较极端
- 多种研究条件与因素之间的交互作用 测试程序、变量控制和实验安排与变量之间的交互作用
- 对各种影响因素的控制
- 成长与成熟 设置控制组或基线组
- 前测 设置控制组或基线组：不进行前测
- 被试的选择偏差 随机选择被试
- 被试的缺失 最初多找被试
- 仪器、环境或程序的不一致 采用相同的仪器、环境和程序
- 统计回归 多测几次、取平均值
- 零结果
- 如果出现了零结果，即在统计上自变量与因变量没有任何关系，可能有两种情况
- 真的没关系
- 内部效度有问题
- 自变量操纵无效，或自变量水平差异太小
- 因变量指标不灵敏，或量程有问题
- 额外变量没有得到有效控制
外部效度
- 含义
- 指实验的结果能够概括化和适用于其他研究条件和情景的程度和能力，也称生态效度
- 如果必须严格满足实验环境和条件才能有相同的结果，那就是外部效度低
- 自变量的操作化定义和抽象定义的差距、实验环境和真实环境的差距会影响外部效度，差距越大，外部效度越低。
- 被试对总体的代表性差，外部效度低
- 影响因素
- 研究被试的代表性
- 研究变量的抽象与操作定义不明确，测量方式信效度差，导致实验的可重复性减小
- 研究对被试反作用，即改变了被试的典型行为
- 事前测量与实验处理相互影响
- 多重处理的干扰
- 实验者效应
- 研究与实际情境相差较大
- 被试选择与实验处理的交互作用
- 内部效度和外部效度的关系
- 相互联系、相互影响
- 提高内部效度的措施可能会降低其外部效度
- 提高外部效度的措施可能会降低其内部效度
- 一般而言，应该在保证内部效度的前提下，适当采取措施提高外部效度。
构思效度
- 含义
- 指理论构思的合理性及其转化为抽象与操作定义的恰当性程度，涉及建立可观测指标的理论设想及其操作化等方面的问题。要确保理论、概念(变量)的抽象定义、操作定义、观测值表等层次之间能对应一致。
- 具有较高构思效度的研究，具备以下特点
- 理论构思结构严谨、符合逻辑、层次分明、形成某种“构思网络”
- 对研究的各种变量做出明确、严格的说明
- 给变量明确的操作定义，制定相应的、客观的测量指标
- 消除或控制影响构思效度的各种因素
- 影响因素
- 对构思缺乏明确的说明，概念解释模糊，逻辑关系不清，层次不明
- 单一方法和操作引起的偏差
- 构思水平之间的混淆
- 研究过程中主试的期望、被试因猜测而发生的心理与行为的改变、不同实验处理之间的交互作用
统计结论效度
- 含义
- 检验研究结果的数据分析程序与方法的有效性的指标。研究的基本问题是研究误差、变异来源与如何恰当地运用统计显著性检验。
- 被认为是“内部效度”的特例
- 具备较高的统计结论效度，需要:
- 保证数据的质量
- 明确统计检验方法的基本假设和适用条件，根据数据的具体特征选择适宜的统计程序
- 适当增加样本量，或当样本量较小时进行统计功效分析
- 影响因素
- 数据的质量差：例如测量工具信度较低，实验处理方式不够标准化
- 违反统计检验的假设
- 统计检验能力低
- 统计结果的报告被人为筛选