准实验研究界定
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
Second Increasing Treatment Effect
comparison
Experimental
Pretest
Posttest
交叉效果
•可能解释 可能解释 可能
–操纵有效果 操 –成熟的威胁较低 成熟的 成熟 –回归的威胁较低 回归的 回归
【Crossover Effect】 an outcome in which the control group performs better at pretesting but the experimental group performs better at posttesting
问题与思考 1. 这是什么类型的“研究设计”? 这是什么类型的 研究设计”
不等比较组准实验设计,其理由如下: 不等比较组准实验设计,其理由如下: 比较组准实验设计
不等比较组准实验设计的关键在于, 不等比较组准实验设计的关键在于,有实验组 比较组准实验设计 与对照组,但是二组不等组 中的实验组 与对照组,但是二组不等组。本題中的实验组 是被认为较具发展潜力、在论文发表数量、取 被认为较具发展潜力、在论文发表数量、 得最终学历学校以及推荐信等方面都较对比组 优秀。 优秀。
处理组与对照组都增加
•可能解释 可能解释
–操纵有效果 操 –选取/成熟偏误 成熟偏误 选
【Increasing Treatment and Comparison Groups】 an outcome in which the experimental and the control group differ at pretesting and both increase from pre- to posttesting, but the experimental group increases at a faster rate
实验设计与准实验设计比较
实验设计 (Experimental Design) 可以实施随机指派 有对等实验组/ 有对等实验组/控制住 直接作因果推论 准实验设计 (Quasi-Experimental Design) 无法实施随即指派 无对等实验组/ 无对等实验组/控制组 需要参考设计与结果才能 需要参考设计与结果才能 做因果推论 做因果推论 可募集多位参与者但无法实 可募集多位参与者但无法实 施随机指派
可募集多位参与者并能实 可募集多位参与者并能实 施随机指派
例子描述: 例子描述:
“教育与心理研究协会”希望改善有前途的年轻学者的学术 教育与心理研究协会” 教育与心理研究协会 研究生涯,通过经费补助使其能专心花时间去研究。 研究生涯,通过经费补助使其能专心花时间去研究。他们 在一百位提出申請的學者且其現任職務是助理教授, 在一百位提出申請的學者且其現任職務是助理教授,資歷 未滿五年的年轻学者中, 未滿五年的年轻学者中,筛选出二十五名較具发展潜力的 學者,选择标准是依据论文发表数量、取得最终学历的学 學者,选择标准是依据论文发表数量、 校、及推荐信。经过五年的時間,他們比較這二十五名获 及推荐信。经过五年的時間, 得補助的学者与其他未获得补助的学者。 得補助的学者与其他未获得补助的学者。結果发现获得经 费补助的学者除发表文章較多外, 费补助的学者除发表文章較多外,在职务上多晋升为副教 授,且其收入也高於未接受補助的学者。因此该组织宣称 且其收入也高於未接受補助的学者。 经费补助有助于年轻学者的学术研究。 经费补助有助于年轻学者的学术研究。
二、准实验研究的特点
1. 研究中的自变量通常用被试变量
*自然形成的被试变量:年龄、性别、种族等 自然形成的被试变量:年龄、性别、 社会形成的被试变量:社会阶层、宗教信仰、 * 社会形成的被试变量:社会阶层、宗教信仰、居住区等 因疾病及与之有关的被试变量:残疾者、脑外伤者、 * 因疾病及与之有关的被试变量:残疾者、脑外伤者、自闭症者等
G1: Y1 G2: Y4 X1 X2 Y2 X2 Y3
Y5 X1 Y6
• 优点 通过平衡设计,提高实验效度。 • 局限 实验处理间交叉作用。
例子: 例子:朗读法与默读法教学效果比较研究
• 选定二年级两个班作为实验班(G1和 选定二年级两个班作为实验班( 和
G2),实验开始时,先测量两班的语文 ),实验开始时, ),实验开始时 成绩,(Y1、Y4),然后一班进行朗读训练 ,( ),另一班进行默读训练 另一班进行默读训练( (X1),另一班进行默读训练(X2)。 经过一学期,进行一次后测(Y2、Y5), 经过一学期,进行一次后测( 分别与前测进行对比( 分别与前测进行对比(Y2-Y1、Y5-Y4) ; 然后交换实验处理,经过一学期后, 然后交换实验处理,经过一学期后,再进 行一次后测( 行一次后测(Y3、Y6)。
2. 研究者只能选择那些已经具有了某种不同程度特 征的被试, 征的被试,而不能从总体中随机选取被试或随机 分组 3. 一般地,不能从准实验研究结果中做出因果关系 一般地, 的结论。 的结论。
三、常见的准实验研究设计的类别
• 非对等组前后测设计 • 轮组实验设计
(一)非对等组前后测设计
• 特点:有实验组和对照组,但非随机取样, 他们往往是先前就存在的组,即原样组。 • 基本模式:
第四章 准实验设计 一、准实验研究界定
— 准实验研究相对于真实验研究而言,是指即不 准实验研究相对于真实验研究而言, 能直接操纵自变量又不能对额外变量作较严格控 制的研究。 制的研究。 — 准实验研究是指在无须随机地安排被试时,运 准实验研究是指在无须随机地安排被试时, 用原始群体, 用原始群体,在较为自然的情况下进行实验处理 的研究方法。 的研究方法。
非对等组前后测设计举例
• 选取某小学一年级两个班各41人,实验班按照实验教材 选取某小学一年级两个班各41 41人
和教学指导书进行万以内计数教学,对比班按照全国统 和教学指导书进行万以内计数教学, 一的教材和教学指导书进行万以内计数教学; 一的教材和教学指导书进行万以内计数教学;
• 因变量:数学成绩; 因变量:数学成绩; • 条件控制:同一教师教学,作业练习时间统一,统一测 条件控制:同一教师教学,作业练习时间统一,
Crossover Effect
Experimental
comparison
Pretest
Posttest
• 非对等组前后测设计优点 非对等组前后测设计优点 有控制组,有前后测,可以控制成熟、 有控制组,有前后测,可以控制成熟、历 史、练习效应、工具、统计回归等因素影 练习效应、工具、 响。
• 局限 不是随机分组, 不是随机分组,选择与成熟交互作用会降 低实验效度; 低实验效度; 前后测交互作用。 前后测交互作用。
试入学前数学能力和智力情况。 试入学前数学能力和智力情况。
• 统计分析:实验班和对比班因变量增值比较,即对两组 统计分析:实验班和对比班因变量增值比较,
增值分数平均差进行t检验以考核其差异的显著性。 增值分数平均差进行t检验以考核其差异的显著性。
(二)轮组设计
• 轮组设计:即固定组循环设计,有不同组 轮组设计: 和不同的实验处理,每组按照不同顺序循 环接受实验处理,比较各种实验处理的平 均成绩。每组既是实验组,又是对照组。 • 基本模式: 基本模式:
前测 实验组 对照组 Y1 Y’1
处理 X
后测 Y2 Y’2
差异 Y2 - Y1 Y’2-Y’1 比较
•结果解读 结果解读 –处理效果增加(Ⅰ) 处理效果增加( 处理效果增加 –处理组与对照组都增加 处理组与对照组都增加 –处理效果增加(Ⅱ) 处理效果增加( 处理效果增加 –交叉效果 交叉效果 比较理想的结果
Pretest Posttest comparison
Increasing Treatment and Comparison Groups
Experimental
处理效果增加( 处理效果增加(Ⅱ)
• 可能解释 可能解释 –操纵有效果 操 –回归偏误 回归偏误
【Second Increasing Treatment Effect】 an outcome in which the control group performs better than the experimental group at pretesting, but only the experimental group improves from preto-posttesting
2. 对于这种试验处理由那些潜在 威胁会影响内在效度? 威胁会影响内在效度?
此实验可能的威胁有四项: 实验可能的威胁有四项 可能的威胁有四
a. 选择偏误:因為一開始即不等組,所以後測時表現的 选择偏误:因為一開始即不等組, 差距可能是因本來就有的差距,必須比較其表現成長 差距可能是因本來就有的差距, 的幅度是否不同,才能決定實驗處理是否有效。 的幅度是否不同,才能決定實驗處理是否有效。 b. 缩减偏误:文中並無提及受試者是否流失或後測比較 缩减偏误: 的取樣人數,所以無法確知是否有此偏誤。 的取樣人數,所以無法確知是否有此偏誤。 c. 期望效应:可能是受試者本身預期(自認較優秀)或 期望效应:可能是受試者本身預期(自認較優秀) 他人因其獲此補助,而認為受試者較優秀, 他人因其獲此補助,而認為受試者較優秀,因此造成 受試者後來的表現較好(如晉升機會較多等)。 受試者後來的表現較好(如晉升機會較多等)。
Hale Waihona Puke 处理效果增加( 处理效果增加(Ⅰ)
•可能解释
–操纵有效果 操 –选取/成熟偏误 –选取/历史偏误 –回归偏误 回归偏误
Pretest
First Increasing Treatment Effect
Experimental
comparison
Posttest
【First Increasing Treatment Effect】 an outcome in which the experimental and the control group differ at pretesting and only the experimental group’s score change from pre-to-posttesting
•比较(Y2-Y1)-(Y6-Y5)与(Y5-Y4)-(Y3比较( )( ) )(
Y2 ),如差异显著,且前者高,说明朗读效果好, ),如差异显著 且前者高,说明朗读效果好, 如差异显著, 反之,默读效果好。 反之,默读效果好。
• 思考
–什么是准实验设计?它与实验设计的 什么是准实验设计? 什么是准实验设计 主要差异何在?实验设计、 主要差异何在?实验设计、准实验设计 各有何有缺点? 各有何有缺点?
comparison
Experimental
Pretest
Posttest
交叉效果
•可能解释 可能解释 可能
–操纵有效果 操 –成熟的威胁较低 成熟的 成熟 –回归的威胁较低 回归的 回归
【Crossover Effect】 an outcome in which the control group performs better at pretesting but the experimental group performs better at posttesting
问题与思考 1. 这是什么类型的“研究设计”? 这是什么类型的 研究设计”
不等比较组准实验设计,其理由如下: 不等比较组准实验设计,其理由如下: 比较组准实验设计
不等比较组准实验设计的关键在于, 不等比较组准实验设计的关键在于,有实验组 比较组准实验设计 与对照组,但是二组不等组 中的实验组 与对照组,但是二组不等组。本題中的实验组 是被认为较具发展潜力、在论文发表数量、取 被认为较具发展潜力、在论文发表数量、 得最终学历学校以及推荐信等方面都较对比组 优秀。 优秀。
处理组与对照组都增加
•可能解释 可能解释
–操纵有效果 操 –选取/成熟偏误 成熟偏误 选
【Increasing Treatment and Comparison Groups】 an outcome in which the experimental and the control group differ at pretesting and both increase from pre- to posttesting, but the experimental group increases at a faster rate
实验设计与准实验设计比较
实验设计 (Experimental Design) 可以实施随机指派 有对等实验组/ 有对等实验组/控制住 直接作因果推论 准实验设计 (Quasi-Experimental Design) 无法实施随即指派 无对等实验组/ 无对等实验组/控制组 需要参考设计与结果才能 需要参考设计与结果才能 做因果推论 做因果推论 可募集多位参与者但无法实 可募集多位参与者但无法实 施随机指派
可募集多位参与者并能实 可募集多位参与者并能实 施随机指派
例子描述: 例子描述:
“教育与心理研究协会”希望改善有前途的年轻学者的学术 教育与心理研究协会” 教育与心理研究协会 研究生涯,通过经费补助使其能专心花时间去研究。 研究生涯,通过经费补助使其能专心花时间去研究。他们 在一百位提出申請的學者且其現任職務是助理教授, 在一百位提出申請的學者且其現任職務是助理教授,資歷 未滿五年的年轻学者中, 未滿五年的年轻学者中,筛选出二十五名較具发展潜力的 學者,选择标准是依据论文发表数量、取得最终学历的学 學者,选择标准是依据论文发表数量、 校、及推荐信。经过五年的時間,他們比較這二十五名获 及推荐信。经过五年的時間, 得補助的学者与其他未获得补助的学者。 得補助的学者与其他未获得补助的学者。結果发现获得经 费补助的学者除发表文章較多外, 费补助的学者除发表文章較多外,在职务上多晋升为副教 授,且其收入也高於未接受補助的学者。因此该组织宣称 且其收入也高於未接受補助的学者。 经费补助有助于年轻学者的学术研究。 经费补助有助于年轻学者的学术研究。
二、准实验研究的特点
1. 研究中的自变量通常用被试变量
*自然形成的被试变量:年龄、性别、种族等 自然形成的被试变量:年龄、性别、 社会形成的被试变量:社会阶层、宗教信仰、 * 社会形成的被试变量:社会阶层、宗教信仰、居住区等 因疾病及与之有关的被试变量:残疾者、脑外伤者、 * 因疾病及与之有关的被试变量:残疾者、脑外伤者、自闭症者等
G1: Y1 G2: Y4 X1 X2 Y2 X2 Y3
Y5 X1 Y6
• 优点 通过平衡设计,提高实验效度。 • 局限 实验处理间交叉作用。
例子: 例子:朗读法与默读法教学效果比较研究
• 选定二年级两个班作为实验班(G1和 选定二年级两个班作为实验班( 和
G2),实验开始时,先测量两班的语文 ),实验开始时, ),实验开始时 成绩,(Y1、Y4),然后一班进行朗读训练 ,( ),另一班进行默读训练 另一班进行默读训练( (X1),另一班进行默读训练(X2)。 经过一学期,进行一次后测(Y2、Y5), 经过一学期,进行一次后测( 分别与前测进行对比( 分别与前测进行对比(Y2-Y1、Y5-Y4) ; 然后交换实验处理,经过一学期后, 然后交换实验处理,经过一学期后,再进 行一次后测( 行一次后测(Y3、Y6)。
2. 研究者只能选择那些已经具有了某种不同程度特 征的被试, 征的被试,而不能从总体中随机选取被试或随机 分组 3. 一般地,不能从准实验研究结果中做出因果关系 一般地, 的结论。 的结论。
三、常见的准实验研究设计的类别
• 非对等组前后测设计 • 轮组实验设计
(一)非对等组前后测设计
• 特点:有实验组和对照组,但非随机取样, 他们往往是先前就存在的组,即原样组。 • 基本模式:
第四章 准实验设计 一、准实验研究界定
— 准实验研究相对于真实验研究而言,是指即不 准实验研究相对于真实验研究而言, 能直接操纵自变量又不能对额外变量作较严格控 制的研究。 制的研究。 — 准实验研究是指在无须随机地安排被试时,运 准实验研究是指在无须随机地安排被试时, 用原始群体, 用原始群体,在较为自然的情况下进行实验处理 的研究方法。 的研究方法。
非对等组前后测设计举例
• 选取某小学一年级两个班各41人,实验班按照实验教材 选取某小学一年级两个班各41 41人
和教学指导书进行万以内计数教学,对比班按照全国统 和教学指导书进行万以内计数教学, 一的教材和教学指导书进行万以内计数教学; 一的教材和教学指导书进行万以内计数教学;
• 因变量:数学成绩; 因变量:数学成绩; • 条件控制:同一教师教学,作业练习时间统一,统一测 条件控制:同一教师教学,作业练习时间统一,
Crossover Effect
Experimental
comparison
Pretest
Posttest
• 非对等组前后测设计优点 非对等组前后测设计优点 有控制组,有前后测,可以控制成熟、 有控制组,有前后测,可以控制成熟、历 史、练习效应、工具、统计回归等因素影 练习效应、工具、 响。
• 局限 不是随机分组, 不是随机分组,选择与成熟交互作用会降 低实验效度; 低实验效度; 前后测交互作用。 前后测交互作用。
试入学前数学能力和智力情况。 试入学前数学能力和智力情况。
• 统计分析:实验班和对比班因变量增值比较,即对两组 统计分析:实验班和对比班因变量增值比较,
增值分数平均差进行t检验以考核其差异的显著性。 增值分数平均差进行t检验以考核其差异的显著性。
(二)轮组设计
• 轮组设计:即固定组循环设计,有不同组 轮组设计: 和不同的实验处理,每组按照不同顺序循 环接受实验处理,比较各种实验处理的平 均成绩。每组既是实验组,又是对照组。 • 基本模式: 基本模式:
前测 实验组 对照组 Y1 Y’1
处理 X
后测 Y2 Y’2
差异 Y2 - Y1 Y’2-Y’1 比较
•结果解读 结果解读 –处理效果增加(Ⅰ) 处理效果增加( 处理效果增加 –处理组与对照组都增加 处理组与对照组都增加 –处理效果增加(Ⅱ) 处理效果增加( 处理效果增加 –交叉效果 交叉效果 比较理想的结果
Pretest Posttest comparison
Increasing Treatment and Comparison Groups
Experimental
处理效果增加( 处理效果增加(Ⅱ)
• 可能解释 可能解释 –操纵有效果 操 –回归偏误 回归偏误
【Second Increasing Treatment Effect】 an outcome in which the control group performs better than the experimental group at pretesting, but only the experimental group improves from preto-posttesting
2. 对于这种试验处理由那些潜在 威胁会影响内在效度? 威胁会影响内在效度?
此实验可能的威胁有四项: 实验可能的威胁有四项 可能的威胁有四
a. 选择偏误:因為一開始即不等組,所以後測時表現的 选择偏误:因為一開始即不等組, 差距可能是因本來就有的差距,必須比較其表現成長 差距可能是因本來就有的差距, 的幅度是否不同,才能決定實驗處理是否有效。 的幅度是否不同,才能決定實驗處理是否有效。 b. 缩减偏误:文中並無提及受試者是否流失或後測比較 缩减偏误: 的取樣人數,所以無法確知是否有此偏誤。 的取樣人數,所以無法確知是否有此偏誤。 c. 期望效应:可能是受試者本身預期(自認較優秀)或 期望效应:可能是受試者本身預期(自認較優秀) 他人因其獲此補助,而認為受試者較優秀, 他人因其獲此補助,而認為受試者較優秀,因此造成 受試者後來的表現較好(如晉升機會較多等)。 受試者後來的表現較好(如晉升機會較多等)。
Hale Waihona Puke 处理效果增加( 处理效果增加(Ⅰ)
•可能解释
–操纵有效果 操 –选取/成熟偏误 –选取/历史偏误 –回归偏误 回归偏误
Pretest
First Increasing Treatment Effect
Experimental
comparison
Posttest
【First Increasing Treatment Effect】 an outcome in which the experimental and the control group differ at pretesting and only the experimental group’s score change from pre-to-posttesting
•比较(Y2-Y1)-(Y6-Y5)与(Y5-Y4)-(Y3比较( )( ) )(
Y2 ),如差异显著,且前者高,说明朗读效果好, ),如差异显著 且前者高,说明朗读效果好, 如差异显著, 反之,默读效果好。 反之,默读效果好。
• 思考
–什么是准实验设计?它与实验设计的 什么是准实验设计? 什么是准实验设计 主要差异何在?实验设计、 主要差异何在?实验设计、准实验设计 各有何有缺点? 各有何有缺点?