斯金纳的操作学习理论
4第四章 斯金纳操作学习理论
四、斯金纳的新行为主义学习理论
（一）操作性条件反射 1、两种行为与两种反射
两种行为： 应答性行为：由已知的刺激引起的反应； 操作性行为：是有机体自身发出的反应，与任
何已知刺激物无关。
两种反射：
应答性反射：经典条件反射或S（刺激)型反 射。
操作性反射 ：为R（反应）型反射
两者的不同：
1 ．刺激在反射形成过程中的作用 应答性条件反射 ：S（刺激）— R（反应） 操作性条件反射 ：“反应－强化”
1、剥夺(deprivation) （本质是桑代克的准备律）
2、食物库训练(magazine training) （卡答声和食物丸的出现联结在一起）
与巴甫洛夫的条件反射实验的区别:
在斯金纳箱中的被试动物是自由的； 反应不是由已知的某种刺激物引起的 ； 反应不是唾液腺活动，而是骨骼肌活动； 实验的目的不是揭示大脑皮层活动的规律。
2、强化
类化强化物：与许多其它强化物重复地相 伴出现之后，才变成强化物。如（金钱、 荣誉等）
3、操作过程的四种机制
（1）正强化 （2）负强化 （3）消弱或不强化 （4）惩罚 区分：惩罚与负强化的不同（见书）
反应后呈现 反应后消除 奖励性刺激 正 强 化 惩罚（1） 厌恶性刺激 惩罚（2） 负 强 化
1922年进汉密尔顿学院读书; 1930获心理学硕士学位，1931年
获哲学博士学位。接着留校从事 研究工作。
1936年至1944年在明尼苏达大学 任讲师和副教授，
1945年任印第安纳大学心理系教 授和系主任，
1948年返回哈佛大学任心理学教 授，直到1974年退休。
主要著作：
《有机体的行为：一种实验的分析》 《科学与人类行为》 《言语行为》 《学习的科学和教学的艺术》 《教学机器》
斯金纳操作学习理论
斯金纳操作学习理论B·F·斯金纳（Burrhus Frederick Skinner,1904~1990）是操作学习理论的创始人和行为矫正技术的开创者。
他是美国新行为主义的主要代表，也是在所有新行为主义者中，在坚持行为主义基本立场方面最激进的一位，同时，也是对当今心理学影响最大、最重要的新行为主义者。
他最有影响的主张集中体现在他的操作学习理论。
一、操作学习理论的提出：在斯金纳之前，心理学家们就已经用刺激——反应联结对学习作出解释，如华生认为学习就是“以一种刺激替代另一种刺激建立条件反射的过程”；①又如，桑代克提出的尝试——错误学习（trial-error learning）理论，认为学习的实质是“通过‘尝试’在一定的情景与特定的反应之间建立某种联结”②斯金纳指出，虽然，某些人类的行为正如之前的心理学家们说的那样，是由特定的刺激引起的，但是，这些只能解释所有人类行为的一小部分，于是他提出了另外一类行为，称之为操作性行为，因为它们是在环境中缺乏明显的无条件刺激物时操作的。
斯金纳的工作主要集中在行为与后果的关系上，并由此提出了对教育实践起巨大影响的学习理论——操作学习理论。
二、斯金纳操作学习理论的基本观点：（一）经典实验——斯金纳箱（Skinner box）：20世纪30年代后期，斯金纳改进了桑代克的迷笼，设计了“斯金纳箱”，并用来研究各种动物（如白鼠与鸽子）的行为。
此箱去掉了所有无关刺激，通常内设一杠杆，杠杆与一食物仓相连，动物（如白鼠）偶然地一按杠杆，食物仓便打开，落下一食物小丸于食物盘内，箱外有一记录器，可记录白鼠按压杠杆的速度。
实验中，动物从初始的混乱动作中无意地碰到杠杆而得到食物，从而学会了按压杠杆与得到食物之间的联结。
通过更为复杂的设计，动物还可以学会分化行为，如当灯亮时按杠杆可以得到食物，而灯灭时按杠杆得不到食物，于是，动物学会了只在灯亮时按压杠杆。
（二）两种类型的学习：从对动物的研究中，斯金纳认为，行为分为两类：应答性行为和操作性行为。
斯金纳操作学习理论
斯金纳操作学习理论斯金纳操作学习理论实验：斯金纳箱实验斯金纳设计了一种特殊的阴暗的隔音箱，箱子里有一个开关。
早期斯金纳用老鼠做实验。
老鼠或快或慢偶然的按下一个开关（杠杆），食物就掉进盘内，老鼠就得到了强化，老鼠的行为是通过操作环境（按压杠杆）而获得食物的，即强化物只有在条件反应出现后才会出现。
操作性活动受到强化后，其明显后果是这一操作活动频率增加了，而在反应之后不予强化，则反应就会减弱，这使斯金纳认识到强化作用在操作性活动中起着重要作用。
1.操作条件作用理论斯金纳总结出两类反应，由刺激引发的“应答性反应”和有机体发出的“操作性反应”。
前者往往是一种不随意的行为；后者大多数是随意的或有目的的行为。
在应答性行为中，有机体是被动地对环境作出反应；而在操作性行为中，有机体是主动地作用于环境。
经典条件作用只能用来解释基于应答性行为的学习，斯金纳把这类学习称为“S（刺激）类条件作用”。
另一种学习模式，即操作性或工具性条件作用的模式，则可以用来解释基于操作性行为的学习，他称为“R（强化）类条件作用”。
强化原理(1)．强化类型强化物是指“是反应发生概率增加或维持某种反应水平的任何刺激”。
斯金纳区别了两种强化类型：正强化和负强化。
当在环境中增加某种刺激，有机体反应概率增加，这种刺激就是正强化物；当某种刺激在有机体环境中消失时，反应概率增加，这种刺激便是负强化物。
除了对正强化物与负强化物作出区分外，斯金纳还区分了强化的两个来源：一级强化物和二级强化物。
一级强化物包括所有在没有任何学习发生的情况下也起强化作用的刺激，如食物和水等满足生理基本需要的东西。
二级强化物包括那些在开始时不起强化作用的刺激如权利、财富等。
(2)．强化安排可选择（1）连续强化：即每一次正确反应之后都给予强化。
（2）间歇强化：即并非每一次正确反应之后都给予强化又分为间隔强化（根据时间间隔予以强化）：固定间隔强化、可变间隔强化。
比例强化（根据反应次数予以强化）：固定比例强化、可变比例强化。
第四章斯金纳操作学习理论
一、斯金纳操作学习理论B·F·斯金纳（Burrhus Frederic Skinner，1904-1990）1904年3月20日出生在美国宾夕法尼亚州的萨斯奎汉纳镇上。
像许多心理学先驱者一样，斯金纳在1922年进汉密尔顿学院读书时，并未打算成为一名心理学家，而是专修英文，打算成为一名作家。
在毕业后的两年内，从事于写作，结果感到没有什么可写的，于是攻读生物学。
在这个过程中，他读了华生和巴甫洛夫的著作，从而开始对人类和动物的行为感兴趣，就进入哈佛大学攻读心理学。
1930年获心理学硕士学位。
1931年获哲学博士学位。
接着留校从事研究工作。
1936年至1944年在明尼苏达大学任讲师和副教授，1945年任印第安纳大学心理系教授和系主任，1948年返回哈佛大学任心理学教授，直到1974年退休。
在这期间，他于1958年获美国心理学会授予的杰出科学奖；1968年获美国政府颁发的最高科学奖——国家科学奖；1971年获美国心理学会基金会颁发的金质奖章。
第一节强化原理一、强化的类型斯金纳用条件作用的原理来解释学习，是基于这样一种观点：人们通常都是以一种增加愉快、减少痛苦的方式来行事的。
但是，“愉快”和“痛苦”都是一种主观性的东西，这在强调客观性和科学性的斯金纳体系中是没有地盘的。
斯金纳是以一种相当操作性的方式来界说强化的。
强化物是指“使反应发生概率增加、或维持某种反应水平的任何剌激”。
也就是说，凡是提高反应概率的任何事件都可以起强化作用。
这样，强化物并不一定是一种令人愉快的刺激。
而且，在一种情境中起强化作用的刺激，在另一种情境中并不一定起强化作用。
同样，对某一个人起强化作用的刺激，对另一个人并不一定起强化作用。
斯金纳区别了两种强化类型：正强化(positive reinforcement，又译积极强化)和负强化（negative reinforcement又译消极强化）当在环境中增加某种刺激，有机体反应概率增加，这种刺激就是正强化物。
斯金纳的操作性条件反射学习理论
1968年荣获美国国家科学奖章，美国最高级别的 科学奖励。
1971年美国心理学基金会授予一枚金质奖章。
1990年8月 10日美国心理学会授予“心理学毕生 贡献奖”荣誉证书。
争议
天使？
斯金纳是一个颇受争议的人 物。有人叫他魔鬼，也有人 认为他是神明。事实上，他 的个性非常符合一个创新科 学家的形象——勤勉认真， 注重实际，尊重事实，也有 一点小小的神经质
操作性条件反射理论
操作性条件反射理论
反射与强化是斯金纳操作性条件反射 学习理论的基础
经典条件反射
由已知的刺激（S）引起反应（R） 已知刺激：食物 反应：听见音叉声流口水
操作性条件反射
箱内放进一只白鼠或 鸽子，并设一杠杆或 键，箱子的构造尽可 能排除一切外部刺激。 动物在箱内可自由活 动，当它压杠杆或啄 键时，就会有一团食 物掉进箱子下方的盘 中，动物就能吃到食 物。
1936-1944年明尼苏达 州立大学副教授 1930年心理学硕士学 位，1931年博士学位
1926转入哈佛大 学心理学
1922年汉密尔顿学院
人物 生 平
1904年3月20日
人
平 物生
1948年返回哈佛大学 担任教授
1945年印第安纳大学 教授、系主任
1990年8月18日逝世 19ຫໍສະໝຸດ 4年退休1904年3月20日
少年时期理想志向
1926年为止汉密尔顿学院学艺术和语言学。想成 为作家。
拜读了伊万·巴甫洛夫和约翰·华生的著作，开始对 人类和动物的行为感兴趣。
在1926年收到文学学士学位后，进入了哈佛大学 学习心理学。
成长道路
哈佛大学的鸽子实验室名垂青史。
6第六章斯金纳的操作学习理论.ppt.Convertor
6第六章斯⾦纳的操作学习理论.ppt.Convertor第六章斯⾦纳操作学习理论本章主要内容：第⼀节斯⾦纳操作性条件作⽤的基本观点第⼆节⾏为管理的原理第三节斯⾦纳强化原理的教学应⽤第四节对斯⾦纳的学习理论的评价第⼀节斯⾦纳操作性条件作⽤的基本观点⼀、操作性条件反射实验斯⾦纳箱的特点是动物可以反复作出斯⾦纳称为“⾃由操作的反应（free-operant responding）”。
“⾃由”，即动物的⾏为不像在迷津⾥那样受到限制；“操作”，是因为动物的反应是主动作⽤于（或操作）环境。
⼆、两种类型学习的划分（⼀）应答性⾏为和操作性⾏为应答性⾏为：由特定的、可观察的刺激所引起的⾏为操作性⾏为：在没有任何能观察的外部刺激的情境下的有机体⾏为，它似乎是⾃发的（⼆）经典式条件反射学习和操作式条件反射学习经典式条件反射学习（S类条件作⽤），⽤以塑造有机体的应答⾏为；操作式条件反射学习（R类条件作⽤），⽤以塑造有机体的操作性⾏为。
经典性条件反射是S--R的联结过程操作性条件反射是R-S的联结过程。
三、操作性条件作⽤的基本原理（⼀）操作性条件反射的建⽴如果⼀个操作发⽣后，接着给予⼀个强化刺激，那么其做出此种反应的概率就会增加，操作性条件反射即发⽣了。
操作性条件反射的基本模式：SD——R——SR（⼆）操作性条件反射的消退消退（extinction）是指消除强化从⽽消除或降低某⼀个⾏为。
（三）泛化泛化：其它刺激引起同样的反应的现象。
个体在新的情境中会做出⼀些有效的⾏为是因为这些⾏为在类似的情境中已受过反复的强化。
（四）辨别或分化通过对于个体在不同刺激下的反应给予不同的强化来实现辨别。
四、斯⾦纳的操作条件作⽤理论与桑代克的学习理论的⽐较（⼀）对学习实质的看法斯⾦纳强调学习的主动性，桑代克强调学习的联结性，对⾏为的特征做出描述。
（⼆）对效果律看法桑代克的效果律可以说是斯⾦纳强化理论的先驱。
但是斯⾦纳对效果律通过实验做出了证明，也通过强化程式的研究描述了强化如何保持⾏为。
斯金纳的学习理论
斯金纳的学习理论斯金纳的学习理论斯金纳是行为主义的代表人物之一，是操作性条件反射的创始人，是美国当代著名的心理学家。
一、斯金纳的操作性条件反射学习观斯金纳根据自己创制的斯金纳箱（Skinner box）对白鼠和鸽子进行实验，提出了操作性条件反射理论。
斯金纳箱是为动物学习实验的自动记录装置。
它是一大约0.3米见方的箱子，内有杠杆和与食物储存器相连接的食物盘。
在箱内的白鼠按压杠杆，就有一粒食物丸滚入食物盘，便获得食物。
一只饿鼠进入箱内，开始时有点胆怯，经过反复探索，迟早会做出按压杠杆的动作，一粒食物丸落入盘内，若干次后，就形成饿鼠按社取得食物的条件反射，斯金纳称此为操作条件反射。
斯金纳认为，学习一定的行为，重要的是要产生后果。
如果这一后果容易使这一行为再次发生，这就是一种正强化。
如果行为的后果不容易使这一行为再次发生，就是负强化。
换句话说，正强化促进某一行为的发生，而负强化使动物避免作出某种行为。
人们可以有目的地设计强化程序，使人或动物学会某种行为，或控制某种行为的发生。
斯金纳用这种方法研究了鸽子的行为。
他曾试图用鸽子建立条件反射，使鸽子能根据颜色用嘴啄动不同的按钮，用这种方法去控制导弹的飞行。
在实验中，斯金纳发现，开始时鸽子啄红，黄和蓝三个按钮是随机的。
但是，如果在它啄红色按钮时给它一个正强化剌激（如食物），在它啄黄色按钮时不给予任何剌激，在它啄蓝色按钮时给予负强化剌激（如电击），一段时间之后，鸽子啄取红色按钮的次数明显高于啄取其它两个按钮的次数。
二、斯金纳的强化理论1.强化物强化物一般分为两类，一类是指与反应相依随的刺激能增强该反应，此为积极强化物，如水、食物、奖赏等；所谓消极强化物，是指与反应相依随的刺激物从情境中被排除时，可增强该反应。
例如，将白鼠放进一特别箱子中，给予白鼠电击直至白鼠按压杠杆。
经过几次强化以后，白鼠很快习得了有压反应．以逃避电击。
电击即是增强压杆反应的消极强化物，其它诸如强光、噪声、批评等厌恶性刺激皆属此类。
7斯金纳操作学习理论
B·F·斯金纳（Burrhus Frederic Skinner，1904-1990）认为，经典条件作用知识解释了人类与动物的数量非常有限的行为。
传统的刺激-反应理论的一句名言：没有刺激便没有反应。
斯金纳承认这种模式在解释某些行为时是确切的，但他认为，人类与动物显示出来的许多反应并不是明显的刺激引发的。
斯金纳把刺激引发的（elicited）反应称为“应答性反应（respondents）”；把有机体发出的（emitted）反应称为“操作性反应”（operants）。
前者往往是一种不随意的行为；后者大多是随意的或有目的的行为。
在应答性行为中，有机体是被动地对环境作出反应；而在操作性行为中，有机体是主动地作用于环境。
经典条件作用只能用来解释基于应答性行为的学习，斯金纳把这类学习称为“S（刺激）类条件作用”。
另一种学习模式，即操作性或工具性条件作用的模式，则可用来解释基于操作性行为的学习，他称为“R（强化）类条件作用”。
任何作为强化的结果而习得的行为，都可以被看作是操作条件作用的例子。
人们由此把斯金纳的理论称为强化理论。
重要的刺激是跟随反应之后的刺激（强化物），而不是反应之前的刺激。
斯金纳体系试图回答的中心问题是：自变量（强化的类型和强化的安排）是如何影响学习的。
斯金纳区别了两种强化类型：正强化（positive reinforcement，又译积极强化）和负强化（negative reinforcement，又译消极强化）。
当在环境中增加某种刺激，有机体反应概率增加，这种刺激就是正强化物。
当某种刺激在有机体环境中消失时，反应概率增加，这种刺激就是负强化物。
无论是正强化物还是负强化物，它们的结果都是增加反应概率。
在桑代克那里，强化是用来解释刺激-反应联结加强的一条主要原理，而在斯金纳体系中，强化只用一个用来描述反应概率增加的术语，如何安排强化才是核心。
斯金纳还区分了强化的两个来源：一级强化物和二级强化物。
操作性学习理论
操作性学习理论斯金纳操作学习理论、操作学习理论操作性学习理论 1斯金纳操作学习理论是指斯金纳提出的“学习”即反应概率的变化；“理论”是对所观察到的事实的解释；“学习理论”所要做的，是指出引起反应概率变化的条件的理论。
斯金纳（Burrhus Frederic Skinner，1904～1990），美国心理学家。
他是行为主义学派中最有影响的心理学家之一，其学习理论对教育实践起了非常巨大的作用。
斯金纳把行为作为基本的研究对象。
研究行为，并不是因为它有助于解决心理学的问题，而是由于行为本身就是人类生活的一个基本方面。
行为是由于其本身的原因而值得研究。
从职业生涯开始，斯金纳就用自己的程序研究行为，用自己设计的仪器观察行为，用自己的方法分析行为，用自己的观点解释行为。
操作性学习理论 2斯金纳认为，“学习”即反应概率的变化；“理论”是对所观察到的事实的解释；“学习理论”所要做的，是指出引起反应概率变化的条件。
所以，研究行为的目的，是要形成一种分析各种环境刺激的功能的方法，以决定和预测有机体的行为。
因此，斯金纳设计了一种特殊的仪器，我们称之为斯金纳盒。
这是一个黑暗的隔音盒，盒内有开关(如果对象是小白鼠，开关是小杠杆或者木板；如果主体是鸽子，开关是键盘)。
开关连接在箱外的记录系统上，可以精确记录动物按下或啄下开关的次数和次数。
盒子外面有食物释放系统。
一旦动物按下或啄下开关，一粒食物就会掉进盒子里。
当然，不一定要放食物，这可以由实验者决定。
斯金纳前期用小白鼠，后来用鸽子做实验对象。
此外，实验者还可以控制灯光、声音、电击、温湿度等。
在斯金纳箱中，实验的动物可以主动地作用于环境，称为“自由操作的行为”。
所谓“自由”，即动物的行为不像在迷津里那样受到限制；所谓“操作”，是因为动物的反应是主动作用于(或操作)环境。
在斯金纳看来，行为的实验分析侧重于环境事件(刺激)和生物体动作(反应)之间的关系，即需要考察实验操作是如何引起行为变化的。
斯金纳操作学习理论
斯金纳操作学习理论一、基本理论(一)基本原理斯金纳将反应分为两种模式：经过刺激后引发的反应——答应式反应个体没有经受刺激但仍然会发出的反应——操作性反应维系操作性反应的关键：强化“强化物”是指反应发生的概率增加、或者维持某种反应水平的任何刺激。
例如：即将要考试了，大家经受了即将要考试的刺激于是纷纷去图书馆，去图书馆的这个行就是答应式的反应。
那些即使没有考试但依然每天去图书馆，去图书馆的概率增加，一直在强化这个行为，这就是操作性的反应。
（二）正强化和负强化正强化：增加刺激，反应概率增加，这种刺激就是正强化物。
奖励性的刺激负强化：减少或取消刺激，反应概率增加。
厌恶性的刺激例如：孩子起床自动整理的床铺，妈妈夸奖孩子，孩子很开心于是以后经常整理床铺。
（正强化）父母一直唠叨着让孩子清理房间，于是孩子连续两个星期都整理房间，父母的唠叨停止了，孩子也依然会整理房间。
（负强化）（三）强化的安排对学习的影响强化分为：连续强化：每一次反应之后都给予强化间接强化：并不是每一次正确反应之后都给予强化效果：对习得速度的影响。
最初学习给予连续强化，即每一次正确反映都给予强化，就会比较快。
对反应速度的影响。
比例强化安排比间接强化安排的反应速度要快些。
对消退速度的影响。
连续强化——间歇强化固定强化——变化强化必将强化的比例高——比例低两者互相比较，当停止强化后，前者学得快也忘得快二、案例分析3岁的妞妞睡觉总是要妈妈陪她、哄她，直到她睡着为止，中途不能离开半步，否则就立刻放声大哭。
而当她大哭大闹时，妈妈一出现，就停止哭闹，就这样妈妈每天被迫守在妞妞旁边，拿她没办法。
分析：妞妞一旦哭闹，妈妈就回来陪她哄她，是对妞妞的行为的正强化，于是妞妞就会形成这样的反应：只要哭闹就会得到妈妈的安抚。
想要制止住妞妞的这种反应就要给予她负强化，在妞妞想要哭闹时不理她，让她即使哭闹也得不到妈妈的安抚，连续强化这样的行为几次，妞妞就会知道哭闹是没有用的，就能改变这种反应。
斯金纳操作学习理论
斯金纳操作学习理论B·F·斯金纳（Burrhus Frederick Skinner,1904~1990）是操作学习理论的创始人和行为矫正技术的开创者。
他是美国新行为主义的主要代表，也是在所有新行为主义者中，在坚持行为主义基本立场方面最激进的一位，同时，也是对当今心理学影响最大、最重要的新行为主义者。
他最有影响的主张集中体现在他的操作学习理论。
一、操作学习理论的提出：在斯金纳之前，心理学家们就已经用刺激——反应联结对学习作出解释，如华生认为学习就是“以一种刺激替代另一种刺激建立条件反射的过程”；①又如，桑代克提出的尝试——错误学习（trial-error learning）理论，认为学习的实质是“通过‘尝试’在一定的情景与特定的反应之间建立某种联结”②斯金纳指出，虽然，某些人类的行为正如之前的心理学家们说的那样，是由特定的刺激引起的，但是，这些只能解释所有人类行为的一小部分，于是他提出了另外一类行为，称之为操作性行为，因为它们是在环境中缺乏明显的无条件刺激物时操作的。
斯金纳的工作主要集中在行为与后果的关系上，并由此提出了对教育实践起巨大影响的学习理论——操作学习理论。
二、斯金纳操作学习理论的基本观点：（一）经典实验——斯金纳箱（Skinner box）：20世纪30年代后期，斯金纳改进了桑代克的迷笼，设计了“斯金纳箱”，并用来研究各种动物（如白鼠与鸽子）的行为。
此箱去掉了所有无关刺激，通常内设一杠杆，杠杆与一食物仓相连，动物（如白鼠）偶然地一按杠杆，食物仓便打开，落下一食物小丸于食物盘内，箱外有一记录器，可记录白鼠按压杠杆的速度。
实验中，动物从初始的混乱动作中无意地碰到杠杆而得到食物，从而学会了按压杠杆与得到食物之间的联结。
通过更为复杂的设计，动物还可以学会分化行为，如当灯亮时按杠杆可以得到食物，而灯灭时按杠杆得不到食物，于是，动物学会了只在灯亮时按压杠杆。
（二）两种类型的学习：从对动物的研究中，斯金纳认为，行为分为两类：应答性行为和操作性行为。
斯金纳操作学习理论
（3）、惩罚：
①含义：当有机体作出某种反应以后， 呈现一个厌恶刺激或不愉快刺激，以消 除或抑制此类反应的过程，称作惩罚。 ②作用：惩罚与负强化和消退都有所不 同，负强化是要增加行为发生的概率， 消退是不施与强化。但惩罚是通过厌恶 刺激的呈现来使行为反应在将来发生的 概率降低。
（4）、总结
正强化 负强化 消退 惩罚
三、操作学习理论的基本观点：
1.斯金纳箱 2.学习的两种类型 3.主要规律
1、斯金纳箱
2.学习的两种类型
经典性条件反射 反应特征 形成条件 刺激 应答行为 条件刺激与无条件刺激相 匹配 操作性条件反射 自发行为 及时强化
对特定刺激才能产生反应 不需要特定的刺激
消退
条件刺激多次单独出现
将强化物去掉
反射学习
操作学习
3、主要规律
（1）、强化（含义，类型） （2）、消退（含义，类型） （3）、惩罚（含义，类型） （4）、总结
（1）、强化
①
含义：能增强反应率的效果
② 强化物含义：使反应发生概率化 ④ 作用：塑造行为
（2）、消退
斯金纳操作学习理论
试讲人：
一、生平
二、操作学习理 论的提出 三、操作学习理论的基 本观点
一、生平
简介
斯金纳(Burrhus Frederic Skinner，1904-1990)是20世纪后半叶最卓越、 最著名的美国心理学家之一,是新行为主义中 极端行为主义的代表,是操作条件作用学习理 论的建构者,也是力图将心理科学在实际生活 中推展应用的著名心理学家。在20世纪100位 最著名的心理学家中排名第一。
斯金纳操作学习理论
第四章斯金纳操作学习理论斯金纳操作学习理论第一节：斯金纳操作性条件作用的基本观点第二节：斯金纳的强化原理第三节：斯金纳的强化原理的应用第一节：斯金纳操作性条件作用的基本观点自己程序研究行为；设计仪器观察行为；找出方法分析行为；想出观点解释行为斯金纳把行为作为基本的研究对象。
实验研究的最终目的是要建构理论。
一、行为的实验分析行为的实验分析关注的是环境事件（刺激）与有机体行动（反应）之间的关系。
基本的实验操作控制如：呈现刺激：主要引起特定的反应安排结果：安排各种环境，使有机体具有效果或结果信号刺激：有选择的对复杂环境中的刺激反应二、两种类型的学习应答性反应：由刺激引发的反应（不随意）操作性反应：把有机体发出的反应（随意或有目的）S（刺激）类条件作用：被动的对环境做出反应R（强化）类条件作用：有机体主动作用于环境S-R-S：刺激与刺激反应后的刺激（强化物），并非反应前的刺激。
第二节：斯金纳的强化原理中心问题：自变量（强化的类型和强化的安排）是如何影响学习的。
一、强化的类型正强化：在环境中增加某种刺激，有机体反应概率增加。
负强化：当某种刺激在有机体环境中消失时，反应概率增加。
二、强化的安排连续强化：每次正确后给予强化间歇强化：并非每次正确后给予强化固定/变化比例强化：根据一定比例固定/变化间歇强化：根据一定时间间隔三、不同强化安排的效果1、对习得速度的影响2、对反应速度的影响3、对消退速度的影响四、迷信的强化安排五、负强化与惩罚负强化：(积极)厌恶性刺激反应后消除惩罚:（消极）抑制反应发生的概率第三节：斯金纳的强化原理的应用一、塑造：反应的辨别安排特定的强化相倚关系使有机体做出他们行为库中不曾有过的复杂动作。
二、渐退：刺激的辨别通过有差别的强化，缓慢地减少两种或以上刺激的特征，从而使有机体最终能对两种只有很小差异的刺激作出辨别的反应。
谢谢指导！。
斯金纳的操作性条件反射学习理论
斯金纳的操作性条件反射学习理论斯金纳的操作性条件反射学习理论是一种心理学理论，用来解释人类和动物的行为学习过程。
斯金纳强调，行为是一种通过与环境的接触而产生的结果，也就是说，行为是对环境刺激的响应。
这种学习过程通过对行为的奖励或惩罚来加强或抑制。
操作性条件反射学习理论基于实验室中对动物的研究。
在实验中，动物需要通过特定的行为来获得奖励，比如食物。
当动物展示出符合要求的行为时，它们会被奖励，这增加了该行为在将来发生的概率。
相反，如果行为不符合要求，动物会受到惩罚，这减少了该行为未来发生的概率。
斯金纳认为，学习是一种积累的过程，通过与环境的互动的反馈来塑造和增加或减少行为。
他将这种学习过程称为“操作性条件反射”，因为它涉及到个体主动操作环境来获得奖励。
在操作性条件反射学习中，有两个重要的概念。
第一个是“强化”，指的是增加或加强其中一种行为的结果。
例如，当一个学生表现出令人满意的行为，老师可以给予奖励，如表扬或小礼物，以增加该行为的出现频率。
第二个概念是“惩罚”，指的是减少或抑制其中一种行为的结果。
比如，当一个孩子做了不恰当的行为，父母可以施加其中一种惩罚，如责骂或罚款，以降低这种行为的概率。
斯金纳还提出了“连续强化”和“间歇强化”的概念。
连续强化是指在每次正确行为发生时给予奖励。
这种强化方式适用于刚开始学习的时候，可以帮助个体建立一个新的行为习惯。
而间歇强化是指不是每次正确行为都给予奖励，而是根据一定的时间间隔或特定的行为频率给予奖励。
间歇强化可以增加行为的持久性，因为个体无法预知何时会得到奖励，所以会持续展示这种行为。
斯金纳的操作性条件反射学习理论在教育、工业和临床等领域有着广泛的应用。
在教育领域，老师可以利用这个理论来设计有效的教学方法。
通过给予学生奖励或惩罚，可以帮助他们形成良好的学习习惯和行为。
在工业领域，这个理论可以用来培养员工的工作能力和行为，提高工作效率和满意度。
在临床领域，这个理论可以用来帮助患者改变自己的行为习惯，例如戒烟、减肥等。
斯金纳的操作学习理论
思考：
在幼儿良好行为习惯的培养中，更多的要使 用哪种强化物或惩罚物？ 结论： 社会强化物、自然强化物、活动强化物 移去性惩罚
思考：
对学生行为的强化是否是无限期的？强化 消失，学生行为会不会消失？ 结论 合理运用强化间隔，可以提高反应稳定性
（五）强化的程式：是指通过控制强化出现的时机 和频率，来增强或减弱行为。 1、连续强化：即每次正确反应都给予强化——及时 强化【在教新反应时最为有效】 2、间隔强化：即偶尔强化某一行为——延缓强化 【在巩固反应时最为有效】
案例2
1.父母唠叨着让孩子清理房间——孩子连续两 个星期都整理了房间——父母的唠叨停止了。 （负强化）
2.孩子起床自己整理床铺——妈妈夸奖说“床 铺整理的好整齐！”——孩子以后经常整理 床铺。 （正强化）
6
案例3买糖果与发脾气
妈妈带着孩子在商场购物，当他看到巧克 力时，他要妈妈给他买。但是，妈妈没有 答应。这时小家伙开始哭闹，甚至大发脾 气。无奈之下，妈妈只好给他买了。以后 的几周里经常能看到这一幕。再后来，这 位妈妈只要一走进食品区，就先给孩子巧 克力。 思考：分析妈妈的行为，说一说这样做对 吗？为什么？
斯金纳的操作学习理论【19】
一、分析两种行为 思考：小白鼠按压杠杆的行为和巴普洛夫实验中 狗听到铃声掉口水的行为有什么区别？ 狗：应答性行为：由已知的外在刺激引发的行为—— 应答性反射S→R 鼠：操作性行为：有机体“习得”后，主动发出的行 为——操作性反射R→S
两者的区别：行为是否有目的 结论：想增强某种行为，就奖赏它！
– 时距式、比率式【21表】
最佳组合：最初连续强化安排——然后固定间隔 强化安排——最后变化比例强化安排
19
斯金纳操作学习理论
二、两种类型的学习
• • 行为 • 应答性行为 操作性行为 S R R S 两者的区别： 行为是否有 目的
• 应答性条件反射 • 条件反射 • 操作性条件反射
斯金纳认为学习是形成刺激与反应之间的联结，人类 绝大部分行为都属于操作性行为，学习的过程就是操作性 条件反射的形成过程。
三、强化理论
1、强化 （1）强化的分类 斯金纳区分了两种强化类型：正强化和负强化 正强化：在环境中增加某种刺激，有机体 反应概率增加 负强化：当某种刺激在有机体环境中消失 时，反应概率增加
（2）强化的安排
（3）不同强化安排的效果
• • 对习得速度的影响 一般说来，如果最初学习时给予连续强化，学习速度就会比 较快些。如果最初学习时使用间歇强化，学习就会困难些，速度 也就慢一些。 对反应速度的影响 首先，一般说来，比例强化比间隔强化的反应速度要快些。 其次在两种固定强化安排中（固定比例强化和固定间隔强化）， 在每次强化后，反应速度立即变慢，其反应速度是从这一次强化 后到下一次强化前有规则地逐渐加快。由于这种图解很像海里的 扇贝，因此把它称为“扇贝型”（scalloping）效应。最后，在 两次强化之间反应速度的这些变式，只表现在固定强化安排中， 在变化强化安排中则没有呈现这种现象。 对消退速度的影响 不给强化后：连续强化安排导致消退速度快于间歇强化安排； 固定强化安排导致消退速度快于变化强化安排；比例强化安排中 强化次数与反应次数比例愈高，消退速度愈快。
斯金纳操作学习理论
一、斯金纳的经典实验 二、两种类型的学习
三、强化理论
斯金纳简介
• 伯尔赫斯· 弗雷德里克· 斯金纳（Burrhus Frederic Skinner，1904—1990），新行为主义学习理论 的创始人。是一位美国心理学家，新行为主义的 主要代表人。他引入了操作条件性刺激。他还写 了著名的小说《桃源二村》 。
斯金纳操作学习理论
斯金纳操作学习理论B·F·斯金纳（Burrhus Frederick Skinner,1904~1990）是操作学习理论的创始人和行为矫正技术的开创者。
他是美国新行为主义的主要代表，也是在所有新行为主义者中，在坚持行为主义基本立场方面最激进的一位，同时，也是对当今心理学影响最大、最重要的新行为主义者。
他最有影响的主张集中体现在他的操作学习理论。
一、操作学习理论的提出：在斯金纳之前，心理学家们就已经用刺激——反应联结对学习作出解释，如华生认为学习就是“以一种刺激替代另一种刺激建立条件反射的过程”；①又如，桑代克提出的尝试——错误学习（trial-error learning）理论，认为学习的实质是“通过‘尝试’在一定的情景与特定的反应之间建立某种联结”②斯金纳指出，虽然，某些人类的行为正如之前的心理学家们说的那样，是由特定的刺激引起的，但是，这些只能解释所有人类行为的一小部分，于是他提出了另外一类行为，称之为操作性行为，因为它们是在环境中缺乏明显的无条件刺激物时操作的。
斯金纳的工作主要集中在行为与后果的关系上，并由此提出了对教育实践起巨大影响的学习理论——操作学习理论。
二、斯金纳操作学习理论的基本观点：（一）经典实验——斯金纳箱（Skinner box）：20世纪30年代后期，斯金纳改进了桑代克的迷笼，设计了“斯金纳箱”，并用来研究各种动物（如白鼠与鸽子）的行为。
此箱去掉了所有无关刺激，通常内设一杠杆，杠杆与一食物仓相连，动物（如白鼠）偶然地一按杠杆，食物仓便打开，落下一食物小丸于食物盘内，箱外有一记录器，可记录白鼠按压杠杆的速度。
实验中，动物从初始的混乱动作中无意地碰到杠杆而得到食物，从而学会了按压杠杆与得到食物之间的联结。
通过更为复杂的设计，动物还可以学会分化行为，如当灯亮时按杠杆可以得到食物，而灯灭时按杠杆得不到食物，于是，动物学会了只在灯亮时按压杠杆。
（二）两种类型的学习：从对动物的研究中，斯金纳认为，行为分为两类：应答性行为和操作性行为。
斯金纳 操作性学习理论
操作性行为的特点
• 操作行为是自发的而绝不是由刺激引发的。
• 有机体可以收到控制变量的影响，而此变 量并不必定认作为刺激。
• 操作性行为不是一个单独的反应，而是一 类反应。
16
2、研究的方法论
• 在《有机体的行为》一书中对新行为主义的方法 论作了规范。 A、实验环境要有利于保持行为的自然连续性。 B、研究者要尽最大可能去控制有机体的环境，从 而加强对自变量的操纵，或保持自变量的稳定， 进而观察它们如何改变自己的行为。 C、创造一定的条件，把研究对象安置在可以表现 行为的环境中以便观察记录。 D、反应速率是分析的基本素材。
10
斯金纳的实验
• 斯金纳在30年代发明了一种所谓斯金纳箱 的学习装置。箱内装上一操纵杆，操纵杆 与另一提供食九的装置连接。把饥饿的白 鼠置于箱内，白鼠偶然踏上操纵杆，供九 装置就落厂一粒食九。白鼠经过几次尝试， 会不断按压操纵杆，立到吃饱为止。这时 我们可以说．白鼠学会按压操纵杆以取得 食物的反应。按压操纵杆变成了取得食物 的手段或者丁具。所以，操作条件反射又 称为工具条件反射。
通过教学机器应用小步子渐进和及时强化原理把复杂的问题分解成一系列小的易懂的问题一步一步地呈现给学生如果学生的回答与机器后来呈现的正确答案相符机器接着下一个问题
斯金纳的操作行为主义 学习理论
1
一、斯金纳略传
• 斯金纳（Burrhus Frederic Skinner，1904—1990）是 新行为主义心理学的创始人 之一。他1904年3月20日生 于美国宾夕法尼亚州东北部 的一个车站小镇。斯金纳从 小喜爱发明创造，富有冒险 精神。他15岁时曾与几个小 伙伴驾独木舟沿河而下，漂 流300英里。他还试制过简 易滑翔机，曾把一台废锅炉 改造成一门蒸汽炮，把土豆 和萝卜当炮弹射到邻居的屋 顶上。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
2.消退：指消除强化从而消除或降低某一行 为的过程。 （1）一个以前被强化的行为 （2）不再导致具有强化作用的结果 （3）行为发生概率降低。
22
例二：在上小学后，几乎所有的学校都进 行文明礼貌教育，包括教育孩子在早晨上 学前和父母说：“爸爸妈妈再见”，放学 回家时在门口喊：“爸爸妈妈我回来了”。 但是，有些父母根本不注意对孩子进行文 明礼貌习惯的培养，在孩子说：“爸爸妈 妈我回来了”和“爸爸妈妈再见”时没有 任何反应。 无意之间消退了应该强化的好行为
思考：
在幼儿良好行为习惯的培养中，更多的要使 用哪种强化物或惩罚物？ 结论： 社会强化物、自然强化物、活动强化物 移去性惩罚
思考：
对学生行为的强化是否是无限期的？强化 消失，学生行为会不会消失？ 结论 合理运用强化间隔，可以提高反应稳定性
（五）强化的程式：是指通过控制强化出现的时机 和频率，来增强或减弱行为。 1、连续强化：即每次正确反应都给予强化——及时 强化【在教新反应时最为有效】 2、间隔强化：即偶尔强化某一行为——延缓强化 【在巩固反应时最为有效】
斯金纳的操作学习理论【19】
一、分析两种行为 思考：小白鼠按压杠杆的行为和巴普洛夫实验中 狗听到铃声掉口水的行为有什么区别？ 狗：应答性行为：由已知的外在刺激引发的行为—— 应答性反射S→R 鼠：操作性行为：有机体“习得”后，主动发出的行 为——操作性反射R→S
两者的区别：行为是否有目的 结论：想增强某种行为，就奖赏它！
第三阶段：女生
电话
男生（拒绝）
惩罚
惩罚作用
①惩罚只是教人不该做什么，而不是教人该 做什么。 ②惩罚只能抑制而不能消除不良行为。 ③惩罚会导致消极情绪，甚至逆反心理。 ★惩罚至少在抑制不良行为方面是非常有效 的。避免危害扩大。
罚站，到底 是算惩罚物 呢？还是负 强化物？
减 少
讲话
罚站 回答提问
去除罚站
实物强化物
符号强化物
可交换【积分兑换】代币【P22】
9
三、惩罚
某行为结果使行为概率降低或消除的过程。 1.Ⅰ型惩罚：通过呈现厌恶刺激来降低反应 频率【呈现性惩罚】 2.Ⅱ型惩罚：通过消除愉快刺激来减低反应 频率。【移去性惩罚】
案例1：一位男同学的恋爱史
电话
第二阶段：女生
男生（赞美之词）
正强化
– 时距式、比率式【21表】
最佳组合：最初连续强化安排——然后固定间隔 强化安排——最后变化比例强化安排
19
（六）强化技术：行为的塑造和消退【21】 1.塑造：是指通过小步强化达成最终目标。 相继近似法： （1）确定目标行为 （2）确定起始行为 （3）选择适当强化物 （4）设计塑造步骤 （5）按正确步调前进
案例2
1.父母唠叨着让孩子清理房间——孩子连续两 个星期都整理了房间——父母的唠叨停止了。 （负强化）
2.孩子起床自己整理床铺——妈妈夸奖说“床 铺整理的好整齐！”——孩子以后经常整理 床铺。 （正强化）
6
案例3买糖果与发脾气
妈妈带着孩子在商场购物，当他看到巧克 力时，他要妈妈给他买。但是，妈妈没有 答应。这时小家伙开始哭闹，甚至大发脾 气。无奈之下，妈妈只好给他买了。以后 的几周里经常能看到这一幕。再后来，这 位妈妈只要一走进食品区，就先给孩子巧 克力。 思考：分析妈妈的行为，说一说这样做对 吗？为什么？
分析：
妈妈买巧克力的行为，增加了孩子哭闹的 频率，是正强化。
孩子对妈妈哭闹，塑造了妈妈卖巧克力的 行为，是负强化。 妈妈这样做会养成孩子娇纵的不良习惯。
（二）强化物：使行为增加的刺激物
社会强化物 自然强化物 反馈 活动强化物 认可、关注【口头表扬、拍拍肩膀】 活动本身带来的乐趣【有兴趣的活动】 提供活动表现的信息【评语、成绩单】 普雷马克原理：用喜欢的活动强化不喜欢的行 为；【奖励自己读十页书后就可以看一个电视 节目。】 可以赚到的有价值的实物【球、钱、书】
惩罚 减少 呈现 厌恶 痛苦开始
方式
刺激特点 情绪体验
呈现
厌恶 痛苦开始
移去
愉悦 愉快结束
（四）惩罚物：使行为减少的刺激物。 1.呈现性惩罚物： 体罚：对身体施行厌恶刺激，如电击、身体练习。 谴责：强烈的、否定的语言刺激或警告语句。
反映限制：当问题行为出现时马上采取措施对身体 进行限制。 矫枉过正：偷一罚十、错一字写十遍 2.移去性惩罚物： 隔离、反应代价
案例1：一位男同学的恋爱史
电话
第一阶段：男生 （赞美之词）
电话
女生
应答性行为
第二阶段：女生
男生（赞美之词）
操作性行为
思考： 是什么让个体形成“操作性反射” 结论： 操作条件反射的基本条件：结果对某种行 为的增减产生影响。
– 凡是其结果使行为增加的，称之为“强化” – 凡是其结果使行为减少的，称之为“惩罚”
26
例四：一对夫妇想通过消退法消退女儿的打断别 人谈话的不良行为。一天有人来访，女儿又打扰 大人谈话，父母没有理她，可是，女儿却在一边 大吵大闹。父母感觉没有办法，走过来和她讲道 理（这就强化了她的不良行为，中断了消退）。 下一次出现类似情景时，父母又试图用消退法消 退孩子的打断大人说话的行为。这就是间歇消退， 并不能达到消除不良行为的目的。 无意中使用了间歇消退
25
例三：洋洋因为想要玩具机关枪不能被满足而 大哭大闹。爸爸妈妈坚持，不为所动。这时恰 好爷爷奶奶来了，一看孙子哭得厉害，不仅批 评儿子、媳妇，不正确的处理方 法，使本来有可能执行得很好的消退程序半途 而废，从而可能使孩子把哭闹当作达到自己不 合理要求的手段。 无意中中断消退程序，使消退半途而废
二、强化理论 人的行为受行为后果的控制，因而改变刺 激后果就能改变行为——后果刺激
（ S） → R
s
强化特点： （1）强化并不一定都令人愉快； （2）强化存在个体差异与情境性；
4
（一）强化：某行为结果使行为概率增加的 过程。 1.正强化：通过呈现某一想要的、愉快的刺 激来增强反应概率 2.负强化：通过减少或取消某一厌恶性、不 愉快的刺激来增强反应频率
负强化的实施前 提：个体处在某 种厌恶刺激下
增多
思考：
正强化 行为反应频率 方式 刺激特点 情绪体验
惩罚1 行为反应频率 惩罚2
负强化
惩罚
方式
刺激特点 情绪体验
正强化 行为反应频率 增多 方式 呈现 刺激特点 愉悦 情绪体验 快乐开始
惩罚1 行为反应频率 减少
负强化 增多 去除 厌恶 痛苦停止
惩罚2 减少