Оперантное научение
Оперантное обусловливание — это влияние последствий поведения на самого человека и его поведение, под последствиями понимают изменения в окружающей среде (изменение стимула), которые происходят сразу после поведения и влияют на частоту воспроизводства этого поведения человеком в будущем. Этот процесс имеет схожие черты с дарвиновским естественным отбором в том смысле, что поведение отбирается по его последствиям в течение жизни особи подобно тому, как виды отбраковываются по последствиям выживания в процессе эволюции. Понятие оперантного обусловливания введено Б. Ф. Скиннером.
Оперантное научение основывается на оперантном поведении — поведении, воздействующем на окружение, которым управляют непосредственные последствия этого поведения, в противоположность ответному (респондентному) поведению, которым управляет предшествующий стимул. Б. Ф. Скиннер сформулировал концепцию оперантного обусловливания после многолетних экспериментов на животных, проведённых им в университете Гарварда.
| Оперантное обусловливание | Угасание | ||||||||||||||||||||||||||||||
| Подкрепление Усиливает поведение | Наказание Ослабляет поведение | ||||||||||||||||||||||||||||||
| Положительное подкрепление Приятный стимул в ответ на правильное поведение | Отрицательное подкрепление | Положительное наказание Неприятный стимул в ответ на неправильное поведение | Отрицательное наказание Удаление приятного стимула в ответ на неправильное поведение | ||||||||||||||||||||||||||||
| Устранение Удаление неприятного стимула в ответ на правильное поведение | Активное уклонение от неприятного стимула | ||||||||||||||||||||||||||||||
Множество действий, определяющихся по последствиям (постцедентными воздействиями), называется оперантом. Операнты определяются функционально, то есть по тем изменениям, которые вызывает поведение человека в его непосредственном окружении. Связи между оперантным поведением и событиями, происходящими вокруг него, называются контингенциями. Наиболее распространённой схемой для оперантного анализа является трёхчастная контингенция, состоящая из связи между предшествующим событием, или обстановкой, в которой произошло поведение, поведением и последствиями.
Термин условие указывает на сочетания, возникновение которых вероятно, но не неизбежно. В исследованиях поведения влияние некоторого условия на поведение необходимо доказывать.
Теоретические постулаты оперантного бихевиоризма применяются на практике в некоторых вариантах программированного обучения, поведенческой терапии, прикладного анализа поведения.
История
Оперантное обусловливание иногда называют инструментальным научением, которое было впервые тщательно изучено Эдвардом Торндайком (1874—1949): он исследовал поведение кошек, которые должны были выбираться из «проблемного ящика». Кошка могла выбраться из ящика, совершив простое действие — например, потянув за шнур или надавив на шест, — но в первый раз кошке требовалось много времени, чтобы выбраться оттуда. При повторных экспериментах неэффективные реакции возникали реже, а успешные возникали чаще, поэтому кошки выбирались из ящика все быстрее и быстрее. Торндайк обобщил эти данные в своем законе эффекта (англ. Law of effect), который гласит, что поведение, которое приносит удовольствие, имеет тенденцию повторяться, а поведение, приводящее к неприятным последствиям, повторяется с меньшей вероятностью. Короче говоря, некоторые последствия усиливают поведение, а некоторые — ослабляют поведение. Составив график времени, которое требовалось кошке, чтобы выбраться из ящика, относительно числа испытаний, Торндайк создал первые известные кривые обучения животных с помощью такой процедуры. Теперь этот процесс называется оперантным обусловливанием.
Отцом термина оперантное обусловливание является Б. Ф. Скиннер (1904—1990). Его книга 1938 года «The Behavior of Organisms: An Experimental Analysis» положила начало изучению оперантного обусловливания и его применения к поведению человека и животных. Следуя идеям Эрнста Маха, Скиннер отверг опору на ненаблюдаемые психические состояния, такие как удовлетворение (как это было у Торндайка), построив свой анализ на наблюдаемом поведении и его последствиях, которые так же можно наблюдать.
Концепции и процедуры
Изменение оперантного поведения: подкрепление и наказание.
Подкрепление и наказание — это два инструмента, с помощью которых происходит модификация оперантного обусловливания. Всего существует 5 видов его последствий:
- Положительное подкрепление — сразу после поведенческой реакции предъявляется стимул, который приводит к увеличению частоты возникновения этого класса реакций в будущем.
- Отрицательное подкрепление (избегание) — сразу после поведенческой реакции некий аверсивный стимул убирается из окружающей среды, что приводит к увеличению частоты возникновения этого класса реакций в будущем. В экспериментах Скиннера, таким стимулом был громкий звук внутри коробки. Когда крыса нажимала на рычаг, звук прекращался, таким образом, поведение крысы получало отрицательное подкрепление.
- Положительное наказание — сразу после поведенческой реакции предъявляется аверсивный стимул, и это приводит к тому, что частота возникновения поведения в будущем уменьшается.
- Отрицательное наказание — после поведенческой реакции из среды убирается желаемый стимул, и это приводит к уменьшению возникновения этого поведения в будущем.
- Угасание — ослабление поведенческой реакции до уровня, наблюдаемого до начала подкрепления, либо полное её исчезновение в результате прекращения ее подкрепления. В прикладном анализе поведения также применяется процедура гашения, то есть процедура формирования угасания путём отмены подкрепления. В процессе применения данной процедуры обычно возникает угасательное обострение, то есть увеличение частоты реакций сразу после отмены подкрепления. Пример: сначала крыса много раз получает пищу после нажатия на рычаг, затем пища перестает поступать после нажатия рычага; со временем крыса начинает нажимать на рычаг всё реже и реже.
См. также
- Поведение
- Прикладной анализ поведения
- Классическое обусловливание
Примечания
- Джон О. Купер, Тимоти Э. Херон, Уильям Л. Хьюард. Прикладной анализ поведения. Пер. с англ.. — Москва: Практика, 2016. — С. 767. — 864 с. — 1200 экз. — ISBN (англ.) 978-0-13-142113-4. — ISBN (русск.) 978-5-89816-157-6.
- Варгас Дж. Анализ деятельности учащихся. Методология повышения школьной успеваемости. — М.: Оперант, 2015.
- Варгас Э. А. «Вербальное поведение» Б. Ф. Скиннера: Введение // Вестник Новосибирского государственного университета. Серия: Психология. — 2010. — Т. 4, № 2. — С. 56–78.
- Скиннер Беррес Фредерик / Зинченко В. П., Мещеряков Б. Г. Большой психологический словарь. — М.: ОЛМА-ПРЕСС, 2003.
- Thorndike, E.L. "Animal intelligence: An experimental study of the associative processes in animals" // Psychological Review Monograph Supplement. — 1901. — № 2. — С. 1—109.
- Miltenberger, R. G. Behavioral Modification: Principles and Procedures. — Thomson/Wadsworth, 2008. — С. 9.
- Skinner, B. F. The Behavior of Organisms: An Experimental Analysis". — New York: Appleton-Century-Crofts, 1938.
- Skinner, B. F. "Are theories of learning necessary?" // Psychological Review. — 1950. — Т. 4, № 57. — С. 193–216. — doi:10.1037/h0054367. — PMID 15440996. Архивировано 28 февраля 2021 года.
В другом языковом разделе есть более полная статья Operant conditioning (англ.). |
Википедия, чтение, книга, библиотека, поиск, нажмите, истории, книги, статьи, wikipedia, учить, информация, история, скачать, скачать бесплатно, mp3, видео, mp4, 3gp, jpg, jpeg, gif, png, картинка, музыка, песня, фильм, игра, игры, мобильный, телефон, Android, iOS, apple, мобильный телефон, Samsung, iphone, xiomi, xiaomi, redmi, honor, oppo, nokia, sonya, mi, ПК, web, Сеть, компьютер, Информация о Оперантное научение, Что такое Оперантное научение? Что означает Оперантное научение?
Operantnoe obuslovlivanie eto vliyanie posledstvij povedeniya na samogo cheloveka i ego povedenie pod posledstviyami ponimayut izmeneniya v okruzhayushej srede izmenenie stimula kotorye proishodyat srazu posle povedeniya i vliyayut na chastotu vosproizvodstva etogo povedeniya chelovekom v budushem Etot process imeet shozhie cherty s darvinovskim estestvennym otborom v tom smysle chto povedenie otbiraetsya po ego posledstviyam v techenie zhizni osobi podobno tomu kak vidy otbrakovyvayutsya po posledstviyam vyzhivaniya v processe evolyucii Ponyatie operantnogo obuslovlivaniya vvedeno B F Skinnerom Operantnoe nauchenie osnovyvaetsya na operantnom povedenii povedenii vozdejstvuyushem na okruzhenie kotorym upravlyayut neposredstvennye posledstviya etogo povedeniya v protivopolozhnost otvetnomu respondentnomu povedeniyu kotorym upravlyaet predshestvuyushij stimul B F Skinner sformuliroval koncepciyu operantnogo obuslovlivaniya posle mnogoletnih eksperimentov na zhivotnyh provedyonnyh im v universitete Garvarda Operantnoe obuslovlivanieUgasaniePodkreplenie Usilivaet povedenieNakazanie Oslablyaet povedeniePolozhitelnoe podkreplenie Priyatnyj stimul v otvet na pravilnoe povedenieOtricatelnoe podkrepleniePolozhitelnoe nakazanie Nepriyatnyj stimul v otvet na nepravilnoe povedenieOtricatelnoe nakazanie Udalenie priyatnogo stimula v otvet na nepravilnoe povedenieUstranenie Udalenie nepriyatnogo stimula v otvet na pravilnoe povedenieAktivnoe uklonenie ot nepriyatnogo stimula Mnozhestvo dejstvij opredelyayushihsya po posledstviyam postcedentnymi vozdejstviyami nazyvaetsya operantom Operanty opredelyayutsya funkcionalno to est po tem izmeneniyam kotorye vyzyvaet povedenie cheloveka v ego neposredstvennom okruzhenii Svyazi mezhdu operantnym povedeniem i sobytiyami proishodyashimi vokrug nego nazyvayutsya kontingenciyami Naibolee rasprostranyonnoj shemoj dlya operantnogo analiza yavlyaetsya tryohchastnaya kontingenciya sostoyashaya iz svyazi mezhdu predshestvuyushim sobytiem ili obstanovkoj v kotoroj proizoshlo povedenie povedeniem i posledstviyami Termin uslovie ukazyvaet na sochetaniya vozniknovenie kotoryh veroyatno no ne neizbezhno V issledovaniyah povedeniya vliyanie nekotorogo usloviya na povedenie neobhodimo dokazyvat Teoreticheskie postulaty operantnogo biheviorizma primenyayutsya na praktike v nekotoryh variantah programmirovannogo obucheniya povedencheskoj terapii prikladnogo analiza povedeniya IstoriyaOperantnoe obuslovlivanie inogda nazyvayut instrumentalnym naucheniem kotoroe bylo vpervye tshatelno izucheno Edvardom Torndajkom 1874 1949 on issledoval povedenie koshek kotorye dolzhny byli vybiratsya iz problemnogo yashika Koshka mogla vybratsya iz yashika sovershiv prostoe dejstvie naprimer potyanuv za shnur ili nadaviv na shest no v pervyj raz koshke trebovalos mnogo vremeni chtoby vybratsya ottuda Pri povtornyh eksperimentah neeffektivnye reakcii voznikali rezhe a uspeshnye voznikali chashe poetomu koshki vybiralis iz yashika vse bystree i bystree Torndajk obobshil eti dannye v svoem zakone effekta angl Law of effect kotoryj glasit chto povedenie kotoroe prinosit udovolstvie imeet tendenciyu povtoryatsya a povedenie privodyashee k nepriyatnym posledstviyam povtoryaetsya s menshej veroyatnostyu Koroche govorya nekotorye posledstviya usilivayut povedenie a nekotorye oslablyayut povedenie Sostaviv grafik vremeni kotoroe trebovalos koshke chtoby vybratsya iz yashika otnositelno chisla ispytanij Torndajk sozdal pervye izvestnye krivye obucheniya zhivotnyh s pomoshyu takoj procedury Teper etot process nazyvaetsya operantnym obuslovlivaniem Otcom termina operantnoe obuslovlivanie yavlyaetsya B F Skinner 1904 1990 Ego kniga 1938 goda The Behavior of Organisms An Experimental Analysis polozhila nachalo izucheniyu operantnogo obuslovlivaniya i ego primeneniya k povedeniyu cheloveka i zhivotnyh Sleduya ideyam Ernsta Maha Skinner otverg oporu na nenablyudaemye psihicheskie sostoyaniya takie kak udovletvorenie kak eto bylo u Torndajka postroiv svoj analiz na nablyudaemom povedenii i ego posledstviyah kotorye tak zhe mozhno nablyudat Koncepcii i proceduryIzmenenie operantnogo povedeniya podkreplenie i nakazanie Podkreplenie i nakazanie eto dva instrumenta s pomoshyu kotoryh proishodit modifikaciya operantnogo obuslovlivaniya Vsego sushestvuet 5 vidov ego posledstvij Polozhitelnoe podkreplenie srazu posle povedencheskoj reakcii predyavlyaetsya stimul kotoryj privodit k uvelicheniyu chastoty vozniknoveniya etogo klassa reakcij v budushem Otricatelnoe podkreplenie izbeganie srazu posle povedencheskoj reakcii nekij aversivnyj stimul ubiraetsya iz okruzhayushej sredy chto privodit k uvelicheniyu chastoty vozniknoveniya etogo klassa reakcij v budushem V eksperimentah Skinnera takim stimulom byl gromkij zvuk vnutri korobki Kogda krysa nazhimala na rychag zvuk prekrashalsya takim obrazom povedenie krysy poluchalo otricatelnoe podkreplenie Polozhitelnoe nakazanie srazu posle povedencheskoj reakcii predyavlyaetsya aversivnyj stimul i eto privodit k tomu chto chastota vozniknoveniya povedeniya v budushem umenshaetsya Otricatelnoe nakazanie posle povedencheskoj reakcii iz sredy ubiraetsya zhelaemyj stimul i eto privodit k umensheniyu vozniknoveniya etogo povedeniya v budushem Ugasanie oslablenie povedencheskoj reakcii do urovnya nablyudaemogo do nachala podkrepleniya libo polnoe eyo ischeznovenie v rezultate prekrasheniya ee podkrepleniya V prikladnom analize povedeniya takzhe primenyaetsya procedura gasheniya to est procedura formirovaniya ugasaniya putyom otmeny podkrepleniya V processe primeneniya dannoj procedury obychno voznikaet ugasatelnoe obostrenie to est uvelichenie chastoty reakcij srazu posle otmeny podkrepleniya Primer snachala krysa mnogo raz poluchaet pishu posle nazhatiya na rychag zatem pisha perestaet postupat posle nazhatiya rychaga so vremenem krysa nachinaet nazhimat na rychag vsyo rezhe i rezhe Sm takzheMediafajly na Vikisklade Povedenie Prikladnoj analiz povedeniya Klassicheskoe obuslovlivaniePrimechaniyaDzhon O Kuper Timoti E Heron Uilyam L Hyuard Prikladnoj analiz povedeniya Per s angl Moskva Praktika 2016 S 767 864 s 1200 ekz ISBN angl 978 0 13 142113 4 ISBN russk 978 5 89816 157 6 Vargas Dzh Analiz deyatelnosti uchashihsya Metodologiya povysheniya shkolnoj uspevaemosti M Operant 2015 Vargas E A Verbalnoe povedenie B F Skinnera Vvedenie Vestnik Novosibirskogo gosudarstvennogo universiteta Seriya Psihologiya 2010 T 4 2 S 56 78 Skinner Berres Frederik Zinchenko V P Mesheryakov B G Bolshoj psihologicheskij slovar M OLMA PRESS 2003 Thorndike E L Animal intelligence An experimental study of the associative processes in animals Psychological Review Monograph Supplement 1901 2 S 1 109 Miltenberger R G Behavioral Modification Principles and Procedures Thomson Wadsworth 2008 S 9 Skinner B F The Behavior of Organisms An Experimental Analysis New York Appleton Century Crofts 1938 Skinner B F Are theories of learning necessary Psychological Review 1950 T 4 57 S 193 216 doi 10 1037 h0054367 PMID 15440996 Arhivirovano 28 fevralya 2021 goda V drugom yazykovom razdele est bolee polnaya statya Operant conditioning angl Vy mozhete pomoch proektu rasshiriv tekushuyu statyu s pomoshyu perevoda
