Тема 6. Теория оперантного обусловливания

" Культура - это хитроумное сплетение подкреплений"

(Б. Скиннер)

1. Структурная единица и стимульные события оперантного поведения.

2. Законны оперантного обусловливания, по Э.Торндайку.

3. Подкрепляющее и аверсивное поведение в Скиннеровском подходе.

4. Контроль обусловливания и угасания оперантного поведения.

 

Если респондентное поведение, возникающее на основе классического обусловливания (И.П. Павлов, Дж. Уотсон) называется обусловливанием типа S, [193] то ключевой ​ структурной единицей скиннеровского​ ​ подхода является реакция[194]. Реакции можно ранжировать от простых рефлекторных (например, слюноотделение на пищу, вздрагивание на громкий звук) до сложного паттерна поведения (например, решение математической задачи, скрытые формы агрессии). Реакция – это внешняя, наблюдаемую часть поведения, которую можно связать с событиями окружающей среды[195].

Теория инструментального, или О. о. связана с именами Торндайка (Thorndike E. L.) и Скиннера (Skinner В. F.). В отличие от принципа классического обусловливания (S-> R), они разработали принцип О. о. (R-> S), согласно которому поведение контролируется его результатами и последствиями. Основной путь воздействия на поведение, исходя из этой формулы, - влияние на его результаты.

Для различения стимула классического условного рефлекса и стимула инструментального условного рефлекса Скиннер предложил обозначать первый как Sd[196] (дискриминантный стимул), а второй - Sr[197] (pecпондентный стимул). Sd - стимул, по времени предшествующий определенной поведенческой реакции, поэтому взят термин лат. discriminatio[198] «ущемление», то есть предвзятость, насилие. Sr - то есть сообщающий стимул, подкрепляющий определенную поведенческую реакцию и по времени следующий за ней.
[199]

Хотя в повседневной жизни эти стимулы часто совмещены в одном объекте, они могут быть разделены путем анализа с целью систематизации и определения последовательности мер воздействия на модифицируемое поведение. При использовании оперантных методов управление результатами поведения осуществляется для воздействия на само поведение. Поэтому здесь очень важен этап функционального анализа или поведенческой диагностики. Задача этого этапа состоит в определении подкрепляющей значимости окружающих пациента объектов, установлении иерархии их подкрепляющей силы.

 

Сущность процесса научения – это установление связей (ассоциаций) реакций с событиями внешней среды.
[200]

 

В своем подходе к научению Б.Ф. Скиннер проводил различие между реакциями, которые вызываются четко определенными стимулами (например, мигательный рефлекс в ответ на дуновение воздуха), и реакциями, которые нельзя связать ни с одним стимулом[201]. Эти реакции второго типа порождаются самим организмом и называются оперантами[202].

 

Другой отличительной особенностью теории Б.Ф. Скиннера была идея о том, что на поведение воздействуют стимульные события[203], которые наступят после него, а именно — его последствия. Так как этот тип поведения предполагает, что организм активно воздействует на окружение с целью изменить события каким-то образом, Б.Ф. Скиннер определил его как оперантное поведение. Он также называл его обусловливание типа R, [204] чтобы подчеркнуть

воздействие реакции на будущее поведение.

 

 

2. Законны оперантного обусловливания Э.Торндайка.

На научные воззрения Б.Ф. Скиннера большое влияние оказали экспериментальные работы, выполненные Э.Л. Торндайком, яразработавшим объективную, механистическую теорию научения, в которой основное влияние уделялось внешнему поведению.

 

В результате проведенных исследований Э.Л Торндайк (T.L. Thomdike, 1905) обобщил в нескольких законах:

 

Закон эффекта: любое действие, вызывающее в данной ситуации удовлетворение, ассоциируется с данной ситуацией, так что, когда она возникает вновь[205], появление этого действия становится более вероятным, чем прежде. Напротив, любое действие, вызывающее дискомфорт, отделяется от данной ситуации, так что, когда он возникает вновь, появление этого действия становится менее вероятным любое действие, вызывающее удовлетворение, ассоциируется с данной ситуацией, так что, когда она возникает вновь, появление этого действия становится более вероятным, чем прежде. Позднее Э.Л. Торндайк провел исследование закона эффекта в рамках экспериментов, в которых в качестве испытуемых привлекались люди. Результаты исследований показали, что поощрение реакции действительно приводит к ее укреплению, но наказание не дает очевидного негативного результата для проведения параллели. Это побудило Э.Л. Торндайка пересмотреть закон эффекта, чтобы сделать больший акцент на поощрении, нежели на наказании.
[206]

 

Закон упражнения[207]: согласно этому закону утверждается, что в каждой конкретной ситуации любая реакция начинает ассоциироваться с этой ситуацией. Чем чаще реакция проявляется в той или иной ситуации, тем теснее становится ассоциативная связь. И напротив, если реакция в течение длительного времени не практикуется, то ассоциативная связь ослабевает. Иначе говоря, повторение ответной реакции в конкретной ситуации приводит к ее усилению. Более поздние исследования убедили Э.Л. Торндайка в том, что благоприятные последствия реакции (то есть ситуация, которая приносит удовлетворение) являются более эффективными, чем простое многократное повторение.

Закон готовности[208] — упражнения изменяют готовность организма к проведению нервных импульсов.

 

Закон ассоциативного сдвига[209] — если при одновременном действии раздражителей один из них вызывает реакцию, то другие приобретают способность вызывать ту же самую реакцию.

3. Подкрепляющее и аверсивное поведение в Скиннеровском подходе

Добивается улучшения производственных показателей через модификацию поведения персонала. Внешне она выглядит как манипулирование личностью. Люди повторяют поведение, которое приносило удовлетворение, и избегают поведения, которое доставляло им неприятности. У любого действия или поведения есть последствия — негативные (их в будущем станут избегать) и позитивные (их станут повторять).

 

Теория Скиннера предлагает такие способы модификации поведения (например, персонала), как положительное и отрицательное подкрепление, гашение и наказание.

 

Подкрепление — воздействие с помощью стимулов на текущее поведение людей.[210]

 

Суть положительного подкрепления состоит в том, что поощряются действия, имеющие позитивную направленность, например, творческое отношение к работе.

При отрицательном подкреплении поощряется отсутствие действий с негативной направленностью, например прогулов.

Отмена ношения Пенджабов на рабочих местах в Эмиратах была вызвана прогулами сотрудниц в закрывающих лицо культовых одеждах. В данном случае, модификация поведения мусульманок контролируется аверсивным стимулом, cледующим сразу за нежелательным поведением.

На поведение сотрудников можно и не обращать внимания. Тогда происходит так называемое гашение[211] , когда при отсутствии подкрепления отрицательных или положительных действий они сами по себе затухают.

Наконец, наказанием является прямое воздействие на человека, направленное на пресечение негативных действий, недопущение их в будущем. Оно может иметь вид материального взыскания (штрафы, санкции), снижения социального статуса в коллективе, понижения в должности и т.п.

Наблюдая за процессом оперантного обусловливания,

Б.Ф. Скиннер, как и Толмен, приходит к выводу о том, что стимулы окружающей среды (СОС) не принуждают организм вести себя определенным образом и не побуждают его действовать. Исходная причина поведения находится в самом организме (О у Толмена). Б.Ф. Скиннер писал: «Не существует внешнего побуждающего стимула к оперантному поведению, оно просто происходит, осуществляется. С точки зрения теории оперантного обусловливания операнты порождаются организмом. Собака идет, бежит, «возится» с кем-то; птица летит; обезьяна прыгает с дерева на дерево; человеческий детеныш лепечет. В любом случае поведение происходит без воздействия какого-то специального побуждающего стимула... С. М. Соловьев первым описал истинную историю немотивированного вызова на дуэль Пушкиным Дантеса. Оказывается, уже после ранения Великий поэт с неистовой яростью недрожащей рукой смог воспроизвести выстрел в противника, став, таким образом, causa sai, причиной в себе своей смерти. При этом, отец 4-х детей не подумал об их будущем, а также жене, оставленной с 90-тысячным долгом. Это зависимость, не от внешних обстоятельств и врагов (царь, барон Геккерн [28+28], Дантес), но от собственного гнева.

 

Производить оперантное поведение – заложено в биологической природе организма»[212]. История с Пенджабом иллюстрирует непосредственно данную биологическую свободу человека по отношению ко всякому контролю. " Не заменит ветку золотая клетка".

 

Оперантное поведение (вызванное оперантным научением) определяется событиями, которые следуют за реакцией.[213] То есть за поведением идет следствие, и природа этого следствия изменяет тенденцию организма повторять данное поведение в будущем. Например, катание на роликовой доске, игра на фортепиано, метание дротиков и написание собственного имени[214] — это образцы оперантной реакции, или операнты, контролируемые результатами, следующими за соответствующим поведением. Это произвольные приобретенные реакции, для которых не существует стимула, поддающегося распознаванию[215]. Б. Скиннер говорил, что бессмысленно рассуждать о происхождении оперантного поведения, так как нам неизвестны стимул или внутренняя причина, ответственная за его появление. Оно происходит спонтанно[216]. Если последствия благоприятны для организма, тогда вероятность повторения операнта в будущем усиливается. Когда это происходит, говорят, что последствия подкрепляются, и оперантные реакции, полученные в результате подкрепления (в смысле высокой вероятности его появления) обусловились: R < S. Сила позитивного подкрепляющего стимула таким образом определяется в соответствии с его воздействием на последующую частоту реакций, которые непосредственно предшествовали ему[217].

 

И напротив, если последствия реакции не благоприятны[218] и не подкреплены, тогда вероятность получить оперант уменьшается. Б.Ф. Скиннер полагал, что, аверсивное поведение контролируется негативными последствиями. По определению, негативные, или аверсивные[219] (неприятные) последствия ослабляют поведение[220], порождающее их, и усиливают поведение, устраняющее их. Так, культурное поведение, подверженное Sd, по сути, аверсивное, ущемленное, контролируемое " хитросплетениями авторитарных вводных". АВЕРСИВНЫЙ СТИМУЛ - Любой стимул, имеющий вредные свойства. Это обычно выявляется операционально. Событие или физическое ощущение, которое человек считает неприятным и воспринимает как наказание включается в программу МОДИФИКАЦИИ ПОВЕДЕНИЯ, строящейся на том, что аверсивный стимул непосредственно следует за нежелательным поведением, которое психотерапевт или социальный работник желает устранить. В прошлом такие стимулы включали электрошок, вдыхание паров аммиака, употребление лимонного сока(? ). Современные бихевиористы ратуют за естественные раздражители, в частности выражение неодобрения, вообще не используют аверсивные стимулы как манипулятивные и непродуктивные, разрабатывая альтернативные программы в процессе сотрудничества со своими клиентами и их семьями. Аверсивное поведение отрабатывается только в связи экстримальными условиями научения. Так, Стэ́ нфордский тюре́ мный экспериме́ нт — психологический эксперимент, который был проведён в 1971 году американским психологом Филиппом Зимбардо. Эксперимент представляет собой психологическое исследование реакции человека на ограничение свободы, на условия тюремной жизни и на влияние навязанной социальной роли на поведение.

Добровольцы играли роли охранников и заключенных и жили в условной тюрьме, устроенной в подвале факультета психологии. Заключенные и охранники быстро приспособились к своим ролям, и, вопреки ожиданиям, стали возникать по-настоящему опасные ситуации. В каждом третьем охраннике обнаружились садистские наклонности, а заключенные были сильно морально травмированы и двое раньше времени были исключены из эксперимента. Эксперимент был закончен раньше времени.

Согласно радикальной точке зрения профессора, возможно объяснить и контролировать любое поведение человека. Несмотря на интерес к наукам, Скиннер никак не мог вписаться в студенческую жизнь. Как он признавался позднее, больше всего его раздражали спорт и обязательное посещение церкви. Не отличавшегося крупным телосложением студента прессинговали в хоккее и баскетболе и сгоняли вместе со стадом одногруппников в церковь по выходным. Видимо, именно тогда, прочитав ещё и Дарвина с Павловым, Скиннер уверовал, что люди ничем не отличаются от животных.

 

 

4. Изучение обусловливания и угасания оперантного поведения

Б.Ф. Скиннер считал, что оперантное поведение характерно для повседневного научения. Поскольку поведение, как правило, носит оперантный характер, то наиболее эффективным подходом к науке о научении является изучение обусловливания и угасания оперантного поведения.

 

Для того чтобы изучать оперантное поведение в лаборатории, Б.Ф. Скиннер придумал простую процедуру, названную свободным оперантным методом. Классическая экспериментальная демонстрация заключалась в нажатии на рычаг в скиннеровском ящике, или, как его называл сам автор, аппарате оперантного формирования условных рефлексов.

 

В эксперименте крыса, лишенная пищи, помещалась в ящик и получала полную возможность исследовать его. Сначала крыса демонстрировала множество оперантов: ходила, принюхивалась, почесывалась, чистила себя и мочилась. Такие реакции не вызывались никаким узнаваемым стимулом; они были спонтанны. В ходе исследований она неизбежно должна была задеть рычажок (педаль), который приводил в действие механизм, выдвигающий полочку с пищей. Так как реакция нажатия рычага первоначально имела низкую вероятность возникновения, ее следует считать чисто случайной по отношению к питанию; то есть нельзя предсказать, когда крыса будет нажимать на рычаг, и невозможно заставить ее делать это. После получения нескольких порций пищи, которые должны были служить подкреплением, у крысы довольно быстро формировался условный рефлекс. Следует обратить внимание, что поведение крысы (нажатие на рычаг) оказывает независимое[221] воздействие па окружающую среду и является инструментом приобретения пищи, то есть приобретет, в конце концов, высокую вероятность проявления в такой особой ситуации. Зависимая[222] переменная в этом эксперименте проста и понятна: это скорость реакции.

• Оказывается, «Скиннеровский ящик» испытали на себе не только крысы, но и его создатель! Скиннер спал в подвале собственного дома в жёлтом пластиковом контейнере (почти бочка Диогена), соблюдая строгий режим дня и установив сам для себя «контролируемую среду». Положительным подкреплением для него была музыка и написание статей.

Помимо основного научного труда «Поведение организмов» Скиннер успел написать и издать по итогам своего «кризиса среднего возраста» художественный роман-утопию «Уолден-два» о жизни сельской общины по законам бихевиоризма. «Многое в жизни Уолден Два взято из собственной жизни, — признавался Скиннер.

 

• Скиннер старался быть не только писателем-«инженером душ», но и активным социальным инженером, например, обучая людей с помощью специально созданных программ. Результаты исследований результативности различных способов воздействия:

 

поощрение улучшает работу в 89% случаев;

 

наказание улучшает работу в 11% случаев;

 

наказание ухудшает работу в 11% случаев;

 

угрозы на 99% игнорируются.

Идеи Скиннера вполне пришлись по душе ученикам и студентам, ведь по мысли Скиннера доля неправильных ответов при работе с тестами не должна превышать 5%, чтобы не пропадало положительное подкрепление.

Если говоришь ребенку 2- лет " это нельзя", он ответит " льзя-льзя". А ты после того, как что-либо нельзя, тут же скажи, что можно!!! Все гениальное просто!

Концепция «программированного обучения», оказала влияние… на создание многочисленных компьютерных игр и симуляторов. Ведь получение нового уровня или награды - ничто иное, как виртуальный «корм», ещё глубже затягивающий в игру.

 

⇐ Предыдущая1234567Следующая ⇒

Поделиться: