Скиннер: оперантное обусловливание

Термин оперантное обусловливание был предложен Б. Ф. Скиннером (1904— 1990) в 1938 году (Skinner, 1938; особенно см. Skinner, 1953). Он утверждал, что поведение животных происходит в окружающей их среде и повторяется или не повторяется в зависимости от его последствий. В соответствии с точкой зрения Торндайка эти последствия могут принимать различные формы, такие как получение вознаграждений за выполнение некоторых действий или осуществление некоторого поведения для избежания неприятностей. Многие виды стимулов могут выступать в роли вознаграждения (пища, похвала, социальные взаимодействия), а некоторые — в роли наказания (боль, дискомфорт). Выраженное в несколько резкой, крайней форме, но верное мнение Скиннера: все то, что мы делаем или не делаем, происходит из-за последствий.

Скиннер изучал оперантное обусловливание в лаборатории, главным образом в опытах с крысами и голубями. Например, несложно исследовать поведение крыс, нажимающих на рычаг или «педаль», что они с готовностью научаются делать для получения вознаграждения в виде пищи. Тогда можно манипулировать такими переменными, как режим и регулярность предоставления пищи (например, после каждого нажатия на рычаг, через определенное число нажатий), чтобы посмотреть, какие влияния окажут эти изменения на поведение крысы. Затем Скиннер сконцентрировался на характере нажатия на рычаг как функции непредвиденных обстоятельств различных типов, т. е. факторов, могущих заставить крысу нажимать рычаг быстрее, медленнее либо не нажимать вовсе.

В некотором смысле Скиннер повернул стрелки часов вспять, вернувшись к строгому бихевиоризму. На всем протяжении его почти шестидесятилетней и в высшей степени выдающейся научной карьеры он непреклонно отказывался использовать такие термины, как научение, мотивация, и какие-либо другие, обозначающие что-либо невидимое в объясняемом поведении. Он обосновывал это тем, что такие термины заставляют нас полагать, что мы понимаем что-то, чего на самом деле не понимаем. Его собственные слова звучали так:

Когда мы говорим, что человек ест, потому что он голоден... много курит, потому что он заядлый курильщик... или хорошо играет на пианино, потому что обладает музыкальными способностями, мы вроде бы имеем в виду причины поведения. Но подвергнутые анализу, эти фразы оказываются просто неправомерными (излишними) описаниями. Некий простой набор фактов описывается двумя утверждениями: «он ест» и «он голоден». Или, например: «он много курит» и «он заядлый курильщик». Или: «он хорошо играет на пианино» и «он обладает музыкальными способностями». Практика объяснения одного утверждения в терминах другого опасна, потому что она предполагает, будто мы нашли причину, а поэтому не нуждаемся в дальнейшем поиске (Skinner, 1953, р. 31).

Другими словами, такие утверждения образуют замкнутый круг. Как мы узнаем, что человек голоден? Потому что он ест. Почему он ест? Потому что он голоден. Однако многие исследователи указывали, что существуют пути выхода из этой ловушки, способы сохранить в научном обращении термины, описывающие внутренние, невидимые состояния или процессы. Мы уже отмечали один из них: использование представителями теории научения операциональных определений таких состояний, как голод. Тем не менее продолжаются дебаты относительно допустимой степени употребления подобных терминов.

Оперантное обусловливание Скиннера, с соответствующими ограничениями и оговорками (особенно в отношении людей), обсуждаемыми в главе 3 в контексте его анализа, стало считаться важнейшим способом, посредством которого окружающая среда влияет на наше развитие и поведение.

Американская психология – это психология научения.
Это направление в американской психологии, для которого понятие развития отождествляется с понятием научения, приобретения нового опыта. Большое влияние на разработку этой концепции оказали идеи И.П.Павлова. Американские психологи восприняли в учении И.П.Павлова идею о том, что приспособительная деятельность характерна для всего живого. Обычно подчеркивают, что в американской психологии был ассимилирован павловский принцип условного рефлекса, который послужил толчком для Дж.Уотсона к разработке новой концепции психологии. Это слишком общее представление. В американскую психологию вошла сама идея проведения строгого научного эксперимента, созданного И.П.Павловым еще для изучения пищеварительной системы. Первое описание И.П.Павловым такого эксперимента было в 1897 г., а первая публикация Дж.Уотсона – в 1913 г.
Разработка идей И.П.Павлова в американской психологии заняла несколько десятилетий, и каждый раз перед исследователями выступал один из аспектов этого простого, но вместе с тем еще не исчерпанного в американской психологии явления – феномена условного рефлекса.
В наиболее ранних исследованиях научения на передний план выступила идея сочетания стимула и реакции, условных и безусловных стимулов: был выделен временной параметр этой связи. Так возникла ассоцианистическая концепция научения (Дж.Уотсон, Э.Газри). Когда внимание исследователей привлекли функции безусловного стимула в установлении новой ассоциативной стимульно-реактивной связи, возникла концепция научения, в которой главный акцент был сделан на значении подкрепления. Это были концепции Э.Торндайка и Б.Скиннера. Поиски ответов на вопрос о том, зависит ли научение, то есть установление связи между стимулом и реакцией, от таких состояний испытуемого, как голод, жажда, боль, получивших в американской психологии название драйва, привели к более сложным теоретическим концепциям научения – концепциям Н.Миллера и К.Халла. Две последние концепции подняли американскую теорию научения до такой степени зрелости, что она готова была ассимилировать новые европейские идеи из области гештальт-психологии, теории поля и психоанализа. Именно здесь наметился поворот от строгого поведенческого эксперимента павловского типа к изучению мотивации и познавательного развития ребенка Бихевиористское направление также занималось проблемами возрастной психологии. Согласно бихевиористской теории, человек таков, каким он научился быть. Эта мысль дала повод ученым назвать бихевиоризм «теорией обучения». Многие из сторонников бихевиоризма полагают, что человек учится вести себя всю жизнь, но не выделяют каких-либо особых стадий, периодов, этапов. Вместо этого они предлагают 3 типа обучения: классическое обусловливание, оперантное обусловливание и обучение посредством наблюдения.
Классическое обусловливание – это простейший тип обучения, в процессе которого используются лишь непроизвольные (безусловные) рефлексы в поведении детей. Эти рефлексы у человека и животных являются врожденными. Ребенок (как и детеныш животных) в ходе обучения чисто автоматически реагирует на какие-либо внешние стимулы, а затем учится реагировать таким же образом на стимулы, несколько отличающиеся от первых (пример с 9-тимесячнымАльбертом, которого Райдер и Уотсон учили бояться белую мышь).
Оперантное обусловливание – это специфический тип обучения, который разработал Скиннер. Суть его заключается в тои, что человек контролирует свое поведение, ориентируясь на его вероятные последствия (положительные и отрицательные). (Скиннер с крысами). Дети перенимают у других различные формы поведения посредством методов обучения, особенно таких, как подкрепление и наказание.
Подкрепление – это любой стимул, увеличивающий вероятность повторения определенных реакций, форм поведения. Оно может быть позитивным негативным. Позитивным является подкрепление, приятное человеку, удовлетворяющее какую-то его потребность и способствующее повторению форм поведения, заслуживших поощрения. В опытах Скиннера позитивным подкреплением была пища. Негативным является такое подкрепление, которое заставляет повторять реакции неприятия, отторжения, неприятия чего-либо.
Сторонники бихевиористской теории установили, что наказание тоже является специфическим средством обучения. Наказание – это стимул, заставляющий отказаться от вызвавших его действий, форм поведения.
Понятия «наказание» и «негативное подкрепление» часто путают. Но при наказании человеку дается, предлагается, навязывается нечто неприятное или же у него отбирается нечто приятное, а в результате и то, и другое вынуждает его прекратить какие-то действия и поступки. При негативном же подкреплении убирается нечто неприятное с целью поощрения определенного поведения.
Обучение посредством наблюдения. Американский психолог Альберт Бандура, признавая важность обучения по типу классического и оперантного обусловливания, все же считает, что в жизни обучение происходит благодаря наблюдению. Ребенок наблюдает за тем, что делают, как ведут себя родители, другие люди в его социальном окружении и старается воспроизводить образцы их поведения.
Бандуру и его коллег, акцентирующих внимание на зависимости личностных характеристик человека от его способности учиться у окружающих, обычно называют теоретиками социального обучения.
Суть обучения посредством наблюдения состоит в том, что человек копирует чьи-то образцы поведения, не ожидая ни какого-либо поощрения или наказания за это. За годы детства ребенок накапливает огромную информацию о разлчных формах поведения, ъотя в своем поведении он может и не воспроизводить их.
Однако если он видит, что какие-то дела, поступки, поведенческие реакции других детей поощряют, то, скорее всего, он будет стараться копировать их. Кроме того, вполне вероятно, что он будет охотнее подражать тем людям, которыми он восхищается, которых любит, которые в его жизни значат больше, чем другие. Дети никогда не станут добровольно копировать образцы поведения тех, кто им не приятен, кто для них ничего не значит, тех, кого они боятся.
В опытах Э.Торндайка (исследование приобретенных форм поведения), в исследованиях И.П.Павлова (изучение физиологических механизмов научения) подчеркивалась возможность возникновения на инстинктивной основе новых форм поведения. Было показано, что под влиянием среды наследственные формы поведения обрастают приобретенными умениями и навыками.