Теория подкрепления Скиннера

Теория подкрепления Скиннера (также известная как оперантное обусловливание) — это психологическая концепция, разработанная американским бихевиористом Берресом Фредериком Скиннером, описывающая механизм формирования и изменения поведения живых организмов через последствия совершённых действий. В отличие от классического обусловливания (по Павлову), где реакция вызывается стимулом, в оперантном обусловливании поведение определяется его результатами: действия, влекущие за собой желаемые последствия (подкрепление), закрепляются, а те, что приводят к нежелательным последствиям (наказанию), — угасают. Теория Скиннера является краеугольным камнем бихевиоризма и широко применяется в педагогике, психотерапии, менеджменте и дрессировке животных.

История возникновения и развития

Предпосылки

Теория Скиннера развивалась в рамках бихевиоризма, основанного Джоном Уотсоном в начале XX века. Уотсон отрицал роль сознания и внутренних психических процессов, фокусируясь исключительно на наблюдаемом поведении. Однако его модель (S→R) не объясняла, почему некоторые действия повторяются, а другие — нет.

Эксперименты Скиннера

В 1930-х годах Скиннер, работая в Гарвардском университете, создал так называемый «ящик Скиннера» (оперантную камеру) — устройство для систематического изучения поведения. В эксперименте голодная крыса помещалась в ящик, где ей случайным образом удавалось нажать на рычаг, что приводило к выпадению пищи. Скиннер обнаружил: после первого успешного нажатия крыса начинала нажимать рычаг всё чаще, не благодаря стимулу (пища не была предъявлена до действия), а из-за последствия своего действия. Этот механизм Скиннер назвал оперантным обусловливанием, то есть научением через подкрепление спонтанно возникающих действий.

Публикация и критика

В 1938 году вышла работа Скиннера «Поведение организмов», а в 1953-м — «Наука и поведение человека», где теория была изложена системно. Концепция вызвала критику за «механицизм» и игнорирование когнитивных процессов, однако её эмпирическая подтверждённость (в экспериментах на животных и людях) обеспечила ей широкое признание в прикладной психологии.

Ключевые понятия теории

Оперантное поведение

Оперантное поведение — это действия, которые совершаются непроизвольно (спонтанно) и впоследствии либо усиливаются, либо ослабевают в зависимости от их последствий. В отличие от рефлекторных реакций, оперантный акт не вызывается известным стимулом — он «выдаётся» организмом и подкрепляется средой.

Подкрепление (Reinforcement)

Подкрепление — любое событие или стимул, который увеличивает вероятность повторения данного поведения в будущем.

Виды подкрепления:

Важно: отрицательное подкрепление — это не наказание, а усиление поведения путём устранения негатива. Например, если ребёнок убирает игрушки, чтобы прекратить напоминания родителя, это отрицательное подкрепление: поведение (уборка) закрепляется, так как исчезает неприятность (напоминание).

Наказание (Punishment)

Наказание — это последствие, которое снижает вероятность повторения нежелательного поведения. Скиннер различал два типа:

• Положительное наказание: добавление неприятного стимула (выговор, удар током).
• Отрицательное наказание: отмена приятного стимула (лишение сладкого, отмена прогулки).

Скиннер считал наказание менее эффективным, чем подкрепление, так как оно подавляет поведение лишь временно и часто вызывает побочные эффекты (агрессию, тревожность). Он предпочитал позитивное подкрепление — формирование желательного поведения через поощрение.

Режимы подкрепления (Schedules of Reinforcement)

Скиннер выяснил, что частота и регулярность подкрепления сильно влияют на скорость закрепления и угасания поведения. Он выделил несколько режимов:

• Непрерывное подкрепление: подкрепление после каждого правильного действия. Приводит к быстрому научению, но поведение быстро угасает при отмене подкрепления.
• Регулярное (фиксированное) подкрепление: подкрепление через равное число реакций или через равные промежутки времени. Пример: зарплата раз в месяц.
• Переменное (вариативное) подкрепление: подкрепление через неопределённое число реакций или через нерегулярные промежутки времени. Пример: игровой автомат вознаграждает случайно. Такой режим даёт самое устойчивое поведение — оно долго не угасает даже после прекращения подкрепления.

Угасание (Extinction)

Если подкрепление закреплённого поведения полностью прекращается, его проявление постепенно угасает. Это называется оперантным угасанием. Например, голубь, клевавший диск для получения пищи, со временем прекращает клевать, если корм больше не подаётся.

Устройство экспериментальной парадигмы

Центральное устройство теории — оперантная камера («ящик Скиннера»). Она представляла собой:

• акустически изолированный ящик;
• рычаг или педаль (для крысы) или диск (для голубя);
• механизм подачи пищи (положительное подкрепление);
• систему наказания (например, электрический пол);
• рекордер, фиксирующий нажатия (накапливающийся график — «кумулятивная кривая»).

В камере систематически менялись режимы подкрепления, фиксировалась частота и время реакции. Это позволяло экспериментально проверить все положения теории.

Критика теории

Основные замечания критиков сводятся к следующему:

1. Игнорирование когнитивных процессов: Скиннер исключал из анализа внутренние состояния — мысли, намерения, убеждения. Когнитивные психологи (Толмен, Бандура) доказывали, что даже у животных есть когнитивные карты и ожидания.
2. Редукционизм: Сведение всего человеческого поведения к простой схеме «стимул-реакция-подкрепление» не объясняет сложных форм творчества, морального выбора и свободы воли.
3. Этические вопросы: Концепция применима к манипуляции поведением (в т.ч. в армии, рекламе, тюрьмах), что породило опасения по поводу «контроля поведения» и превращения человека в робота.
4. Ограниченность объяснительной модели: Теория плохо предсказывает поведение в нестандартных ситуациях, где нет чёткой связи между действием и его последствием (например, одинокий человек не получает подкрепления — но что держит его активность?).

Применение теории

В педагогике

• Программированное обучение: Скиннер разработал метод подачи материала небольшими порциями (шагами), где каждый правильный ответ немедленно подкрепляется (переход к следующему кадру), а ошибка — наказанием (возврат назад). В советской школе элементы этого подхода использовались в программированном обучении и тренажёрах.
• Жетонная система: в классах и коррекционных школах: за хорошее поведение выдаются жетоны (оперантное подкрепление), которые можно обменять на привилегии.

В психотерапии (поведенческая терапия)

• Формирование поведения (шейпинг): постепенное подкрепление последовательных приближений к конечному результату. Используется при лечении фобий (десенсибилизация), аутизма (обучение социальным навыкам), а также в реабилитации после травм мозга.
• Жетонные программы: в клиниках и интернатах: пациенты получают поощрения (жетоны) за желаемое поведение (самостоятельный уход, приём пищи, общение).

В менеджменте и экономике

• Система оплаты труда: зарплата (регулярное подкрепление), премии (переменное подкрепление), бонусы за выполнение задач.
• Геймификация: получение виртуальных значков и бонусов за действия (переменное подкрепление) — механизм популярный в мобильных приложениях и соцсетях.

В дрессировке животных

Классический пример — дрессировка с помощью кликер-тренинга (кликер — звук, заменяющий подкрепление). Животное обучается, получая лакомство за правильное действие, подкреплённое кликером. По сути, это практическая реализация идей Скиннера.

Интересные факты

• Скиннер ввёл термин «оперантное обусловливание» и долгое время был яростным противником любых упоминаний «воли» или «сознания», считая их «фикциями».
• В 1940-х годах Скиннер на несколько месяцев поместил свою дочь в специальный «воздушный ящик» (a baby box) — изолированное, стерильное устройство с постоянной температурой, где ребёнка можно было содержать без традиционной кроватки-манежа. Это вызвало бурную критику, хотя Скиннер утверждал, что ящик был лишь гигиеничным средством — аналогом современного автолюльки. Слухи о «психологических экспериментах на собственной дочери» сильно исказили восприятие личности учёного.
• Теория Скиннера стала основой для разработки первых компьютерных обучающих программ в 1960-х годах (Программированное обучение по Скиннеру).
• Концепция «свободы воли» как иллюзии — одно из философских следствий теории Скиннера, изложенное им в книге «По ту сторону свободы и достоинства» (1971), что вызвало резкую общественную полемику.

Источники

• Скиннер Б. Ф. «Наука и поведение человека».
• Скиннер Б. Ф. «По ту сторону свободы и достоинства».
• Скиннер Б. Ф. «Поведение организмов».
• Скиннер Б. Ф. «Технология обучения».
• Уотсон Дж. Б. «Психология как наука о поведении».
• Булюбаш И. Д. «Б. Ф. Скиннер: жизнь, теория, влияние».
• Хьелл Л., Зиглер Д. «Теории личности» (раздел о Б. Ф. Скиннере).