Спилман, Дженкинс, Ловетт — Оперантное обуславливание (Psychology 2e, §6.3)
Вид: глава книги
Коротко
Вопрос: как последствия поведения меняют вероятность его повторения.
Ответ: в оперантном обуславливании последствия поведения усиливают его (подкрепление) или ослабляют (наказание), а результат зависит от вида последствия и от графика, по которому оно выдаётся.
Тезисы
Т1. Подкрепление, даже отрицательное, всегда повышает поведение; наказание всегда понижает
- Против: смешение отрицательного подкрепления с наказанием
- Аргумент: «положительный» и «отрицательный» значат «добавляется» и «убирается»; «подкрепление» и «наказание» значат «повышается» и «понижается» поведение; из этого получаются четыре сочетания.
- Цитата: «Remember that reinforcement, even when it is negative, always increases a behavior. In contrast, punishment always decreases a behavior.» (раздел «Punishment»)
- Понятия: Подкрепление, Наказание
Т2. По закону эффекта удовлетворяющие последствия делают поведение более вероятным
- Аргумент: Скиннер строил свою идею на законе эффекта, впервые предложенном Торндайком; организм, получивший желаемый результат, скорее повторит действие.
- Цитата: «According to the law of effect, behaviors that are followed by consequences that are satisfying to the organism are more likely to be repeated, and behaviors that are followed by unpleasant consequences are less likely to be repeated (Thorndike, 1911).» (введение раздела)
- Данные: пример с работой — одна из причин (часто главная), почему люди ходят на работу: им платят; если платить перестанут, скорее всего перестанут ходить, даже любя работу.
- Понятия: Закон эффекта
Т3. При отрицательном подкреплении убирается неприятное, и поведение учащается
- Против: представление об отрицательном подкреплении как о наказании
- Аргумент: определение через удаление раздражителя; пример с ремнём безопасности: сигнал звучит, пока ремень не пристёгнут, и прекращается при нужном действии.
- Цитата: «In negative reinforcement, an undesirable stimulus is removed to increase a behavior.» (раздел «Reinforcement»)
- Данные: ремень безопасности в автомобиле; всадник убирает давление, когда лошадь делает нужное.
- Понятия: Отрицательное подкрепление
Т4. При формировании поведения подкрепляют последовательные приближения к цели
- Аргумент: подкрепление работает, только если организм уже показал поведение; сложное поведение сначала почти не возникает само, поэтому его разбивают на малые достижимые шаги.
- Цитата: «Instead of rewarding only the target behavior, in shaping, we reward successive approximations of a target behavior.» (раздел «Shaping»)
- Данные: голуби Скиннера, научённые ходить восьмёрками и играть в пинг-понг; ребёнок учится убирать комнату: сначала одну игрушку, потом пять и так далее.
- Понятия: Формирование поведения
Т5. Вторичный подкрепитель действует только в связке с первичным
- Аргумент: первичные (еда, вода, сон) подкрепляют от природы и не заучиваются; вторичные (похвала, деньги, жетоны) получают силу, когда связаны с первичными.
- Цитата: «A secondary reinforcer has no inherent value and only has reinforcing qualities when linked with a primary reinforcer.» (раздел «Primary and Secondary Reinforcers»)
- Данные: жетонные системы; исследование Адибсерешки и Абкенар (2014): жетоны повысили уместное социальное поведение в группе из восьмиклассников.
- Понятия: Условное подкрепление
Т6. Из графиков подкрепления переменно-пропорциональный — самый продуктивный и самый устойчивый к угасанию
- Аргумент: при непрерывном подкреплении награда идёт за каждое действие, что быстрее всего приучает к новому; после обучения исследователи и дрессировщики часто переходят к частичному. Из четырёх графиков (фиксированный и переменный, интервал и пропорция) переменная пропорция даёт самый высокий и устойчивый отклик.
- Цитата: «Among the reinforcement schedules, variable ratio is the most productive and the most resistant to extinction.» (раздел «Reinforcement Schedules»)
- Данные: азартные игры как пример переменной пропорции; пациент с дозированным обезболиванием как пример фиксированного интервала, угасающего быстро.
- Понятия: График подкрепления, Угасание
Т7. Чтобы подкрепление меняло поведение, оно должно быть связано с поведением, значимо для ребёнка и последовательно
- Аргумент: при модификации поведения у детей награда должна быть связана с поступком, важна именно этому ребёнку и выдаваться последовательно.
- Цитата: «In order for behavior modification to be effective, the reinforcement needs to be connected with the behavior; the reinforcement must matter to the child and be done consistently.» (раздел «Behavior Modification in Children»)
- Данные: таблицы с наклейками; награда выдаётся после набора определённого числа наклеек.
- Понятия: Модификация поведения
Т8. Положительное наказание иногда действует, но Скиннер предлагал взвешивать его применение против возможных негативных последствий
- Против: телесное наказание детей
- Аргумент: ребёнок может бояться не только улицы, но и наказавшего; авторы добавляют, что сегодня психологи и специалисты по воспитанию предпочитают подкрепление наказанию.
- Цитата: «While positive punishment can be effective in some cases, Skinner suggested that the use of punishment should be weighed against the possible negative effects.» (раздел «Punishment»)
- Данные: исследования Гершофф (2002) и Гершофф и др. (2010) в изложении учебника.
- Понятия: Наказание
Т9. Опыты Толмена показали, что организм может учиться без немедленного подкрепления
- Против: представление, что подкрепление должно быть немедленным, чтобы научение состоялось
- Аргумент: крысы, которых без награды пускали в лабиринт, выработали когнитивную карту; когда появилась еда, они нашли путь так же быстро, как контрольная группа; это вывод о скрытом научении.
- Цитата: «Tolman’s experiments with rats demonstrated that organisms can learn even if they do not receive immediate reinforcement (Tolman & Honzik, 1930; Tolman, Ritchie, & Kalish, 1946).» (раздел «Cognition and Latent Learning»)
- Данные: 10 сеансов в лабиринте без награды, затем еда в целевой камере.
- Понятия: Скрытое научение
Пример
К1. Мальчик Джером и новый набор для рисования
Родитель обещает пятилетнему Джерому игрушку, если тот уберёт комнату, и Джером быстро убирает: он хочет новый набор для рисования. Авторы используют пример, чтобы показать положительное подкрепление. Подкрепляет Т1.
К2. София и тайм-аут
София бросает кубики в брата; после предупреждения и повтора её выводят из комнаты на пять минут, и по возвращении она кубики не бросает. Авторы приводят это как пример отрицательного наказания. Подкрепляет Т1.
Связи
- +Подкрепление — см. также
Из карточки: Спилман, Дженкинс, Ловетт: то, что повышает вероятность поведения, бывает положительным (добавляется) и отрицательным (убирается) (Т1, Т3) - +Закон эффекта — см. также
Из карточки: Торндайк (в изложении авторов): приятное следствие делает поведение вероятнее (Т2) - Из карточки:
График подкрепления→ авторы: непрерывный, фиксированный и переменный, интервал и пропорция (Т6)