Классическое кондиционирование

Сюда перенаправляются «Собака Павлова» и «Павловец». О павловской культуре верхнего палеолита см. Павловская культура . Чтобы узнать о других значениях, см. Собака Павлова (значения) .

Классическое научение (также научение респондента и научение Павлова ) — это поведенческая процедура, при которой биологически мощный стимул (например, еда, дуновение воздуха в глаза, потенциальный соперник) сочетается с нейтральным стимулом (например, звуком музыкального треугольника) . ). Термин «классическое обусловливание» относится к процессу автоматической условной реакции, связанной с определенным стимулом.

Русский физиолог Иван Павлов изучал классическую обусловленность с помощью подробных экспериментов с собаками и опубликовал результаты экспериментов в 1897 году. При изучении пищеварения Павлов заметил, что у подопытных собак выделялось слюноотделение, когда их кормили красным мясом. Павловское обусловливание отличается от оперантного обусловливания (инструментального обусловливания), посредством которого сила произвольного поведения изменяется либо путем подкрепления, либо путем наказания . Однако классическое обусловливание может влиять на оперантное обусловливание; классически условные стимулы могут усиливать оперантные реакции.

Классическое обусловливание — это основной поведенческий механизм, и его нейронные основы сейчас начинают понимать. Хотя иногда бывает трудно отличить классическое обусловливание от других форм ассоциативного обучения (например, инструментального обучения и человеческой ассоциативной памяти ), ряд наблюдений различают их, особенно те непредвиденные обстоятельства, при которых происходит обучение.

Вместе с оперантным обусловливанием классическое обусловливание стало основой бихевиоризма — школы психологии , которая доминировала в середине 20 века и до сих пор оказывает важное влияние на практику психологической терапии и изучение поведения животных. Классическое кондиционирование применялось и в других областях. Например, это может повлиять на реакцию организма на психоактивные препараты, регуляцию голода, исследования нейронных основ обучения и памяти, а также на некоторые социальные явления, такие как эффект ложного консенсуса .

Определение

Классическое обусловливание возникает, когда условный раздражитель (CS) сочетается с безусловным раздражителем (US). Обычно условный раздражитель является нейтральным раздражителем (например, звук камертона), безусловный раздражитель является биологически сильным (например, вкус еды), а безусловная реакция (ВР) на безусловный раздражитель представляет собой незаученную рефлекторную реакцию. (например, слюнотечение). После повторения спаривания организм демонстрирует условный ответ (CR) на условный раздражитель, когда условный раздражитель предъявляется отдельно. (Условный ответ может возникнуть только после одного спаривания.) Таким образом, в отличие от UR, CR приобретается опытом, а также он менее постоянен, чем UR.

Обычно условная реакция похожа на безусловную реакцию, но иногда она совершенно отлична. По этой и другим причинам большинство теоретиков обучения предполагают, что условный стимул сигнализирует или предсказывает безусловный стимул, и продолжают анализировать последствия этого сигнала. Роберт А. Рескорла четко изложил это изменение в мышлении и его последствия в своей статье 1988 года «Павловская обусловленность: это не то, что вы думаете». Несмотря на широкое признание, тезис Рескорлы, возможно, не может быть защищен.

Классическое обусловливание отличается от оперантного или инструментального обусловливания : при классическом обусловливании поведение изменяется посредством ассоциации стимулов, как описано выше, тогда как при оперантном обуславливании поведение изменяется в зависимости от эффекта, который оно производит (т. е. вознаграждения или наказания).

Процедуры

Исследование Ивана Павлова о настройке рефлексов у собак

исследования Павлова

Самая известная и самая тщательная ранняя работа по классической обусловленности была сделана Иваном Павловым , хотя Эдвин Твитмайер опубликовал некоторые соответствующие выводы годом ранее. В ходе исследований физиологии пищеварения у собак Павлов разработал методику, позволившую ему изучать пищеварительные процессы животных в течение длительных периодов времени. Он перенаправил пищеварительные жидкости животных за пределы тела, где их можно было измерить.

Павлов заметил, что у его собак началось выделение слюны в присутствии техника, который обычно их кормил, а не просто выделение слюны в присутствии еды. Павлов назвал упреждающее слюноотделение собак «психической секрецией». Подвергнув эти неформальные наблюдения экспериментальной проверке, Павлов предъявил стимул (например, звук метронома), а затем дал собаке корм; после нескольких повторений у собак в ответ на раздражитель началось выделение слюны. Павлов пришел к выводу, что если в то время, когда собаке давали еду, в окружении собаки присутствовал определенный стимул, то этот стимул мог стать связанным с пищей и сам по себе вызвать слюноотделение.

Терминология

В опытах Павлова безусловным раздражителем (УС) была пища, поскольку ее действие не зависело от предшествующего опыта. Звук метронома изначально является нейтральным стимулом (НС), поскольку он не вызывает у собак слюноотделения. После кондиционирования звук метронома становится условным раздражителем (УС) или условным раздражителем; потому что его эффекты зависят от его связи с пищей. Аналогичным образом, реакции собаки следуют той же схеме «условно-безусловно». Условный ответ (CR) — это ответ на условный раздражитель, тогда как безусловный ответ (UR) соответствует безусловному раздражителю.

Павлов сообщил множество основных фактов о обусловленности; например, он обнаружил, что обучение происходило быстрее всего, когда интервал между CS и появлением США был относительно коротким.

Как отмечалось ранее, часто полагают, что условная реакция является копией безусловной реакции, однако Павлов отметил, что слюна, вырабатываемая КС, отличается по составу от слюны, вырабатываемой УС. Фактически, CR может быть любым новым ответом на ранее нейтральный CS, который можно четко связать с опытом условных отношений CS и США. Также считалось, что для возникновения обусловленности необходимы повторяющиеся пары, но многие CR можно выучить за одно испытание, особенно при обучении обусловлению страха и отвращению вкуса .

Диаграмма, показывающая передовое кондиционирование. Временной интервал увеличивается слева направо.

Форвардное кондиционирование

Обучение происходит быстрее всего в форвардной подготовке. Во время предварительного кондиционирования начало CS предшествует наступлению США, чтобы сигнализировать о том, что США последуют за ним. Двумя распространенными формами прямого преобразования являются задержка и трассировка.

• Кондиционирование задержки : При кондиционировании задержки представляется CS, который перекрывается представлением США. Например, если человек слышит зуммер в течение пяти секунд, в течение этого времени ему в глаза подается воздух, он моргнет. После нескольких сочетаний зуммера и затяжки человек будет моргать только от звука зуммера. Это кондиционирование задержки.
• Подготовка трассировки : во время подготовки трассировки CS и US не перекрываются. Вместо этого CS начинается и заканчивается до того, как будут представлены США. Период без стимулов называется интервалом следа или интервалом кондиционирования . Если в приведенном выше примере с зуммером затяжка раздалась через секунду после прекращения звука зуммера, это будет кондиционирование трассы с интервалом трассировки или кондиционирования в одну секунду.

Одновременное кондиционирование

Классические процедуры и эффекты кондиционирования

Во время одновременного кондиционирования CS и US предъявляются и прекращаются одновременно. Например: если человек слышит звонок и в одно и то же время ему в глаза вдувают воздух, и повторяющиеся подобные пары приводят к тому, что человек моргает, когда слышит звонок, несмотря на отсутствие потока воздуха, это демонстрирует, что одновременное обусловливание произошел.

Обусловливание второго и высшего порядка

Основная статья: Обусловливание второго порядка

Кондиционирование второго или более высокого порядка осуществляется в два этапа. Сначала нейтральный стимул («CS1») сигнализирует о США посредством форвардной обусловленности. Затем второй нейтральный стимул («CS2») соединяется с первым (CS1) и вызывает собственную условную реакцию. Например: колокольчик можно сочетать с едой до тех пор, пока он не вызовет слюноотделение. Если затем к колокольчику подключить свет, то свет также может вызвать слюноотделение. Звонок — CS1, а еда — США. Свет становится CS2 после сопряжения с CS1.

Обратное кондиционирование

Обратное кондиционирование происходит, когда CS сразу следует за US. В отличие от обычной процедуры кондиционирования, в которой CS предшествует США, условная реакция, данная на CS, имеет тенденцию быть тормозной. Вероятно, это происходит потому, что CS служит сигналом о том, что США пришел конец, а не сигналом о том, что США вот-вот появятся. Например, дуновение воздуха, направленное в глаза человека, может сопровождаться звуком зуммера.

Временное кондиционирование

При временном кондиционировании УЗИ проводится через регулярные промежутки времени, например, каждые 10 минут. Говорят, что кондиционирование происходит, когда CR имеет тенденцию происходить незадолго до каждого УЗИ. Это говорит о том, что у животных есть биологические часы, которые могут служить КС. Этот метод также использовался для изучения способности животных рассчитывать время (см. « Когнитивные способности животных »).

В приведенном ниже примере показано временное кондиционирование, поскольку США, например, еда голодной мыши просто доставляется по регулярному графику, например, каждые тридцать секунд. После достаточного воздействия у мыши начнется выделение слюны непосредственно перед доставкой еды. Это делает его временным обусловливанием, поскольку может показаться, что мышь приучена к течению времени.

Процедура нулевой непредвиденной ситуации

В этой процедуре CS сочетается с США, но США встречаются и в других случаях. Если это произойдет, прогнозируется, что США, скорее всего, произойдет в отсутствие CS. Другими словами, CS не «предсказывает» США. В этом случае кондиционирование не удается, и CS не вызывает CR. Этот вывод о том, что предсказание ключом к выработке обусловленности является , а не сочетание CS-US, сильно повлиял на последующие исследования и теорию выработки условностей.

Вымирание

Основная статья: Вымирание (психология)

В процедуре исчезновения КС предъявляется повторно при отсутствии США. Это делается после того, как CS был подготовлен одним из описанных выше методов. Когда это будет сделано, частота CR в конечном итоге вернется к предтренировочному уровню. Однако угасание не устраняет последствий предшествующего кондиционирования. Об этом свидетельствует спонтанное восстановление - когда происходит внезапное появление (CR) после вымирания - и другие связанные явления (см. «Восстановление после вымирания» ниже). Эти явления можно объяснить, постулируя накопление торможения при предъявлении слабого раздражителя.

Наблюдаемые явления

Приобретение

Во время захвата CS и US объединяются в пару, как описано выше. Степень кондиционирования можно отслеживать с помощью тестовых испытаний. В этих тестовых испытаниях CS представлен отдельно и измеряется CR. Одной пары CS-US может быть достаточно для получения CR в тесте, но обычно необходимо несколько пар, и происходит постепенное увеличение условной реакции на CS. Это повторяющееся количество попыток постепенно увеличивает силу и/или частоту CR. состояния животного Скорость кондиционирования зависит от ряда факторов, таких как характер и сила как КС, так и УЗ, предыдущего опыта и мотивационного . По мере приближения к завершению процесс замедляется.

Вымирание

Если CS представлен без США и этот процесс повторяется достаточно часто, CS в конечном итоге перестанет вызывать CR. В этот момент CR считается «погашенным».

Внешнее торможение

Внешнее торможение может наблюдаться, если перед КС или одновременно с ним предъявляется сильный или незнакомый стимул. Это вызывает снижение условной реакции на КС.

Восстановление после исчезновения

Несколько процедур приводят к восстановлению CR, который сначала был кондиционирован, а затем погашен. Это показывает, что процедура гашения не устраняет эффект кондиционирования. Эти процедуры следующие:

• Повторное приобретение: если CS снова находится в паре с США, снова приобретается CR, но это второе приобретение обычно происходит намного быстрее, чем первое.
• Спонтанное восстановление . Спонтанное восстановление определяется как повторное появление ранее угасшей условной реакции после периода отдыха. То есть, если CS тестируется позже (например, через час или день) после исчезновения, он снова вызовет CR. Это возобновленное CR обычно намного слабее, чем CR, наблюдавшееся до вымирания.
• Растормаживание : если КС тестируется сразу после угасания и возник интенсивный, но ассоциативно нейтральный раздражитель, возможно временное восстановление условного ответа на КС.
• Восстановление: если США, использованные для кондиционирования, предъявляются субъекту в том же месте, где произошло кондиционирование и угасание, но без присутствия CS, CS часто вызывает реакцию при более позднем тестировании.
• Обновление: Возобновление — это возобновление условной реакции после вымирания, когда животное возвращается в среду (или аналогичную среду), в которой условная реакция была приобретена.

Генерализация стимула

Говорят, что генерализация стимула происходит, если после того, как конкретная CS вызвала CR, обнаруживается, что аналогичный тестовый стимул вызывает тот же CR. Обычно, чем больше тестовый стимул похож на CS, тем сильнее будет CR по отношению к тестовому стимулу. И наоборот, чем больше тестовый стимул отличается от КС, тем слабее будет ПР или тем больше он будет отличаться от наблюдавшегося ранее.

Дискриминация стимулов

можно наблюдать Дискриминацию стимулов , когда один стимул («CS1») вызывает один CR, а другой стимул («CS2») вызывает либо другой CR, либо вообще не вызывает CR. Этого можно добиться, например, путем объединения CS1 с эффективным США и представления CS2 без США.

Скрытое торможение

Основная статья: Скрытое торможение

Скрытое торможение относится к наблюдению, что знакомому стимулу требуется больше времени, чтобы стать CS, чем новому стимулу, чтобы стать CS, когда стимул сочетается с эффективным УЗ.

Условное подавление

Это один из наиболее распространенных способов измерения эффективности обучения в классической обусловленности. Типичный пример этой процедуры таков: крыса сначала учится нажимать на рычаг посредством оперантного обусловливания . Затем, в серии испытаний, крысу подвергают КС, свету или шуму, а затем УЗ – легкому поражению электрическим током. Развивается связь между CS и США, и крыса замедляет или прекращает нажатие рычага, когда включается CS. Скорость нажатия во время CS измеряет силу классической выносливости; то есть чем медленнее давит крыса, тем крепче ассоциация КС и США. (Медленное нажатие указывает на условную реакцию «страха» и является примером условной эмоциональной реакции; см. раздел ниже.)

Условное торможение

Обычно используются три фазы кондиционирования.

Этап 1

CS (CS+) сочетается с US до тех пор, пока не будут достигнуты асимптотические уровни CR.

Этап 2

Испытания CS+/США продолжаются, но они перемежаются испытаниями, в которых CS+ сочетается со вторым CS (CS-), но не с США (т.е. испытания CS+/CS-). Обычно организмы демонстрируют CR в исследованиях CS+/США, но перестают отвечать на исследования CS+/CS-.

Этап 3

• Тест суммирования для условного торможения: CS- из фазы 2 представлен вместе с новым CS+, который был обусловлен, как и в фазе 1. Условное торможение обнаруживается, если ответ на пару CS+/CS- меньше, чем на один CS+. .
• Тест на замедление условного торможения: CS- из фазы 2 сочетается с УЗ. Если произошло условное торможение, скорость приобретения предыдущего CS- должна быть меньше, чем скорость приобретения, которая была бы обнаружена без лечения фазы 2.

Блокировка

Основная статья: Эффект блокировки

Эта форма классической обусловленности включает в себя две фазы.

Этап 1

CS (CS1) соединен с США.

Этап 2

Составной CS (CS1+CS2) соединен с US.

Тест

Для каждой CS (CS1 и CS2) проводится отдельный тест. Эффект блокировки наблюдается при отсутствии условного ответа на CS2, что позволяет предположить, что первая фаза обучения блокировала приобретение второго CS.

Теории

Источники данных

Эксперименты по теоретическим вопросам кондиционирования в основном проводились на позвоночных животных, особенно на крысах и голубях. Однако кондиционирование также изучалось у беспозвоночных, и очень важные данные о нейронной основе кондиционирования были получены в экспериментах на морском слизне Aplysia . В большинстве соответствующих экспериментов использовалась классическая процедура обусловливания, хотя эксперименты с инструментальным (оперантным) обусловливанием также использовались, и сила классического обуславливания часто измеряется через его оперантные эффекты, как, например, при условном подавлении (см. раздел «Феномены» выше) и автоформировании .

Теория стимул-замещения

Дополнительная информация: Контробусловливание.

По мнению Павлова, обусловленность предполагает не приобретение какого-либо нового поведения, а, скорее, тенденцию реагировать по-старому на новые стимулы. Таким образом, он предположил, что CS просто заменяет США, вызывая рефлекторный ответ. Это объяснение называется теорией обусловленности с заменой стимулов. Критическая проблема теории замещения стимулов заключается в том, что CR и UR не всегда совпадают. Сам Павлов заметил, что слюна собаки, вырабатываемая в виде ЦР, отличается по составу от слюны, вырабатываемой в виде УР. CR иногда даже является противоположностью UR. Например: безусловной реакцией на электрошок является увеличение частоты сердечных сокращений, тогда как КС в сочетании с электрошоком вызывает снижение частоты сердечных сокращений. (Однако было предложено что только тогда, когда UR не затрагивает центральную нервную систему, CR и UR являются противоположностями.)

Модель Рескорлы – Вагнера

Основная статья: Модель Рескорлы – Вагнера

Модель Рескорлы-Вагнера (Р-В) Это относительно простая, но мощная модель обусловленности. Модель предсказывает ряд важных явлений, но она также дает сбои во многих важных аспектах, что приводит к появлению ряда модификаций и альтернативных моделей. Однако, поскольку большая часть теоретических исследований обусловливания за последние 40 лет была инициирована этой моделью или реакциями на нее, модель R–W заслуживает здесь краткого описания.

Модель Рескорлы-Вагнера утверждает, что существует предел степени обусловленности, которая может возникнуть при сочетании двух стимулов. Одним из факторов, определяющих этот предел, является природа США. Например: сочетание колокольчика с сочным стейком с большей вероятностью вызовет слюноотделение, чем сочетание колокольчика с куском сухого хлеба, а сухой хлеб, скорее всего, будет работать лучше, чем кусок картона. Ключевая идея модели R–W заключается в том, что CS сигнализирует или предсказывает США. Можно сказать, что, прежде чем обусловить себя, субъект удивляется США. Однако после кондиционирования субъект больше не удивляется, поскольку CS предсказывает приход США. (Модель можно описать математически, и такие слова, как «предсказать», «удивить» и «ожидать», используются только для объяснения модели.) Здесь работа модели иллюстрируется краткими описаниями приобретения, исчезновения и блокировки. Модель также предсказывает ряд других явлений, см. основную статью о модели.

Уравнение

$$\Delta V=\alpha \beta (\lambda -\Sigma V)$$

Это уравнение Рескорлы-Вагнера. Он определяет объем обучения, который произойдет при одной паре условного стимула (CS) с безусловным стимулом (US). Приведенное выше уравнение решается неоднократно, чтобы спрогнозировать ход обучения во многих таких испытаниях.

В этой модели степень обучения измеряется тем, насколько хорошо CS предсказывает США, что определяется «ассоциативной силой» CS. В уравнении V представляет собой текущую ассоциативную силу CS, а ∆V — это изменение этой силы, которое происходит в данном испытании. ΣV — сумма сил всех стимулов, присутствующих в ситуации. λ — максимальная сила ассоциации, которую поддержит данный США; его значение обычно устанавливается равным 1 в испытаниях, когда присутствует США, и 0, когда США отсутствуют. α и β — константы, связанные с значимостью CS и скоростью обучения для данного США. Как уравнение предсказывает различные экспериментальные результаты, объясняется в следующих разделах. Подробнее читайте в основной статье о модели.

Модель R–W: приобретение

Модель R – W измеряет обусловленность путем присвоения «ассоциативной силы» CS и другим локальным стимулам. До того, как CS будет обусловлен, его ассоциативная сила равна нулю. Соединение CS и США вызывает постепенное увеличение ассоциативной силы CS. Это увеличение определяется характером США (например, его интенсивностью). Объем обучения, который происходит во время любой пары CS-US, зависит от разницы между общей ассоциативной силой CS и другими стимулами, присутствующими в ситуации (ΣV в уравнении), и максимальным значением, установленным США (λ в уравнении ). В первой паре CS и США эта разница велика, и ассоциативная сила CS значительно возрастает. По мере накопления пар CS-US США становятся более предсказуемыми, а увеличение силы ассоциаций в каждом испытании становится все меньше и меньше. Наконец, разница между ассоциативной силой КС (плюс той, которая может быть связана с другими стимулами) и максимальной силой достигает нуля. То есть США полностью прогнозируемы, ассоциативная сила КС перестает расти, и кондиционирование завершено.

Модель R – W: вымирание

Сравнение силы партнеров по модели RW в обучении

Ассоциативный процесс, описываемый моделью R – W, ​​также объясняет вымирание (см. «Процедуры» выше). Процедура исчезновения начинается с положительной ассоциативной силы CS, что означает, что CS предсказывает возникновение США. В ходе испытания на вымирание США не смогли появиться после CS. В результате такого «неожиданного» результата ассоциативная сила КС снижается. Вымирание завершается, когда сила CS достигает нуля; Никаких США не предвидится, и никаких США не произойдет. Однако, если тот же КС представлен без УЗ, но сопровождается хорошо зарекомендовавшим себя условным ингибитором (УИ), то есть стимулом, который предсказывает отсутствие УЗ (в терминах RW, стимулом с отрицательной силой ассоциирования), тогда RW предсказывает, что CS не вымрет (его V не уменьшится в размерах).

Модель R – W: блокировка

Основная статья: Эффект блокировки

Самым важным и новым вкладом модели R-W является ее предположение о том, что обусловленность КС зависит не только от этой КС и ее отношения к США, но также и от всех других стимулов, присутствующих в ситуации обуславливания. В частности, модель утверждает, что США прогнозируются по сумме ассоциативных сил всех стимулов, присутствующих в обусловливающей ситуации. Обучение контролируется разницей между этой общей ассоциативной силой и силой, поддерживаемой США. Когда эта сумма сильных сторон достигает максимума, установленного США, кондиционирование заканчивается, как только что описано.

Объяснение явления блокировки, предложенное R–W, иллюстрирует одно следствие только что высказанного предположения. При блокировке (см. «Явления» выше) CS1 работает в паре с US до тех пор, пока не будет завершено кондиционирования. Затем при дополнительных попытках кондиционирования вместе с CS1 появляется второй стимул (CS2), и за обоими следуют США. Наконец, CS2 тестируется и показывает, что он не дает ответа, поскольку обучение CS2 было «заблокировано» первоначальным изучением CS1. Модель R – W объясняет это тем, что после первоначального кондиционирования CS1 полностью предсказывает США. Поскольку нет разницы между тем, что предсказано, и тем, что происходит, в дополнительных испытаниях с CS1+CS2 не происходит никакого нового обучения, следовательно, CS2 позже не дает ответа.

Теоретические проблемы и альтернативы модели Рескорлы – Вагнера.

Одна из основных причин важности модели R–W заключается в том, что она относительно проста и дает четкие прогнозы. Проверка этих предсказаний привела к ряду важных новых открытий и значительному углублению понимания обусловленности. Некоторая новая информация подтвердила эту теорию, но многое не подтвердилось, и все согласны с тем, что теория в лучшем случае слишком проста. Однако ни одна модель, похоже, не объясняет все явления, возникшие в результате экспериментов. Ниже приведены краткие изложения некоторых связанных теоретических вопросов.

Содержание обучения

Модель R – W сводит обусловленность к ассоциации CS и США и измеряет ее с помощью одного числа - ассоциативной силы CS. Ряд экспериментальных данных показывает, что можно узнать больше. Среди них два явления, описанные ранее в этой статье.

• Скрытое торможение: если субъект неоднократно подвергается воздействию CS до начала кондиционирования, то кондиционирование занимает больше времени. Модель R – W не может объяснить это, поскольку предварительное воздействие оставляет силу CS неизменной и равной нулю.
• Восстановление реакции после исчезновения: Похоже, что что-то, оставшееся после исчезновения, снизило силу ассоциаций до нуля, поскольку некоторые процедуры вызывают повторное появление реакции без дальнейшего обусловливания.

Роль внимания в обучении

Скрытое торможение может возникнуть из-за того, что субъект перестает концентрироваться на КС, который часто наблюдается до того, как он будет соединен с УЗ. Фактически, изменения во внимании к CS лежат в основе двух известных теорий, которые пытаются справиться с экспериментальными результатами, которые усложняют модель R–W. В одном из них, предложенном Николасом Макинтошом , Скорость формирования условий зависит от количества внимания, уделяемого CS, а это количество внимания, в свою очередь, зависит от того, насколько хорошо CS предсказывает США. Пирс и Холл предложили аналогичную модель, основанную на другом принципе внимания. Обе модели были тщательно протестированы, и ни одна из них не объясняет всех экспериментальных результатов. Следовательно, различные авторы пытались использовать гибридные модели, сочетающие два процесса внимания. Пирс и Холл в 2010 году объединили свои идеи внимания и даже предположили возможность включения уравнения Рескорлы-Вагнера в интегрированную модель.

Контекст

Как указывалось ранее, ключевая идея кондиционирования заключается в том, что CS сигнализирует или предсказывает США (см. «Процедуру нулевых непредвиденных обстоятельств» выше). Однако, например, комната, в которой происходит кондиционирование, также «предсказывает», что может произойти США. Тем не менее, комната предсказывает с гораздо меньшей уверенностью, чем сама экспериментальная CS, потому что комната существует и между экспериментальными испытаниями, когда США отсутствуют. Роль такого контекста иллюстрируется тем фактом, что у собак в эксперименте Павлова иногда начиналось выделение слюны при приближении к экспериментальному аппарату, прежде чем они видели или слышали какой-либо CS. Такие так называемые «контекстные» стимулы всегда присутствуют, и их влияние помогает объяснить некоторые загадочные экспериментальные данные. Ассоциативная сила контекстных стимулов может быть введена в уравнение Рескорлы-Вагнера, и они играют важную роль в теориях сравнения и вычислений, изложенных ниже.

Теория компаратора

Чтобы узнать, что было изучено, мы должны каким-то образом измерить поведение («эффективность») в тестовой ситуации. Однако, как хорошо знают учащиеся, успеваемость в тестовой ситуации не всегда является хорошим показателем того, чему они научились. Что касается обусловленности, есть свидетельства того, что испытуемые в эксперименте по блокированию действительно узнают что-то о «заблокированной» CS, но не могут продемонстрировать это обучение из-за способа, которым их обычно тестируют.

«Компараторные» теории кондиционирования «основаны на характеристиках», то есть подчеркивают, что происходит во время теста. В частности, они смотрят на все стимулы, присутствующие во время тестирования, и на то, как могут взаимодействовать ассоциации, приобретенные этими стимулами. Если несколько упростить, теории сравнения предполагают, что во время кондиционирования субъект приобретает ассоциации как CS-US, так и контекст-US. Во время теста эти ассоциации сравниваются, и ответ на CS происходит только в том случае, если ассоциация CS-США сильнее, чем ассоциация контекст-США. После того, как CS и США неоднократно соединяются в пары при простом приобретении, связь CS-США становится сильной, а связь контекст-США относительно слабой. Это означает, что CS вызывает сильный CR. При «нулевой непредвиденности» (см. выше) условная реакция слаба или отсутствует, поскольку связь контекст-США примерно такая же сильная, как ассоциация CS-США. Блокирование и другие более тонкие явления также можно объяснить с помощью теорий сравнения, хотя, опять же, они не могут объяснить всего.

Вычислительная теория

Потребность организма предсказывать будущие события занимает центральное место в современных теориях обусловленности. Большинство теорий используют ассоциации между стимулами для обеспечения таких прогнозов. Например: в модели R – W ассоциативная сила CS говорит нам, насколько сильно этот CS предсказывает США. Другой подход к прогнозированию предлагается такими моделями, как модель Галлистела и Гиббона (2000, 2002). Здесь реакция не определяется силой ассоциаций. Вместо этого организм записывает время начала и завершения CS и US и использует их для расчета вероятности того, что US последует за CS. Ряд экспериментов показал, что люди и животные могут научиться определять время событий (см. « Когнитивные способности животных »), а модель Галлистела и Гиббона дает очень хорошее количественное соответствие различным экспериментальным данным. Однако недавние исследования показали, что модели, основанные на продолжительности, не могут учитывать некоторые эмпирические данные, а также ассоциативные модели.

Элементные модели

Модель Рескорлы-Вагнера рассматривает стимул как единое целое и представляет ассоциативную силу стимула с одним числом без каких-либо записей о том, как это число было достигнуто. Как отмечалось выше, это затрудняет учет в модели ряда экспериментальных результатов. Большую гибкость обеспечивает предположение, что стимул внутренне представлен набором элементов, каждый из которых может переходить из одного ассоциативного состояния в другое. Например, сходство одного стимула с другим можно представить, сказав, что эти два стимула имеют общие элементы. Эти общие элементы помогают объяснить генерализацию стимулов и другие явления, которые могут зависеть от генерализации. Кроме того, разные элементы одного и того же набора могут иметь разные ассоциации, а их активации и ассоциации могут меняться в разное время и с разной скоростью. Это позволяет моделям на основе элементов обрабатывать некоторые необъяснимые иначе результаты.

Модель СОП

Ярким примером элементного подхода является модель Вагнера «СОП». С момента своего появления модель разрабатывалась различными способами, и теперь она в принципе может объяснить очень широкий спектр экспериментальных результатов. Модель представляет любой заданный стимул с большой коллекцией элементов. Время предъявления различных стимулов, состояние их элементов и взаимодействие между элементами определяют ход ассоциативных процессов и поведение, наблюдаемое в ходе кондиционирующих экспериментов.

Описание простого кондиционирования в СОП иллюстрирует некоторые основы модели СОП. Начнем с того, что модель предполагает, что CS и США представлены большой группой элементов. Каждый из этих элементов стимула может находиться в одном из трех состояний:

• первичная деятельность (А1) – Грубо говоря, на раздражитель «обращают внимание». (Ссылки на «внимание» предназначены только для облегчения понимания и не являются частью модели.)
• вторичная активность (А2). Стимул «обслуживается периферически».
• неактивный (I) – на стимул «не обращают внимания».

Из элементов, представляющих одиночный стимул в данный момент, некоторые могут находиться в состоянии А1, некоторые — в состоянии А2, а некоторые — в состоянии I.

При первом появлении стимула некоторые его элементы переходят от бездействия I к основной активности А1. Из состояния А1 они постепенно переходят в А2 и, наконец, обратно в I. Активность элемента может измениться только таким образом; в частности, элементы в A2 не могут вернуться непосредственно в A1. Если элементы CS и США одновременно находятся в состоянии А1, между двумя стимулами обнаруживается связь. Это означает, что если позже CS будет представлен раньше США и некоторые элементы CS войдут в A1, эти элементы активируют некоторые элементы США. Однако элементы США, активированные таким образом косвенно, повышаются только до состояния A2. (Это можно представить как CS, пробуждающий воспоминания о США, которые не будут такими сильными, как настоящие.) При повторных испытаниях CS-США все больше и больше элементов связываются, и все больше и больше элементов США переходят в A2. когда загорится CS. В результате постепенно остается все меньше и меньше элементов США, которые смогут войти в А1, когда появятся сами США. В результате обучение замедляется и приближается к пределу. Можно было бы сказать, что США «полностью предсказаны» или «неудивительны», потому что почти все их элементы могут войти в А2 только при наступлении CS, оставляя лишь немногим возможность формировать новые ассоциации.

Модель может объяснить результаты, которые объясняются моделью Рескорлы-Вагнера, а также ряд дополнительных результатов. Например, в отличие от большинства других моделей, СОП учитывает время. Возникновение и затухание активации элемента позволяет модели объяснить зависящие от времени эффекты, такие как тот факт, что кондиционирование является наиболее сильным, когда CS происходит непосредственно перед США, и что, когда CS приходит после США («обратное кондиционирование»), результат часто является тормозным CS. Также объясняются многие другие, более тонкие явления.

В последние годы появился ряд других мощных моделей, включающих представления элементов. Они часто включают предположение, что ассоциации включают сеть связей между «узлами», которые представляют стимулы, реакции и, возможно, один или несколько «скрытых» слоев промежуточных взаимосвязей. Такие модели соприкасаются с нынешним бурным ростом исследований в области нейронных сетей , искусственного интеллекта и машинного обучения .

Приложения

Нейронная основа обучения и памяти

Павлов предположил, что обусловливание включает в себя связь между центрами мозга, отвечающими за условные и безусловные раздражители. Его физиологическая теория обусловленности была заброшена, но классическая обусловленность продолжает использоваться для изучения нервных структур и функций, которые лежат в основе обучения и памяти. Формы классического обусловливания, которые используются для этой цели, включают, среди прочего, обусловливание страха , обусловливание моргания глаз и обусловливание сокращения стопы Hermissenda crassicornis , морского слизняка. И страх, и обусловливание моргания включают в себя нейтральный стимул, часто тон, который сочетается с безусловным стимулом. В случае с кондиционированием моргания США представляет собой воздушную затяжку, тогда как в случае обусловливания страха США являются угрожающими или отталкивающими, например, шоком для ног.

Американский нейробиолог Дэвид А. Маккормик провел эксперименты, которые продемонстрировали: «...отдельные области мозжечка и связанные с ним области ствола мозга содержат нейроны, которые меняют свою активность во время кондиционирования – эти области имеют решающее значение для освоения и выполнения этой простой задачи обучения. Похоже, что что другие области мозга, включая гиппокамп, миндалевидное тело и префронтальную кору, способствуют процессу кондиционирования, особенно когда требования задачи становятся более сложными».

Обусловливание страха и моргания обычно задействует неперекрывающиеся нейронные схемы, но имеет общие молекулярные механизмы. Обусловливание страхом происходит в базолатеральной миндалевидном теле, которое получает глутаминергический сигнал непосредственно от таламических афферентов, а также опосредованно от префронтальных проекций. Прямых проекций достаточно для кондиционирования с задержкой, но в случае кондиционирования со следами, когда CS необходимо представить внутри, несмотря на отсутствие внешнего стимула, необходимы косвенные пути. Передняя поясная извилина является одним из кандидатов на промежуточное кондиционирование следов, но гиппокамп также может играть важную роль. Пресинаптическая активация протеинкиназы А и постсинаптическая активация рецепторов NMDA и пути ее передачи сигнала необходимы для кондиционирования связанной пластичности. CREB также необходим для кондиционирования связанной с ним пластичности и может индуцировать последующий синтез белков, необходимых для этого. Поскольку NMDA-рецепторы активируются только после увеличения пресинаптического кальция (тем самым высвобождая блок Mg2+), они являются потенциальным детектором совпадений, который может опосредовать пластичность, зависящую от времени спайков . STDP ограничивает LTP ситуациями, когда CS прогнозирует США, а LTD — наоборот.

Поведенческая терапия

Основная статья: Поведенческая терапия

Некоторыми методами лечения, связанными с классическим обусловливанием, являются терапия отвращения , систематическая десенсибилизация и наводнение . Аверсионная терапия — это тип поведенческой терапии, призванный заставить пациентов отказаться от нежелательной привычки, связывая эту привычку с сильным неприятным безусловным стимулом. Например, можно использовать лекарство, чтобы связать вкус алкоголя с расстройством желудка. Систематическая десенсибилизация – это метод лечения фобий, при котором пациента учат расслабляться, подвергаясь воздействию все более провоцирующих тревогу стимулов (например, гневных слов). Это пример контробусловливания , призванного связать раздражители, вызывающие страх, с реакцией (расслаблением), несовместимой с тревогой. Наводнение — это форма десенсибилизации, которая пытается устранить фобии и тревоги путем многократного воздействия крайне тревожных стимулов до тех пор, пока отсутствие подкрепления реакции тревоги не приведет к ее исчезновению. «Наводнение» обычно предполагает фактическое воздействие раздражителей, тогда как термин «имплозия» относится к воображаемому воздействию, но иногда эти два термина используются как синонимы.

Кондиционирующая терапия обычно занимает меньше времени, чем гуманистическая терапия.

Условная реакция на лекарство

Стимул, присутствующий при введении или употреблении лекарства, может в конечном итоге вызвать условную физиологическую реакцию, имитирующую эффект лекарства. Иногда это происходит с кофеином; Заядлые любители кофе могут обнаружить, что запах кофе дает им чувство бодрости. В других случаях условная реакция представляет собой компенсаторную реакцию, имеющую тенденцию нивелировать действие препарата. Например, если лекарство приводит к тому, что организм становится менее чувствительным к боли, компенсаторная условная реакция может сделать человека более чувствительным к боли. Эта компенсаторная реакция может способствовать толерантности к препарату . В этом случае потребитель наркотиков может увеличить количество потребляемого наркотика, чтобы ощутить его эффект, и в конечном итоге принять очень большие дозы наркотика. В этом случае может возникнуть опасная реакция передозировки, если ХС отсутствует и условный компенсаторный эффект не наступает. Например, если препарат всегда вводился в одном и том же помещении, стимулы, обеспечиваемые этим помещением, могут вызвать условный компенсаторный эффект; тогда может возникнуть реакция передозировки, если препарат ввести в другое место, где условные раздражители отсутствуют.

Условный голод

Сигналы, которые постоянно предшествуют приему пищи, могут стать условными стимулами для набора телесных реакций, подготавливающих организм к приему пищи и пищеварению. Эти рефлекторные реакции включают секрецию пищеварительных соков в желудок и секрецию определенных гормонов в кровоток и вызывают состояние голода. Примером обусловленного голода является «эффект закуски». Любой сигнал, который постоянно предшествует приему пищи, например часы, показывающие, что пора ужинать, может вызвать у людей чувство голода сильнее, чем до сигнала. Латеральный гипоталамус (ЛГ) участвует в инициации приема пищи. Было показано, что нигростриарный путь, который включает черную субстанцию, латеральный гипоталамус и базальные ганглии, участвует в мотивации голода.

Условная эмоциональная реакция

Дополнительная информация: Условная эмоциональная реакция и обусловленность страхом.

Влияние классической обусловленности можно увидеть в эмоциональных реакциях, таких как фобия , отвращение, тошнота, гнев и сексуальное возбуждение. Знакомый пример — условная тошнота, при которой CS — это вид или запах определенной пищи, который в прошлом приводил к безусловному расстройству желудка. Аналогично, когда CS — это вид собаки, а США — боль от укуса, результатом может стать условный страх перед собаками. Примером условного эмоционального ответа является условное подавление .

Эмоциональная обусловленность как адаптивный механизм помогает защитить человека от вреда или подготовить его к важным биологическим событиям, таким как сексуальная активность. Таким образом, стимул, возникший до сексуального взаимодействия, вызывает сексуальное возбуждение, которое подготавливает человека к сексуальному контакту. Например, сексуальное возбуждение у людей было обусловлено сочетанием стимула, такого как изображение банки с монетами, с просмотром эротического клипа. Подобные эксперименты с голубыми рыбами-гурами и домашними перепелами показали, что такое воспитание может увеличить количество потомства. Эти результаты показывают, что методы кондиционирования могут помочь повысить уровень рождаемости у бесплодных людей и видов, находящихся под угрозой исчезновения.

Павловско-инструментальный перевод

Основная статья: Павловско-инструментальный перевод

Павловско-инструментальный перенос — это явление, которое возникает, когда условный стимул (CS, также известный как «сигнал»), который был связан с поощрительными или аверсивными стимулами через классическое обусловливание, изменяет мотивационную значимость и оперантное поведение . В типичном эксперименте крысе предъявляют пары «звук-пища» (классическое обусловливание). Отдельно крыса учится нажимать на рычаг, чтобы получить еду (оперантное обусловливание). Сеансы испытаний теперь показывают, что крыса нажимает на рычаг быстрее в присутствии звука, чем в тишине, хотя звук никогда не был связан с нажатием рычага.

Предполагается, что павловско-инструментальный перенос играет роль в эффекте дифференциальных результатов - процедуре, которая усиливает оперантную дискриминацию за счет сопоставления стимулов с конкретными результатами.

См. также

• Морковь и палка
• Конверсионная терапия
• Выученная беспомощность
• Эксперимент маленького Альберта
• Ноцебо
• Меры условной эмоциональной реакции
• Павловско-инструментальный перевод
• Плацебо (происхождение технического термина)
• Ядовитая застенчивость
• Готовность (обучение)
• Рефлекс разгибания хоботка
• Психологическая манипуляция
• Количественный анализ поведения
• Система вознаграждений
• Контроль стимула
• Условная компенсаторная реакция
• Модель «стимул-реакция»

Дальнейшее чтение

• Бабский Е , Ходоров Б , Косицкий Г , Зубков А (1989). «Глава 17, раздел «Условно-рефлекторная деятельность коры головного мозга» ». В Бабский Э (ред.). Физиология человека, в 2 т . Том. 2. Перевод Людмилы Аксеновой; перевод под редакцией Х.К. Крейтона. Москва : Издательство «Мир» . стр. 330–357. ISBN  978-5-03-000776-2 First published in Russian as «Физиология человека» {{cite book}}: CS1 maint: постскриптум ( ссылка )
• Даян П., Какаде С., Монтегю П.Р. (ноябрь 2000 г.). «Обучение и избирательное внимание». Природная неврология . 3 Приложение: 1218–23. дои : 10.1038/81504 . ПМИД   11127841 . S2CID   12144065 .
• Джами С.А., Райт В.Г., Гланцман Д.Л. (март 2007 г.). «Дифференциальное классическое формирование рефлекса отдергивания жабр у Aplysia вызывает как зависимое от рецептора NMDA усиление, так и зависимое от рецептора NMDA подавление рефлекса» . Журнал неврологии . 27 (12): 3064–8. doi : 10.1523/JNEUROSCI.2581-06.2007 . ПМК   6672468 . ПМИД   17376967 . Архивировано из оригинала 23 сентября 2015 г. Проверено 03 сентября 2019 г.
• Кирш И., Линн С.Дж., Вигорито М., Миллер Р.Р. (апрель 2004 г.). «Роль познания в классической и оперантной обусловленности». Журнал клинической психологии . 60 (4): 369–92. дои : 10.1002/jclp.10251 . ПМИД   15022268 .
• Павлов И.П. (1927). «Условные рефлексы: исследование физиологической активности коры головного мозга» . Природа . 121 (3052). Перевод Анрепа Г.В.: 662–664. Бибкод : 1928Natur.121..662D . дои : 10.1038/121662a0 . ПМК   4116985 . ПМИД   25205891 . Архивировано из оригинала 21 сентября 2020 г. Проверено 2 мая 2007 г.
• Рескорла Р.А., Вагнер А.Р. (1972). «Теория павловской обусловленности. Вариации эффективности подкрепления и отсутствия подкрепления». . В Black A, Прокаски В.Ф. (ред.). Классическое кондиционирование II . Нью-Йорк: Appleton-Century-Crofts.
• Шмидт РФ (1989). «Память поведения (обучение путем кондиционирования)». В Шмидт РФ , Тьюс Дж. (ред.). Физиология человека . Перевод Маргариты А. Бидерман-Торсон (второе, полностью переработанное издание). Берлин и др.: Springer-Verlag . стр. 155–156. ISBN  978-3-540-19432-3 .
• вики-книга о поведении животных
• Шанс П (2008). Обучение и поведение . Бельмонт/Калифорния: Уодсворт. ISBN  978-0-495-09564-4 .
• Мур Дж.В. (2012). Руководство нейробиолога по классической обусловленности . Springer Science & Business Media. ISBN  978-0387988054 .
• Медин Д.Л., Росс Б.Х., Маркман А.Б. (2009). Когнитивная психология .
• Кирни, Калифорния (январь 2011 г.). Аномальная психология и жизнь: многомерный подход .
• Хилгард Э.Р., маркиз Д.Г. (1961). Хилгард и Маркиз «Обусловленность и обучение» . Нью-Йорк: Appleton-Century-Crofts. ISBN  9780390510730 .
• Разран Г (1971). Разум в эволюции; синтез Востока и Запада выученного поведения и познания . Бостон: Хоутон Миффлин.
• Черный А.Х., Прокасий В.Ф. (1972). Классическое обусловливание II: современные исследования и теория . Эпплтон-Сентьюри-Крофтс.

Внешние ссылки

• Scholarpedia Классическое обусловливание
• Scholarpedia Вычислительные модели классической обусловленности
• Стипендия Эрмисенды