Факультативное, ассоциативное, эффект-зависимое научение. Классические и инструментальные условные рефлексы

Поведение: эволюционный подход Курчанов Николай Анатольевич

5.3. Ассоциативное научение

5.3. Ассоциативное научение

Ассоциативное научение (обусловливание) – это процесс образования условных рефлексов. Для некоторых авторов оно стало синонимом научения вообще, являясь основой всего многообразия этого явления. Лежит ли процесс образования условных рефлексов в основе всех форм научения (кроме неассоциативного)? Вопрос этот далеко не простой, и мы не можем дать на него убедительный ответ. А сейчас рассмотрим историю этого вопроса.

К началу XX в. в науке была четко выражена тенденция найти простые способы объяснения сложного поведения. Именно в это время разрабатывает свои подходы выдающийся русский ученый, лауреат Нобелевской премии 1904 г. И. П. Павлов (1849–1936). В 1903 г. он предложил термин условный рефлекс, назвав так приспособительную реакцию организма к среде, вырабатываемую в ходе научения. Условные рефлексы И. П. Павлов рассматривал как элементарные единицы поведения. Это понятие надолго стало одним из ключевых в нейрофизиологии.

Свое учение об условных рефлексах И. П. Павлов назвал высшей нервной деятельностью (ВНД), понимая ее как синоним поведения. Это учение в нашей стране было во многом абсолютизировано и идеологизировано, что нисколько не умаляет общепризнанных заслуг самого И. П. Павлова.

В 1906 г. другой Нобелевский лауреат, английский физиолог Ч. Шеррингтон (1857–1952) публикует работу «Интегративная деятельность нервной системы», в которой он показал, что простые рефлексы, сочетаясь, могут приводить к координированному поведению. Такой факт послужил чрезвычайно веским основанием считать условные рефлексы основой самых сложных форм поведения.

В физиологии обычно выделяют два вида условных рефлексов.

Классические условные рефлексы. В опытах И. П. Павлова, которые вошли во все школьные учебники, собаке неоднократно давалась пища в сочетании с внешним стимулом – звонком. Через некоторое время четко обнаруживалось возрастание слюноотделения в ответ на звонок, который был ранее безразличным стимулом. Собака научилась связывать звонок с пищей.

И. П. Павлов назвал звонок условным стимулом, а пищу – безусловным стимулом. Согласно взглядам И. П. Павлова, в ЦНС происходит формирование временной связи между двумя очагами возбуждения, вызванными этими стимулами. К безусловным стимулам стали относить все стимулы, вызывающие врожденные видоспецифичные реакции – безусловные рефлексы. В экспериментах И. П. Павлова безусловные стимулы играли роль подкрепления. Таким стимулом чаще всего выступала пища, а в роли условных стимулов мог выступать любой сигнал.

Работы И. П. Павлова дали надежную теоретическую платформу для формирующегося направления бихевиоризма в психологии. Но основным методом у бихевиористов стал метод инструментальных условных рефлексов.

Инструментальные условные рефлексы образуются путем подкрепления только определенных действий. Основополагающие разработки в этой области выполнены американским психологом Э. Торндайком (1874–1949), которым в 1898 г. были проведены первые экспериментальные исследования поведения животных. Его знаменитые «проблемные ящики» положили начало широкому применению метода «проб и ошибок» в исследовании поведения. В ящиках животные должны были прийти к «правильному» решению, совершив определенные действия, в результате чего их ждала «награда». Решением могло быть нажатие на рычаг, клевание кнопки, выбор маршрута и т. п.

Американский психолог Б. Скиннер (1904–1990), который стал наиболее знаменитым среди бихевиористов, выработку инструментальных условных рефлексов назвал оперантным научением. Оперантное научение – это спонтанные действия, не вызванные каким-либо очевидным стимулом. Выработка классических условных рефлексов получила название респондентного научения, как поведения, совершаемого в ответ на определенный стимул. Такая терминология закрепилась в нейрофизиологии. С экспериментами Б. Скиннера мы еще познакомимся в дальнейшем.

Поскольку условные рефлексы (как инструментальные, так и классические) имеют много общего и образуются за счет ассоциации нового стимула с вознаграждением, процесс их формирования получил название ассоциативного научения или обусловливания. В формировании обоих типов условных рефлексов мы можем выделить две стадии:

1-я стадия – генерализация. Это начальная стадия выработки условных рефлексов, когда животные реагируют не только на конкретный стимул, но и на близкие по значению стимулы.

2-я стадия – дифференциация. Прогрессивное дифференциальное подкрепление только конкретного стимула учит животных отличать его от других, близких по значению стимулов. Звуковые раздражители начинают дифференцироваться по частоте, световые – по цвету, форме и т. п.

С помощью механизма дифференциации животные способны различать схожие стимулы, что лежит в основе лабораторных исследований. Но в живой природе не меньшее значение имеет процесс генерализации, позволяющий животному адекватно реагировать на схожие раздражители. В природе (в отличие от лаборатории) раздражители не бывают строго постоянны. Важно научиться опасаться не конкретного хищника, а всех представителей его вида.

Обе школы (и ВНД, и бихевиоризм) придавали большое значение разработке понятия торможения. В школе И. П. Павлова стали выделять внутреннее торможение, которое подразумевает неоднократный «обман» животного, и внешнее торможение как действие другого, более сильного безусловного раздражителя. В бихевиоризме была разработана идея реактивного торможения, согласно которой, каждая осуществленная животным реакция уменьшает вероятность своего повторения в отсутствие подкрепления, а подкрепленная реакция увеличивает эту вероятность. Неизвестно почему, но угасание инструментальных условных рефлексов происходит медленнее, чем классических.

Система формирования поведения методом оперантного научения на Западе получила название shaping . Система стала популярной, поскольку появилась, как говорилось выше, в «нужное время». Первые же успехи, достигнутые бихевиористами, подтолкнули их к идее провозглашения безграничных возможностей научения. Слепая вера в возможности «своего» метода не позволяла видеть его пределы как западным бихевиористам, так и сторонникам учения ВНД в Советском Союзе. Однако в действительности все наиболее впечатляющие успехи в научении достигались именно тогда, когда выученные действия были частью репертуара инстинктивного поведения животных. И, наоборот, научение не достигало успеха, если явно противоречило этому поведению.

В 1960-е гг. в этологии был разработан принцип инстинктивного смещения, декларирующий смещение выученного поведения в сторону инстинктивного (Резникова Ж. И., 2005). Многочисленные случаи воспитания животных особями другого вида показывают, что волчонок или лисенок, воспитанные собакой, все равно станут волком или лисицей, хотя их поведение и претерпит некоторые изменения. Диапазон изменений инстинктивного поведения характеризует «жесткость» инстинкта и определяет рамки научения. К важнейшему вопросу «жесткости» инстинкта мы вернемся в следующей главе.

Вследствие научного тупика, к которому пришли бихевиористы в 1960-е гг., обострился интерес к нейрофизиологическим механизмам научения. Большие усилия были приложены к поиску материальных носителей условных рефлексов. Плодотворные подходы к изучению нейрофизиологических механизмов поведения были разработаны в нейроэтологии (Ewert J., 1980).

Развитие теории мотивации позволило пересмотреть интерпретацию слишком жестких экспериментов И. П. Павлова и бихевиористов. Подход к животным как к автоматам, зажатым в станок или заброшенным в лабиринт с двумя альтернативами, не способствовал пониманию природы поведения. Современные подходы к феномену ассоциативного научения изменили взгляды, сформировавшиеся в русле ВНД и бихевиоризма, однако многие моменты остаются непонятными.

Объясняется ли все многообразие условных рефлексов единым механизмом? Отличаются ли условные рефлексы дождевого червя и человека по своей природе? Лежат ли условные рефлексы в основе всех форм научения? Эти вопросы еще не закрыты, но многие ученые убеждены, что основополагающие законы научения едины для всех представителей животного мира (Мак-Фарленд Д., 1988).

Нейрофизиологические механизмы условных рефлексов неразрывно связаны с процессами памяти и будут рассмотрены далее. Пока отметим, что даже в самых простых процессах участвуют сотни различных нейронов. Мы сразу сталкиваемся с проблемой вычленения задействованных нейронов из сложного ансамбля единичных рефлексов. Поскольку в любой реакции в той или иной степени участвует весь организм, то сама концепция рефлекса давно стала выглядеть просто удобной абстракцией (Kuo Z., 1967). Такой взгляд разделяют практически все нейрофизиологи, но термин «рефлекс» слишком прижился в научном лексиконе. Этот вопрос мы также рассмотрим дополнительно.

А сейчас рассмотрим неоднозначную природу явлений подражания и импринтинга, представления о которых неоднократно менялись в истории науки.

Из книги Теоретические основания дрессировки автора Гриценко Владимир Васильевич

НЕГАТИВНОЕ НАУЧЕНИЕ Негативным научением или привыканием называют снижение выраженности или отсутствие поведенческих реакций при повторяемых или продолжительно действующих раздражителях, которые не имеют серьезных последствий и не несут в данный момент

Из книги Основы зоопсихологии автора Фабри Курт Эрнестович

ЛАТЕНТНОЕ НАУЧЕНИЕ Впервые феномен латентного (скрытого, неявного) научения был обнаружен в лабораторных условиях на крысах, которые обследовали лабиринт без всякого подкрепления. Оказалось, что в дальнейшем крыса с таким опытом обучается проходить лабиринт быстрее и с

Из книги Мозг, разум и поведение автора Блум Флойд Э

НАУЧЕНИЕ НА ОСНОВЕ ОБРАЗОВАНИЯ ИНСТРУМЕНТАЛЬНЫХ УСЛОВНЫХ РЕФЛЕКСОВ (ОПЕРАНТНОЕ НАУЧЕНИЕ) Отцом инструментальной формы научения считается Э. Торндайк, который еще в конце прошлого века назвал такую форму научения обучением «методом проб, ошибок и случайного успеха».

Из книги Проблемы этологии автора Акимушкин Игорь Иванович

ИМИТАЦИОННОЕ НАУЧЕНИЕ Имитационным научением или подражанием называют особую форму научения у животных в условиях общения, когда одно животное следует примеру другого.Различают инстинктивное подражание у животных (взаимную стимуляцию), например, присоединение

Из книги Поведение: эволюционный подход автора Курчанов Николай Анатольевич

КОГНИТИВНОЕ НАУЧЕНИЕ Когнитивное научение объединяет высшие формы обучения, свойственные в большей степени взрослым животным с высокоразвитой нервной системой и основанные на ее свойстве формировать целостный образ окружающей среды. При когнитивных формах научения

Из книги автора

Глава 3 НАУЧЕНИЕ

Из книги автора

Эмбриональное научение и созревание В указанной связи приобретает особый вопрос об «эмбриональном научении», считавшемся некоторыми исследователями преимущественным, если не единственным фактором всего сложного процесса первоначального формирования

Из книги автора

Облигатное научение Приведенные выше примеры постнатального научения относятся к упомянутому ранее облигатному научению. Сюда относятся все формы научения, которые в естественных условиях совершенно необходимы для выполнения важнейших жизненных функций, т. е.

Из книги автора

Раннее факультативное научение Как самостоятельная категория приобретения индивидуального опыта факультативное научение играет в раннем онтогенезе еще значительно меньшую роль, чем на последующих этапах онтогенеза. Это объясняется тем, что оно первоначально лишь

Из книги автора

Облигатное научение и ориентация Рассмотрим сначала некоторые процессы, связанные с начальной ориентацией у детеныша. У всех животных здесь первостепенное значение имеют таксисы, которые, как уже было показано, у высших животных дополняются и обогащаются элементами

Из книги автора

Эмоции и научение Если мы больше говорили об отрицательных эмоциях, чем о положительных, то только потому, что последние были меньше изучены как на физиологическом, так и на психологическом уровне. К тому же представления о «вознаграждении» и о механизмах его достижения

Из книги автора

7. Научение и память Мы воспринимаем окружающее начиная с самого момента рождения, а может быть, даже и несколько раньше. Мы видим очертания и цвета, слышим разнообразные звуки, осязаем фактуру предметов, улавливаем запахи, распространяющиеся в воздухе, чувствуем

Из книги автора

Научение и инсайт Релизеры Релизеры - это сигналы, которые вызывают инстинктивные реакции у животных. Релизеров великое множество. Рассмотрим некоторые из них.Классический объект лабораторных исследований этологов - колюшка.Когда приходит пора размножения, самец

Из книги автора

Глава 5. Научение Мы не в силах придумать человеку лучшую похвалу, чем сказать, что он одарен от природы. М. Монтень (1533–1592), французский философ Индивидуальная приспособительная деятельность животных реализуется в ходе онтогенеза в процессах научения. Эта область

Из книги автора

5.2. Неассоциативное научение Если научение обусловлено действием средовых факторов и не требует совпадения (ассоциации) внешних сигналов с определенной деятельностью организма, его можно назвать неассоциативным. Считается, что это наиболее примитивная форма научения,

Из книги автора

5.7. Когнитивное научение Когнитивное научение представляет собой, пожалуй, самый неопределенный раздел с самыми размытыми границами. В общем виде оно может быть определено как способность экстренного создания поведенческих программ путем определения закономерностей

Для рассмотрения гипотезы о том, что животные обладают механизмами обнаружения и узнавания причинных отношений, следует дать определение природы таких отношений. Существуют два основных типа причинных связей, и вряд ли можно сомневаться в том, что оба их животное может научиться различать (Dickinson, 1980 Dickinson, 1980, Contemporare Animal Learning.). Одно событие (причина) может вызвать другое событие (следствие) или не вызвать его (отсутствие следствия). Первое событие не обязательно должно быть непосредственной причиной следствия или его отсутствия, но оно может быть определенным звеном причинно-следственной цепи. В самом деле, событие, замеченное животным, может быть не частью причинной цепи, а просто указанием на то, что произошло вызванное данной причиной событие. Именно кажущаяся причина важна для животного.

Способность научиться узнаванию обоих типов причинных отношений можно показать на простом опыте. Голодных голубей сажают в скиннеровский ящик с двумя световыми ключами и механизмом подачи корма. Одной группе голубей демонстрируют связь свет-корм (причина-следствие), а другой - свет -* отсутствие корма (причина без следствия). Третьей группе предъявляют только свет. В первом случае один из ключевых дисков освещается на 10с с неправильными интервалами, и пища подается, как только выключается свет. Во втором случае свет и пищу предъявляют столько же раз, что и в первом, но внимательно следят за тем, чтобы корм никогда не появлялся вслед за включением света. В третьем случае совсем не дают пищи. В первом случае свет сигнализирует о появлении корма, а во втором - о его отсутствии. Затем свет можно предъявить каждой группе голубей отдельно от пищи и отметить, приблизится к нему птица или, наоборот, удалится. Результаты такого опыта ясно показывают, что голуби, наблюдавшие связь свет-корм, стремятся приблизиться к свету, как и можно, ожидать на основе нормальной классической выработки условного рефлекса. Голуби, которым предъявлялось отношение свет-отсутствие корма, также не оставались безразличными к свету, а определенно избегали его (Wasserman et al., 1974 Wasserman et al., 1974, Pavlovian appetitive contingencies and approach versus withdrawal to conditioned stimuli in pigeons.). Лишь голуби третьей группы были, по-видимому, безразличны к свету (рис. 4)

Рис. 4.

В условиях “свет корм” освещение ключа сочеталось с кормом, и голуби вырабатывали реакцию приближения. В условиях применения только света голуби никогда не получали корма и никак не реагировали на ключ. В условиях “свет-отсутствие корма”, они получали корм, но ни во время, ни вскоре после освещения ключа; у этих голубей возникала реакция удаления от ключа. (По Dickinson. 1980. Dickinson, 1980, Contemporare Animal Learning.)

Анализируя результаты этого опыта, надо помнить о ряде важных моментов. Во-первых, мы не можем считать, что голубь научился устанавливать причинную связь света с пищей или ее отсутствием. То, чему животные научаются, сталкиваясь с причинными отношениями, можно рассматривать только с позиций теорий о внутренних изменениях, происходящих в результате приобретенного опыта. Во-вторых, тот факт, что в одном случае голуби приближаются к свету, а в другом удаляются от него, интересен, но не относится непосредственно к обсуждаемой проблеме. Многие различия в поведении, вызванные предъявлением стимулов, можно было бы счесть указанием на произошедшее научение, однако говорить о значении конкретных действий животного логично только при анализе того, чему именно оно научилось. В-третьих, имеет смысл считать свет кажущейся причиной непредъявления пищи, только если пища предъявляется в его отсутствие. Нельзя ожидать, что голубь научится принимать свет за причину отсутствия пищи, если он никогда не получал ее в данной ситуации, как это было в третьей опытной группе. Животное имеет возможность усвоить ассоциацию “причина-отсутствие следствия”, только когда почему-либо ожидает, что определенное следствие произойдет (Dickinson, 1980 Dickinson, 1980, Contemporare Animal Learning).

Хотя иногда можно сделать вывод, что изменение поведения говорит о произошедшем научении, отсутствие таких изменений нельзя считать указанием на полное отсутствие научения. Дикинсон называет это проблемой молчания поведения. Так, например, в случае описанного выше опыта мы не можем считать, что голуби, которым предъявлялся только свет, ничему не научились. Напротив, имеются данные о том, что крысы научаются игнорировать стимулы, не предсказывающие никакого изменения в ответ на их действия (Mackintosh, 1973 Mackintosh, 1974, The Psychology of Animal Learning). Если в ходе опыта крысам вначале предъявляют два стимула независимо один от другого, то потом они научаются связывать их медленнее, чем животные, которым эти стимулы предварительно не предъявлялись. Следовательно, крысы научаются тому, что определенные стимулы незначимы, и это мешает последующему основанному на этих сигналах научению.

Существуют и другие формы научения, при которых наблюдается молчание поведения. Животные могут научиться тому, что два события не связаны между собой, т. е. следствие не связано либо с данной причиной, либо с целым классом причинных событий. Если этот класс действий входит в поведенческий репертуар животного, то такую форму научения называют “приобретенной беспомощностью” (Maier, Seligman, 1976 Maier, Seligman, 1976, Learned helplesseness.), т.е. животные научаются тому, что они ничего не могут сделать для улучшения ситуации. Такая выученная беспомощность замедляет будущее научение в аналогичных условиях.

Для того чтобы животное научилось различать простую причинную связь - между двумя событиями должна быть полная положительная корреляция (Dickinson, 1980 Dickinson, 1980, Contemporare Animal Learning.). С точки зрения животного, всегда имеется множество возможных причин события помимо той, которую применил экспериментатор. Между двумя событиями должна существовать достаточно тесная связь, для того чтобы одно из них было принято за причину второго. Для выяснения значения фоновых, или ситуационных, сигналов Макинтош (Mackintosh. 1976 Mackintosh. 1976, Overshadowing and stimulus intensity.) обучал крыс нажимать на рычаг для получения корма, а затем вводил в опыт различные стимулы. Одной группе при каждом нажиме предъявляли световой сигнал, другим - сложный, состоявший из света и шума. Для одних групп использовался слабый шум (50 дБ), для других - сильный (85 дБ). Во всех случаях животное сразу после предъявления каждого стимула получали легкий удар током. В конце опыта всем группам предъявляли один только свет, чтобы узнать, насколько, животные научились связывать его с током.

Полученные результаты показывают, что свет подавлял нажимы на рычаг в разной степени в разных группах. Если предъявлялся только свет или свет со слабым шумом, подавление было значительным, а когда свет сопровождался ильным шумом, оно было гораздо слабее. Таким образом, наличие мощного второго стимула ослабляло связь света с током даже несмотря на то, что между ними была полная корреляция. Это явление называется затенением. Степень затенения зависит от сравнительной силы затеняемого и затеняющего стимулов, поэтому слабый шум производил незначительное затеняющее действие.

Животные научаются связывать два события, только если вначале сочетание их было неожиданным или внезапным (Mackintosh, 1974 Mackintosh, 1974, The Psychology of Animal Learning). В обычном опыте по условным рефлексам такая внезапность создается подкреплением. Так, если стимул сопровождается ударом тока, причем ни сам этот стимул, ни фоновые сигналы в начале эксперимента не предвещали включения тока, такое подкрепление будет внезапным. Но предположим, что животное уже испытало раньше удар тока в присутствии стимула А; тогда, если с током коррелируют стимулы А и Б, присутствие первого из них будет блокировать выработку реакции на второй. Это явление, впервые открытое Кеймином (Kamin, 1969 Kamin, 1969, Preditstability, supreise, attention and conditioning.), называют блокадой. В одном из своих экспериментов Рескорла (Rescorla, 1971 Rescorla, 1971, Variations in the effectiveness of reinforcement and nonreinforcement following prior inhibitory conditioning.) продемонстрировал этот эффект и показал также, что чем неожиданнее подкрепление, тем лучше животное научается

В природе временная связь между какими-либо событиями не всегда является причинной связью. Например, если кошка прыгает на яблоню, когда лает собака, а затем на землю падает яблоко, то мы скорее подумаем, что кошка, а не лай собаки, была причиной его падения. Как прыжок кошки, так и лай собаки одинаково связаны во времени с падением яблока, но другие детали этих событий вводят нас к заключению, что его причиной была все же кошка. Точно так же можем показать, что животные легче образуют ассоциации между одними типами стимулов, чем между другими. Например, крысы легко связывают вкус со следующей болезнью, но нелегко научиваются связывать с ней тон или свет. Показано, что крысы быстрее ассоциируют между собой два события, воспринимаемые одной сенсорной модальностью (Rescorla, Furrow, 1977 Rescorla, Furrow, 1977, Stimulus similarity as a determinant of Pavlovian conditioning.) или локализованные в одном месте. Наконец, для того чтобы животное связало между собой два события, обычно нужно, чтобы они были очень близки во времени. Временные отношения между двумя событиями изучались во многих опытах по научению (Dickinson, 1980 Dickinson, 1980, Contemporare Animal Learning), показавших, что оно наиболее эффективно, когда одно событие (причина) происходит незадолго до второго (следствия). Однако некоторые данные говорят в пользу того, что такие отношения объясняются не прямым действием временного интервала на процесс научения, а различной степенью затенения первого события фоновыми сигналами в зависимости от временного интервала (Dickinson, 1980 Dickinson, 1980, Contemporare Animal Learning). А это означает, что влияние временного интервала на научение должно зависеть от значимости фоновых сигналов. В частности, следует ожидать, что фоновые сигналы будут гораздо менее важны при выработке ассоциации вкуса с болезнью, чем при сочетании тона с током, потому что присутствующие в экспериментальной ситуации фоновые стимулы обычно не существенны для научения избеганию определенного вкуса.

Ревуски (Revusky, 1971 Revusky, 1971, The role of interference in association over delay.) первый предположил, что отсутствием затенения, возможно, объясняется выработка вкусового отвращения, которая происходит несмотря на очень длинные интервалы времени между едой и последующим заболеванием. Он показал, что эффективный интервал можно сократить, введя фон из значимых (вкусовых) стимулов.

  • 1. Сущность научения заключается в освоении особью новых биологических значимых свойств вещей и явлений окружающего мира.
  • 2. Содержание научения заключается в образовании связи между сигналами о свойствах вещей и явлений, поступающими в мозг одновременно или с небольшим интервалом (не более 3--4 минут). Точнее -- связи между отражениями этих сигналов, закрепленными в мозгу.
  • 3. Необходимыми условиями образования такой связи являются:
    • а) Подкрепление - один из сигналов должен иметь биологическое значение, т. е. врожденную связь с определенными полезными реакциями организма.

Этим обеспечивается то, что при научении будут выделяться связи вещей, существенные для организма, т. е. такие, которые ему полезны, ведут к удовлетворению его потребностей.

б) Повторение -- совпадение условного сигнала и безусловного должно происходить в опыте животного несколько раз за достаточной короткий промежуток времени.

Этим обеспечивается отсеивание случайных единичных совпадений и выделение устойчивых повторяющихся, т. е. закономерных связей вещей и их свойств.

4. Наконец, основой научения являются генерализация и дифференцировка стимулов, а также их угасание при неподкреплении. Эти особенности механизма научения обеспечивают, как мы видели, синтез, анализ и оценку информации, поступающей из внешнего мира, с точки зрения ее биологического значения для организма.

В основе павловской модели научения лежат три главных предположения.

Первое - что научение заключается в образовании новых связей между различными элементами чувственного опыта организма. Связь по? латински - «ассоциация». Поэтому павловскую модель научения можно назвать ассоциативной.

Второе -- что научение выражается в улучшающейся дифференцировке этих элементов чувственного опыта с точки зрения их биологического значения. Чувство - по-латински «сенсус». Поэтому процесс, который описывает павловская модель можно назвать сенсорным научением.

Третье -- что механизмы поведения имеют рефлекторный характер. Поэтому можно сказать, что павловская модель описывает научение на рефлекторном уровне.

Объединяя все эти черты, павловскую теорию научения можно охарактеризовать как ассоциативную модель сенсорного научения на рефлекторном уровне.

Многочисленные исследования показали, что описываемый ею механизм в той или иной мере обнаруживается почти у всех многоклеточных животных. Когда мы говорили о наличии фактов обучения у большинства живых существ--от гидры до высших млекопитающих, то речь шла именно о их способности к образованию условных рефлексов. И во всех случаях обнаруживаются те же условия их формирования (подкрепление, повторение) и те же закономерности их изменений (генерализация, дифференцировка, угасание при неподкреплении).

Это самая сложная и самая совершенная форма научения, при котором живое существо научается вначале проводить действия над умственной моделью действительности, а затем переносить полученные результаты на реальную действительность.

Представим себе лабиринт, ведущий к кормушке; этот лабиринт сначала раздваивается на левое и правое ответвления, а затем оба ответвления сходятся. Если крысу приучить бежать к кормушке по левому ответвлению а затем его перекрыть, то крыса, наткнувшись на перегородку, внезапно поворачивает и бежит по правому ответвлению, без предварительных проб и ошибок. Иными словами, в процессе обучения у нее в мозге под действием потока осознаваемых и неосознаваемых раздражителей формируется «карта местности» -- так называемая когнитивная карта. В широком смысле слова под когнитивной картой можно понимать не только чисто топографическую схему местности, но любую модель действительности, над которой совершаются умственные действия. Классический пример -- обезьяна, у которой в клетке лежат узкая и широкая метровые трубки, а на отдалении полутора метров от клетки лежит банан; обезьяна безуспешно пытается достать его сначала рукой, потом отдельными трубками, затем на какое-то время замирает («задумывается») и вдруг неожиданно вставляет одну трубку в другую и достает банан -- причем ранее она этого никогда не делала.

У человека когнитивное научение достигло высшего уровня развития, превратившись в научение путем рассуждений.

Арендный блок

В отличие от облигатного научения факультативное научение представляет собой, как нам также уже известно, приобретение индивидуального опыта, который зависит от частных условий жизни особи и не является необходимым для всех представителей данного вида в качестве компонента их инстинктивного поведения. Факультативное научение модифицирует, совершенствует и приспособляет видотипичное, врожденное поведение в соответствии с особыми, частными, преходящими, а зачастую и случайными элементами среды обитания особи, поэтому факультативное научение носит сугубо индивидуальный характер, оно не приурочено к определенным сенсибельным периодам и отличается большой лабильностью и обратимостью. Видоспецифичными являются здесь лишь сама способность к научению и пределы этой способности.

Ассоциативное научение основывается на формировании связи между двумя стимулами. При классическом обусловливании образуется временная ассоциация между нейтральным условным стимулом и безусловным стимулом, вызывающим ответ. Пример классического обусловливания - поведение собак в опытах И.П.Павлова с рефлексами. Вид пищи вызывает у голодной собаки безусловный рефлекс слюноотделения. Если предъявлению пищи предшествует звонок, собака усваивает связь между этим звуком и едой. В результате звонок начинает сам по себе вызывать слюноотделение. Если сочетание безусловного (пища) и условного (звонок) раздражителей повторяется с сохранением временного соотношения между ними, мозг научается ассоциировать эти два стимула, и тогда предъявление только одного условного стимула станет вызывать безусловную реакцию - слюноотделение. Конечно, если пища перестает регулярно появляться в сочетании со звонком, условная реакция затухает: происходит угасание рефлекса.

Следующая разновидность ассоциативного научения - инструментальное (оперантное) обусловливание. Его механизм основан на том, что при подкреплении реакции изменяется ее вероятность. Подкрепление может быть положительным (вознаграждение) или отрицательным (наказание). Пример положительного подкрепления: дельфин, выпрыгнув из воды через обруч, получает рыбу. Пример отрицательного: ребенок за плохое поведение отослан в детскую. При положительном подкреплении вероятность реакции повышается, а при отрицательном - снижается.

Ассоциативное, факультативное обучение – активный процесс формирования собственной среды путем извлечения ее функциональных составляющих, значимых для выполнения тех или иных актов поведения. Эта категория обучения носит эффект-зависимый характер, то есть определяется результативностью контакта организма со средой. Формы ассоциативного обучения характеризуются совпадением во времени (ассоциацией) какого-либо воспринимаемого индифферентного раздражителя – внешнего или внутреннего – с деятельностью самого организма. Биологический смысл такой ассоциации – условного рефлекса – в его сигнальности, то есть в приобретении этим раздражителем роли предупреждающего фактора, сигнализирующего наступление предстоящих событий и подготавливающего организм к взаимодействию с ними. Формами ассоциативного обучения являются классические условные рефлексы (по И.П.Павлову) и оперантное обучение. Оперантное обучение – это обучение, в ходе которого организм добивается полезного результата с помощью активного поведения. Имеется три основных подобных вида обучения.

Классические условные рефлексы по И. П. Павлову – положительные и отрицательные.Оперантное научение (от лат. operatio – действие) – это научение, в ходе которого организм добивается полезного результата с помощью активного поведения. Имеется два основных подобных вида научения – метод проб и ошибок и инструментальный условный рефлекс.1. Метод проб и ошибок. Американский ученый Э. Торндайк (1890), видный представитель направления бихевиоризма (от англ. behaviour – поведение) помещал голодных кошек в так называемые проблемные клетки, которые открывались в том случае, если кошка предпринимала какие-то определенные действия: тянула за веревку, приподнимала запорный крючок и т. д. Когда кошка выходила из клетки, она получала пищу. По мере повторения процедуры выхода из клетки (увеличения числа проб и ошибок) скорость выполнения задачи возрастала. Эти исследования были продолжены Скиннером.

Инструментальный условный рефлекс – научение действию с помощью вознаграждения (подкрепления). Животное (крыса) по световому сигналу нажимает на рычаг и выключает электрический ток, чтобы избежать раздражения. Крыса также научается реагировать на световой раздражитель: нажимает на рычаг, чтобы получить пищу, т.е. она использует какой-то инструмент, отсюда и название этого вида научения. Дети быстро учатся говорить, когда родители одобряют их при правильном произнесении отдельных звуков и слов. В случае неправильного произнесения слова дети не получают подобного подкрепления, в результате чего эти слова постепенно исчезают из употребления в результате неподкрепления. Научение с помощью инструментального условного рефлекса происходит по сигналу, а научение методом проб и ошибок – без сигнала.

Самораздражение структур мозга для получения удовольствия, положительных эмоций или избегание самораздражения. Научение с помощью мышления (когнитивное научение). Во-первых, имеется в виду такой вариант, когда организм оказывается в ситуации, с которой он ранее не встречался, и находит правильное решение в результате мышления. При условном рефлексе по сигналу тоже имеет место мышление, т. е. оценка результата действия, но это происходит после выполнения действия. Однако в научении с помощью мышления первично мышление, а потом – действие, так как это целенаправленное научение. В эту форму научения следует включить научение с помощью рассудочной и психонервной деятельности, признавая, что между ними различий нет. Во-вторых, в эту форму научения следует включить и научение путем наблюдения.

Инструментальный условный рефлекс - это условный рефлекс, при котором реакция на условный раздражитель (обычно двигательная) является обязательным условием получения подкрепления. Например, если нажатие на педаль, сопровождаемое получением животным пищи, предваряется звуковым или световым раздражителем, то после ряда сочетаний нажатие на педаль становится инструментальной реакцией, а внешний стимул - сигналом для совершения такой реакции. Это и есть инструментальный условный рефлекс. Такой вид обучения, основанный на активной деятельности, играет важную роль в организации поведения человека в раннем постнатальном онтогенезе и остается доминирующим на протяжении дальнейшей жизни. Примером инструментальной реакции ребенка является его плач, в результате которого ребенок получает пищу. В этом случае плач играет для ребенка роль инструмента, изменяющего условия среды. Ребенок овладевает реакцией, которая определяет получение поощрения.

Инструментальный условный рефлекс успешно вырабатывается не только на поощрение, но и на наказание. Так, если собаку поместить в помещение, разделенное барьером, с целью научить ее перепрыгивать через него, для эффективного обучения возможно использование не поощрения (пища), а наказания (ток). Металлический пол подвергается воздействию электрического тока и животное, испытывая неприятное ощущение или боль, быстро обучается преодолевать препятствие и оказываться за барьером, где пол не находится под напряжением. При этом, одновременно с током включается световой или звуковой сигнал. В дальнейшем, если за 10 секунд до включения тока загорается световой или слышен звуковой сигнал, то собака избегает «наказания» - она перепрыгивает через барьер в течение того времени, которое отделяет световой или звуковой сигнал от включения тока.

Инструментальные условные рефлексы отличаются от классических условных рефлексов тем, что на их основе возникает бесконечное разнообразие новых двигательных реакций. Таким образом, поведение формируется на основе результата действия. Закрепляются в памяти субъекта в этом случае не безусловно-рефлекторные реакции, а произвольные активные действия.

У нас самая большая информационная база в рунете, поэтому Вы всегда можете найти походите запросы

Эта тема принадлежит разделу:

Зоопсихология

Предмет и задачи зоопсихологии и сравнительной психологии. Методы зоопсихологии, история развития. Допсихическое и психическое отражение. Характеристика психики животных.

К данному материалу относятся разделы:

Предмет и задачи зоопсихологии и сравнительной психологии. Взаимосвязь зоопсихологии и сравнительной психологии с другими науками

Методы зоопсихологии и сравнительной психологии. Проблема переноса результатов исследований, полученных на одном виде животных, на другой вид

История развития зоопсихологии: донаучные знания и научное становление до начала XX века

История развития зоопсихологии и сравнительной психологии в XX веке и в современной отечественной науке

Прикладное значение зоопсихологии в различных контекстах

Проблема происхождения психики: подходы к психическому, критерии психического

Допсихическое и психическое отражение. Проблема психического отражения: необходимость и условия возникновения

Периодизации эволюции психики и их основания

Теория эволюционного развития психики (по А. Н. Леонтьеву и К. Э. Фабри)

Методы исследования психики и принципы изучения развития психики в филогенезе

Общая характеристика психики животных на элементарной-сенсорной стадии низшего уровня

Общая характеристика психики животных на элементарной-сенсорной стадии высшего уровня

Общая характеристика психики животных на перцептивной стадии низшего уровня

Общая характеристика психики животных на перцептивной стадии высшего уровня

Общая характеристика психики животных на стадии интеллекта по А. Н. Леонтьеву или высшего уровня стадии перцептивной психики по К. Э. Фабри

Общая характеристика психического отражения на стадии сознания

Типы онтогенеза и уровень развития психики. Закон рекапитуляции, теория диссолюции, концепция системогенеза

Периодизация онтогенеза: революционные и эволюционные периоды

Ювенильный период развития: основные теории и специфика

Проблема врожденного и приобретенного в поведении животного: инстинктивные действия в раннем постнатальном периоде и раннее научение

Этология как одно из направлений изучения психики животных. История развития, задачи и методы этологии. Направления этологических исследований

Понятие поведения. Уровни, этапы, классификации форм поведения

Инстинкт: определение, критерии, наследственность, изменяемость, шаблонность, безошибочность

Закономерности реагирования животных на сигнальные раздражители: понятие сигнальных раздражителей, свойства сигнальных стимулов

Облигатное, неассоциативное, стимул-зависимое научение. Суммарная реакция. Привыкание. Импринтинг. Подражание

Факультативное, ассоциативное, эффект-зависимое научение. Классические и инструментальные условные рефлексы

Когнитивное научение. Латентное научение. Психонервное поведение

Элементарная рассудочная деятельность. Эмпирические законы Л. В. Крушинского. Экстраполяция. Инсайт. Вероятностное прогнозирование

Уровни организации сообществ. Критерии сообщества. Анонимные и индивидуальные сообщества

Факторы организации сообществ. Условия возникновения общественных отношений. Доминирование. Территориальность. Функции доминирования и территориальности

Развитие общения в филогенезе. Потребность в общении. Внутривидовое и межвидовое общение животных

Понятие социального релизера. Язык действий. Язык эмоций

Интеллект и мышление. Критерии интеллекта животных. Способность животных к обобщению и абстракции. Направления изучения элементов мышления у животных

Ориентировочно-исследовательская деятельность животных и человека. Манипулятивная активность. Орудийная деятельность. Продуктивная деятельность животных. Ранний онтогенез поведения и психики детей и детенышей человекообразных обезьян

Проблема сознания и самосознания животных. Критерии сознания

Язык эмоций и проблема происхождения человеческого языка. Коммуникация в природе и специфика языка человека

Виды языков-посредников. Эксперименты по обучению животных языкам-посредника

Этология человека: определение, направления исследований

Проблема биологического и социального в поведении человека. Культурно-историческая теория Л. С. Выготского

Каталитические комплексы для облагораживания высоковязких нефтей (ВВН), топлив, битумов и асфальтосмолисто парафиновых отложений.

В настоящее время ввиду истощения высокопродуктивных залежей на 89%, доля запасов высоковязких нефтей и природных битумов (ВВН и ПБ) возросла до 66%, запасы которых в Республике Татарстан по разным оценкам составляют до 7 млрд. тн.

Доставка заказа на пункт выдачи

Пункты выдачи заказов располагаются в отделениях почтовой связи ФГУП «Почта России». Выдача заказов производится в соответствии с Вашим графиком получения заказов

Развитие и тренировка памяти

Трудно найти человека, который бы ни разу в жизни не жаловался на свою память. Как развить и натренировать тот или иной вид памяти. Эффективность произвольной памяти

Региональная экономика

Лекции. Региональная экономика — это комплексная, интегральная социально-экономическая дисциплина, изучающая закономерности процесса формирования и функционирования (включая управление) социально-экономической системы региона (субъекта Российской Федерации) с учетом исторических, демографических, национальных, религиозных, экологических, политико-правовых, природно-ресурсных особенностей, места и роли в общероссийском и международном разделении труда.

Болезни: этиология и патогенез, патологическая анатомия

Пневмония и ее последствия, лечение. Определение. Патогенез. Патологическая анатомия. Исходы и осложнения. Хронические вирусные болезни. Факторы риска. Язвенные болезни. Болезни печени. Гепатит.

В психологической науке достаточно подробно изучены различные типы научения. На основе работ Л.Б. Ительсона разработана классификация различных типов научения, представленная В.Д. Шадриковым.

Все типы научения можно разделить на два вида: ассоциативное и интеллектуальное.
Характерным для ассоциативного научения является образование связей между определенными элементами реальности, поведения, физиологическим процессами или психической деятельностью на основе смежности этих элементов (физической, психической или функциональной).
Со времен Аристотеля до наших дней основной принцип научения - ассоциация по смежности – формулируется сходным образом. Когда два события повторяются с небольшим интервалом (временная смежность), они ассоциируются друг с другом таким образом, что возникновение одного вызывает в памяти другое. Русский физиолог И.П. Павлов (1849-1936) первым занялся исследованием в лабораторных условиях свойств ассоциативного научения. Он обнаружил, что, хотя звук колокольчика первоначально никак не отражался на поведении собаки, однако, после регулярного звонка в момент кормежки, через некоторое время у собаки вырабатывался условный рефлекс: звонок сам по себе начинал вызывать у нее слюноотделение. Павлов измерял степень научения количеством слюны, выделившейся при звонке, не сопровождавшемся кормежкой. Метод выработки условных рефлексов основан на использовании уже существующей связи между специфической формой поведения (слюноотделением) и неким событием (появлением еды), которое вызывает эту форму поведения. При формировании условного рефлекса в эту цепочку включается нейтральное событие (звонок), которое ассоциируется с событием "естественным" (появлением еды) настолько, что выполняет его функцию.

Психологи подробно исследовали ассоциативное научение методом так называемых парных ассоциаций: вербальные единицы (слова или слоги) заучиваются парами; предъявление впоследствии одного члена пары вызывает вспоминание о другом. Этот тип научения имеет место при овладении иностранным языком: незнакомое слово образует пару со своим эквивалентом на родном языке, и эта пара заучивается до тех пор, пока при предъявлении иностранного слова не будет восприниматься тот смысл, который передает слово на родном языке.

При интеллектуальном научении предметом отражения и усвоения являются существенные связи, структуры и отношения объективной действительности.

Каждый вид научения можно разделить на два подтипа: рефлекторный и когнитивный.

Когда научение выражается в усвоении определенных стимулов и реакций , его относят к рефлекторному; при усвоении определенных знаний и определенных действий говорят о когнитивном научении.
Научение происходит постоянно, в самых различных ситуациях, видах деятельности. В зависимости от пути, которым достигается научение, оно делится на два разных уровня – рефлекторный и когнитивный . На рефлекторном уровне процесс научения носит бессознательный, автоматический характер. Таким путем ребенок научается, например, различать цвета, звук речи, ходить, доставать и перемещать предметы. Сохраняется рефлекторный уровень научения и у взрослого человека, когда он непреднамеренно запоминает отличительные особенности предметов, усваивает новые виды движений.
Но для человека гораздо более характерным является высший, когнитивный уровень научения, который строится на усвоении новых знаний и новых способов действия посредством сознательного наблюдения, экспериментирования, осмысления и рассуждения, упражнения и самоконтроля. Именно наличие когнитивного уровня отличает научение человека от научения животных. Однако не только рефлекторный, но и когнитивный уровень научения не превращается в учение, если он управляется какой-либо иной целью, кроме цели усвоить определенные знания и действия.
Как показали исследования ряда психологов, в ряде случаев стихийное, непреднамеренное научение может оказаться весьма эффективным. Так, например, ребенок лучше запоминает то, что связано с его активной деятельностью и необходимо для ее выполнения, чем то, что он заучивает специально. Однако в целом преимущество оказывается бесспорно на стороне сознательного целенаправленного учения, так как только оно может дать систематизированные и глубокие знания.



Разновидности ассоциативного научения

В каждом подвиде В.Д.Шадриков выделяет несколько классов научения.

1. Ассоциативно-рефлекторное научение разделяется на сенсорное, моторное и сенсомоторное.

§ Сенсорное научение заключается в усвоении новых биологически значимых свойств предметов и явлений окружающего мира.

§ Моторное научение состоит в выработке новых биологически полезных реакций, когда сенсорный компонент реакций является в основном кинестетическим или проприоцептивным, т.е. когда сенсорная информация возникает в самом процессе выполнения движения.

§ Сенсомоторное научение заключается в выработке новых или приспособлении имеющихся реакций к новым условиям восприятия.

2. Ассоциативное когнитивное научение разделяется на научение знаниям, научение навыкам и научение действиям.

§ При научении знаниям человек обнаруживает у предметов новые свойства, имеющие значение для его деятельности или жизнедеятельности, и усваивает их.

§ Научение навыкам заключается в формировании программы действий, которая обеспечивает достижение определенной цели, а также программы регуляции и контроля этих действий.

§ Научение действиям включает в себя научение знаниям и навыкам и соответствует сенсомоторному научению на когнитивном уровне.

Сопоставляя сенсорную и моторную модели научения, Л.Б. Ительсон писал:
"Первая (сенсорная модель) выделяет расширение знаний как движущую задачу научения. Вторая (моторная модель) - расширение программ деятельности как ведущую задачу научения. Сенсорная концепция подчеркивает как условие научения мотивацию деятельности. Моторная - достижение целей деятельности. Из сенсорной концепции следует: чтобы определенные свойства мира были выделены (отражены) психикой учащегося и закреплены в ней, они должны быть значимы для него, т.е. связаны с его потребностями. Из моторной - чтобы программы действий были сформированы и закреплены в психике учащегося, они должны приводить к поставленной цели, т.е. реализовывать его потребности. Первая утверждает: чтобы новые знания усваивались учащимся, он должен "видеть" ("чувствовать") их полезность. Вторая - чтобы новые действия усваивались учащимся, он должен "видеть" ("чувствовать") их успешность.

Из сенсорной концепции вытекает: чтобы происходило научение, необходимо создать у учащегося положительное эмоциональное отношение к поступающей информации. Из моторной вытекает: чтобы происходило научение, необходимо положительное переживание у учащегося при выполнении требуемых действий. Сенсорная концепция предполагает активную познавательную деятельность учащегося: анализ, синтез , абстрагирование и обобщение поступающих чувственных данных. Моторная – активную практическую деятельность учащегося; поиски и испробование подходящих действий, контроль их результатов и сопоставление с целью.
Нетрудно заметить, что две эти концепции не противоречат одна другой, а просто рассматривают разные стороны научения. В центре сенсорной концепции стоит рассмотрение отражательной, а моторной – регуляторной деятельности психики. Первая подчеркивает информационный, познавательный характер научения, вторая - его деятельный целенаправленный характер" (Ительсон Л.Б., 1970. С. 49-50 ).

В приведенной выдержке достаточно ярко показана направленность сенсорной и моторной моделей научения и совершенно справедливо подчеркивается, с одной стороны, ограниченность каждой из них, а с другой – их взаимная дополняемость, так как в любом реальном процессе присутствует как сенсорное , так и моторное научение и можно говорить только об их относительном преобладании.

Ассоциативное научение не исчерпывает всех типов научения. Оно характеризует лишь более простые (хотя и многообразные) типы адаптивной модификации поведения .

Разновидности интеллектуального научения

Более сложные формы научения относятся к интеллектуальному научению , которое, как и ассоциативное, можно разделить на рефлекторное и когнитивное.

Рефлекторное интеллектуальное научение разделяется на научение отношениям, научение с помощью переноса и знаковое научение.

Сущность научения отношениям состоит в выделении и отражении в психике отношений элементов в ситуации, отделении их от абсолютных свойств этих элементов.

Научение с помощью переноса заключается в "удачном использовании применительно к новой ситуации тех навыков и врожденных форм поведения, которыми уже обладает животное". В основе данного типа научения лежат способности выделять отношения и действия.

Знаковое научение связано с выработкой таких форм поведения, при которых "животное реагирует на предмет как на знак , т.е. отвечает не на свойства самого предмета, а на то, что этот предмет обозначает".

У животного интеллектуальное научение представлено в простейших формах, у человека оно является основной формой научения и протекает на когнитивном уровне.

Интеллектуального когнитивного научения разделяется на научение понятиям, научение мышлению и научение умениям.

Научение понятиям заключается в усвоении понятий, отражающих существенные отношения реальности и закрепленных в словах и сочетаниях слов. Через овладение понятиями человек усваивает общественно-исторический опыт предшествующих поколений.

Научение мышлению состоит в "формировании у учащихся умственных действий и их систем, отражающих основные операции, с помощью которых познаются важнейшие отношения реальности". Научение мышлению является предпосылкой для научения понятиям.

Научение умениям заключается в формировании у учащихся способов регулирования своих действий и поведения в соответствии с целью и ситуацией.

В рассмотренной классификации дается достаточно полная характеристика основных типов научения. Однако правомерны следующие замечания.
Во-первых, необходимо уточнить содержание научения мышлению и определить его сущность как овладение учащимся операциями анализа и синтеза , направленными на отражение бытия "в его связях и отношениях, в его многообразных опосредствованиях".

Во-вторых, следует отметить, что при интеллектуальном научении мы имеем дело с образованием связей, но "это существенные необходимые связи, основанные на реальных зависимостях, а не случайные связи на основе смежности в той или иной частной ситуации".



Загрузка...
Top