Навигация
2. Границы научения
При инструментальном научении животное получает подкрепление за совершение какого-нибудь действия. Подкрепление должно быть произведено в некоторой стимульной ситуации. Определенные черты стимульной ситуации будут регулярно сочетаться с подкреплением, создавая таким образом необходимые условия для классической выработки условного рефлекса. Подкрепление, применяемое в опытах по инструментальному обучению, является также потенциальным классическим БС, который автоматически вызовет врожденную совокупность рефлексов. У кур к этим реакциям относится разрывание почвы лапами в поисках пищи, у свиней - рытье земли рылом - реакции, которые станут классическими условными рефлексами в ответ на стимулы, регулярно сопровождающие еду.
Как же тогда обстоит дело с реакциями, произвольно выбираемыми Скиннером и его последователями для подкрепления?
Мур указал, что почти во всех случаях это не просто случайные реакции, а часть репертуара инстинктивного поведения, обычно связанного с вознаграждением. Так, упомянутое толкательное движение, производимое голубем в скиннеровском «кегельбане», составляет неотъемлемую часть пищевого поведения голубя - отбрасывание земли в сторону для обнаружения семян. Если это толкование правильно, то можно ожидать, что голуби, клюющие ключ для получения пищевого вознаграждения, будут проделывать это иначе, чем за вознаграждение в виде воды. Соответствующий фильм о голубях показывает, что это действительно так. Когда студентов, не знающих, какое из подкреплений было дано, просили различать заснятые опыты с использованием корма или воды, они давали правильный ответ в 87% случаев. Для получения пищи птицы производят сильные, резкие удары по ключу открытым клювом. Когда они клюют, чтобы получить воду, клюв закрыт, а прикосновение к ключу более длительное. При этом часто наблюдаются сосущие движения, характерные для питьевого поведения голубя.
Другие данные относятся к феномену, получившему название "autoshaping". Если многократно сочетать освещение ключа и появление пищи, то голуби начинают клевать ключ без какой-либо описанной выше тренировки. Клевание ключа в большом числе опытов по оперантным условным рефлексам вырабатывается не в результате инструментального подкрепления, а непосредственно по Павлову: с зерном сочетается освещенный ключ, и голуби клюют его, как будто это зерно. Это можно продемонстрировать еще очевиднее, если освещение ключа сочетать с подкреплением, для которого клевание не является естественной реакцией голубей, например с половым вознаграждением. Спариваемые самец и самка помещаются в соседних камерах, разделенных падающей дверцей. Один раз в день включается световой стимул, и скользящая дверца поднимается, чтобы самец мог начать ухаживание. После 5-10 проб самцы начинают выполнять условные реакции на световой стимул. Они направляют свое ухаживание на свет и ведут себя так, как будто это самка.
Рис. 2. Клевание ключа голубями для получения корма и воды: А - для получения воды; Б - для получения корма в опыте типа «autoshaping».
Для того чтобы голубь не получил какого-нибудь инструментального подкрепления в опытах такого типа, можно не давать ему пищу в ответ на клевание ключа. Сила павловского условного рефлекса такова, что голуби, у которых наблюдается "autoshaping", все равно продолжают его клевать. Эти и другие эксперименты, использующие "autoshaping", вне всякого сомнения, установили, что сложные виды поведения - питание, питье и ухаживание - можно получить путем классической выработки условного рефлекса. Они говорят также о том, что многие случаи так называемого оперантного поведения, возникающего при инструментальном научении, на самом деле относятся к классическим условным рефлексам. Но это не значит, что надо обязательно отказаться от закона эффекта.
3. Научение избеганию врагов
Реакции избегания представляют собой форму оборонительного поведения, за счет которого животные сводят к минимуму попадание в ситуации, представляющиеся опасными. Стимулы, вызывающие страх, могут быть сигнальными и вызывать реакцию без какого-либо предварительного опыта. Так же могут действовать и стимулы, с которыми реакция страха или избегания образовала условную связь. К вызывающим врожденное поведение избегания относятся стимулы, связанные с хищниками и с ядовитыми растениями и животными, например змеями и грибами. Врожденное поведение избегания весьма неодинаково у разных видов. Оно выражается в оцепенении, в бегстве, поиске укрытия и тигмотаксисе, в предупреждающих сигналах, служащих для отпугивания нападающего или для оповещения других животных. На рис. 3 и 4 приведены некоторые примеры.
Рис. 3. Отпугивающий узор на крыльях бражника, потревоженного потенциальным хищником. Внезапное появление пятен, похожих на глаза, часто отпугивает мелких птиц.
В естественной среде обитания животное, обучающееся избегать хищников посредством проб и ошибок, пережило бы лишь несколько таких проб. Поэтому животные большей частью обладают врожденными защитными реакциями, рефлекторными по своей природе, хотя и изменяемыми научением. Р. Боллс указал, что экспериментатор в опыте по научению избеганию намеренно или в силу устройства аппаратуры выбирает эффективную реакцию избегания, которая будет или не будет совпадать с врожденной реакцией животного. Степень совместимости врожденного и вырабатываемого в эксперименте поведения сильно влияет на легкость, с какой приобретается реакция избегания.
В течение многих лет психологи сообщали о значительных различиях в легкости, с какой животные научаются реакциям избегания. Так, крысы приблизительно за пять проб научаются перебегать из одного ящика в другой, избегая удара током, но им требуются сотни проб, чтобы для избегания тока научиться нажимать на рычаг. Голуби в этих условиях с большим трудом научаются клевать ключ, но с меньшим - нажимать на педаль. Еще один усложняющий фактор - разница врожденных реакций избегания в зависимости от ситуации. Так, в ответ на удар током крысы обычно убегают, когда есть возможность убежать, и замирают, когда ее нет. Если в такой ситуации присутствует какая-то «мишень», например другой представитель этого же вида, действие тока может вызвать агрессивное поведение. Если ситуация требует, чтобы животное приблизилось к стимулу, связанному с током, тогда выработка реакции избегания становится очень трудной. Такое наблюдается, когда крыса должна нажать на рычаг прямо под источником света, предупреждающим о токе. Если же сигнальный свет находится далеко от рычага, выработать условную реакцию гораздо легче. Применение тока в аппарате с открытым пространством продлевает время, которое крысы проводят в тесном соприкосновении со стенкой. Избегая удара током, эти животные быстрее научаются прыгать на возвышение, находящееся рядом со стенкой, чем на расположенное в середине такого аппарата.
Согласно традиционной теории научения, врожденные оборонительные реакции представляют собой БР. Павловский анализ научения такого типа включает два кардинальных положения. Во-первых, успешные реакции избегания тесно связаны с реакциями, которые обычно вызываются неблагоприятным стимулом. Как мы видели, научение избеганию идет гораздо быстрее, если рефлекс, вырабатываемый экспериментатором, совместим с естественной реакцией животного на применяемое «наказание». Мы вкратце проиллюстрируем этот принцип в другом месте.
Второе Павловское положение гласит, что выработка реакции избегания не должна непосредственно зависеть от возможности избегания как такового. Именно применение отрицательного подкрепления усиливает реакцию, вызываемую этим подкреплением. Отсутствие подкрепления, являющееся или не являющееся результатом избегания, не улучшит процесс классической выработки УР. Здесь, однако, стоит указать, что отсутствие подкрепления иногда не оказывает действия, а иногда оказывает сильное влияние на научение избеганию. Так, например, серебряные караси плывут из одного отделения аквариума в другое, когда это избавляет их от удара током, но они плывут с той же готовностью, когда этот удар неизбежен. И напротив, отключение тока служит эффективным подкреплением, заставляющим морских свинок бегать в колесе или крыс перебегать из одного отделения ящика в другое. Эта методика лучше применяемой при классической выработке УР.
Макинтош указывает, что разница между классическим и инструментальным подходами к выработке реакции избегания может быть связана с вопросом о том, сигнализируют ли внешние стимулы об ударе током или о безопасности и образуют ли реакции на эти стимулы адекватные обратные связи у животного. В тех случаях, когда животное избегает тока, выпрыгивая из ящика или убегая от опасного стимула, само избегание отлично от других форм поведения животного и переносит его в иную внешнюю стимульную ситуацию. Впрочем, для непрерывно плавающего карася уплывание в определенное место не очень отличается от обычного поведения. В то же время для неподвижно сидящей крысы убегание туда, где она не получит удара током, представляет собой особую реакцию с ее очевидными последствиями. Поэтому не следует удивляться тому, что крысе легче научиться реакции избегания такого типа, чем нажиму на рычаг.
Крысы, которые могут нажать на рычаг, чтобы избежать удара током и попасть в отделение ящика, где тока никогда не бывает, научаются нажимам быстрее, чем крысы, которые могут нажимать на рычаг, но при этом не получают доступа в такое отделение. Простой нажим на рычаг оставляет животное в более или менее той же внешней стимульной ситуации, что и раньше, а убегание в другое отделение удаляет его от стимула, связанного с током. Научение избеганию идет гораздо эффективнее в перегороженном ящике с одним «электрическим» отделением, чем в таком же ящике с поочередным включением тока в обеих его половинах, вероятно, потому, что в последнем случае нет участка, ассоциирующегося у крыс с безопасностью.
Похожие работы
... человека эволюционно предшествуют некоторые элементы психического поведения у высших животных. К ним относится психонервная деятельность, направляемая воспроизведением образов предыдущего опыта, основанная на образном поведении животного, когда основным действенным стимулом для запускания какого-либо поведенческого акта становится не сам реальный объективный стимул окружающей среды, а «нейронный» ...
... . В результате в дополнение к врожденным, видовым программам поведения в центральной нервной системе постоянно формируются новые, благоприобретаемые, индивидуальные программы, на которых зиждутся процессы научения. Физиологические механизмы этого непрерывного программирования поведения были особенно детально проанализированы П.К.Анохиным и получили свое отражение в его концепции «акцептора ре ...
... концепцию соотношения врожденного и приобретенного в формировании целостного поведенческого акта (концепция так называемых «унитарных реакций»). Наибольшую известность получили его исследования мышления животных. В конце 50-х годов Л. В. Крушинский совместно с сотрудниками своей лаборатории приступил к многоплановому физио-лого-генетическому исследованию зачатков мышления у широкого диапазона ...
... , чем в таком же ящике с поочередным включением тока в обеих его половинах, вероятно, потому, что в последнем случае нет участка, ассоциирующегося у крыс с безопасностью. Научение типа инсайта Идея об участии в научении животного когнитивного процесса имеет долгую историю. Она нашла ясное выражение в работах школы гештальт-психологов, которые считали, что животные способны к инсайту, т.е. что ...
0 комментариев