Отсрочка подкрепления может даже оказать вреднее
воздействие ("А что, разве я сейчас не выгляжу замечательно?"). Мы свято
верим, что сила слов перекроет ошибки во времени подкрепления. Слишком
раннее подкрепление тоже неэффективно. В зоопарке Бронкса служители
замучились с гориллой. Им было нужно, чтобы она выходила в вольер, чтобы
можно было почистить внутреннюю клетку, но она взяла манеру сидеть в
дверном проеме, и, обладая недюжинной силой, не давала закрываться
скользящей двери. Когда же служители клали пищу снаружи или подманивали ее
бананами, горилла либо не обращала на них внимания, либо хватала пищу и
бежала обратно к своей двери, прежде чем ту успевали закрыть.
Дрессировщика, работавшего при зоопарке, попросили разобраться. Он объяснил
служителям, что размахивание бананами и подбрасывание пищи было попыткой
подкрепить действие, которое еще не совершилось. Это называется
взяточничеством. Надо было не замечать животное, пока оно сидело в дверях,
но подкреплять пищей, если оно выйдет оттуда самостоятельно. Проблема была
решена.
Мне кажется, что иногда и детей мы подкрепляем слишком рано, находясь под
ложным впечатлением, будто мы их подбадриваем ("Молодец, хорошо, ты уже
почти все сделала правильно"). Возможно, при этом мы подкрепляем попытки.
Но существует разница между попыткой сделать что-то и выполнением этого.
Причитания типа "я не могу" иногда отражают фактическое положение вещей, но
они могут являться и признаками того, что часто подкреплялись просто
попытки. Вообще, подкрепление поведения, которое еще не совершилось, -
подарками, обещаниями, комплиментами или чем-нибудь в этом роде - ни
капельки не подкрепляет это поведение. Если что-то и подкрепляется, так это
поведение, совершающееся в данное время: вероятнее всего - выпрашивание
подкрепления. Соблюдение времени очень важно и при обучении с отрицательным
подкреплением. Лошадь учится поворачивать налево, когда тянут за левый
повод, но только если после поворота натяжение ослабевает. Прекращение
натяжения является подкреплением. Вы садитесь на лошадь, пришпориваете ее,
и она движется вперед - тогда вам надо перестать ее пришпоривать (если,
конечно, вы не хотите, чтобы она двигалась быстрее). Начинающие наездники
часто тычут лошадь в бока непрерывно, как будто шпоры это своего рода
педаль газа в автомобиле, необходимая для движения. Пришпоривание не
прекращается и тем самым не несет никакой информации для лошади. Так в
школах верховой езды появляются лошади с железными боками, которые
передвигаются черепашьим шагом независимо от того, как часто их
пришпоривают.
То же происходит и с людьми, к которым постоянно придираются и бранят
родители, начальство или учителя. Если отрицательное подкрепление не
прекращается в момент достижения желаемых результатов, то оно не является
подкреплением и не несет информации. Оно становится как буквально, так и в
терминах теории информации "шумом".
Когда я смотрю по телевизору футбол или бейсбол, я всегда поражаюсь
замечательной своевременности подкреплений, вновь и вновь получаемых
игроками. Как только забивают гол или бегун пересекает финишную линию, рев
толпы сигнализирует полное одобрение; а только посмотрите на бешеный обмен
взаимоподкреплений игроков в тот момент, когда счет открыт или игра
выиграна. С артистами, особенно с киноактерами, дело обстоит совершенно
иначе. Даже на сцене аплодисменты раздаются после того, как работа
кончается. У артистов кино не существует своевременного подкрепления, за
исключением редкого отзыва режиссера или оператора об их работе или
рукопожатия; письма поклонников и положительные рецензии, приходящие спустя
недели и месяцы, бледнеют в сравнении с неистовством американского стадиона
в минуту успеха. Нет ничего удивительного, что некоторые звезды кино
проявляют болезненную страсть к низкой лести, и сенсациям; работа может
совершенно не удовлетворять, если подкрепления, даже самые блестящие,
всегда опаздывают.
Величина подкрепления
Начинающие тренеры, использующие пищевое подкрепление при работе с
животными, часто не знают, какова должна быть величина каждого
подкрепления. Ответ таков: чем меньше, тем лучше. Чем меньше подкрепление,
тем быстрее животное съест его. Это не только экономит время, но и
позволяет дать большее количество подкреплений за один сеанс, прежде чем
животное насытиться. В 1979 г. Национальный зоопарк в Вашингтоне, штат
Колумбия, пригласил меня в качестве консультанта для обучения группы
работников зоопарка технике положительного подкрепления. Одна из
смотрительниц в моей группе жаловалась, что обучение панды продвигается у
нее очень медленно. Мне показалось это странным, потому что интуитивно я
чувствовала, что панды - эти большие, прожорливые, активные животные -
должны легко поддаваться обучению с пищевым подкреплением. Я понаблюдала за
ее занятиями и обнаружила, что, когда смотрительнице удавалось добиться
какого-либо движения, она давала панде целую морковку. Панда долго
смаковала каждую морковку, поэтому в течение пятнадцати минут отведенного
ей драгоценного времени она зарабатывала только три подкрепления (а кроме
того, морковь ей надоедала). Один ломтик моркови на подкрепление был бы
лучше.
Вообще, подкрепление величиной в один глоток животного вполне достаточно
для поддержания его заинтересованности - одно-два зернышка для цыпленка,
кубик мяса в 6 мм для кошки, половина яблока для слона. Особо любимой пищи
можно давать и еще меньше - например чайную ложку зерна для лошади.
Служители Национального зоопарка обучали белых медведей многим полезным
вещам, таким, как переход по команде в другую клетку, используя изюминки.
Основное правило дрессировщика заключается в том, что если вы собираетесь
провести в день одно занятие, то можете рассчитывать на хорошую работу
животного примерно за четверть его дневного рациона, остальное дается после
окончания работы. Если же вам надо провести три или четыре занятия в день,
то дневную порцию пищи надо разделить примерно на восемьдесят частей и за
один сеанс давать двадцать или тридцать. Восемьдесят подкреплений, видимо,
являются максимумом, способным заинтересовать субъекта в течение дня.
(Может быть, поэтому слайдовая кассета содержит восемьдесят слайдов; по
крайней мере, когда лектор просит демонстратора показать вторую кассету
слайдов, я тяжело вздыхаю.)
Размер подкрепления зависит также от сложности задачи. В океанариуме
"Жизнь моря" мы сочли необходимым давать каждому [дельфину] по большой
макрели за их олимпийские 6-7-метровые вертикальные прыжки.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51
воздействие ("А что, разве я сейчас не выгляжу замечательно?"). Мы свято
верим, что сила слов перекроет ошибки во времени подкрепления. Слишком
раннее подкрепление тоже неэффективно. В зоопарке Бронкса служители
замучились с гориллой. Им было нужно, чтобы она выходила в вольер, чтобы
можно было почистить внутреннюю клетку, но она взяла манеру сидеть в
дверном проеме, и, обладая недюжинной силой, не давала закрываться
скользящей двери. Когда же служители клали пищу снаружи или подманивали ее
бананами, горилла либо не обращала на них внимания, либо хватала пищу и
бежала обратно к своей двери, прежде чем ту успевали закрыть.
Дрессировщика, работавшего при зоопарке, попросили разобраться. Он объяснил
служителям, что размахивание бананами и подбрасывание пищи было попыткой
подкрепить действие, которое еще не совершилось. Это называется
взяточничеством. Надо было не замечать животное, пока оно сидело в дверях,
но подкреплять пищей, если оно выйдет оттуда самостоятельно. Проблема была
решена.
Мне кажется, что иногда и детей мы подкрепляем слишком рано, находясь под
ложным впечатлением, будто мы их подбадриваем ("Молодец, хорошо, ты уже
почти все сделала правильно"). Возможно, при этом мы подкрепляем попытки.
Но существует разница между попыткой сделать что-то и выполнением этого.
Причитания типа "я не могу" иногда отражают фактическое положение вещей, но
они могут являться и признаками того, что часто подкреплялись просто
попытки. Вообще, подкрепление поведения, которое еще не совершилось, -
подарками, обещаниями, комплиментами или чем-нибудь в этом роде - ни
капельки не подкрепляет это поведение. Если что-то и подкрепляется, так это
поведение, совершающееся в данное время: вероятнее всего - выпрашивание
подкрепления. Соблюдение времени очень важно и при обучении с отрицательным
подкреплением. Лошадь учится поворачивать налево, когда тянут за левый
повод, но только если после поворота натяжение ослабевает. Прекращение
натяжения является подкреплением. Вы садитесь на лошадь, пришпориваете ее,
и она движется вперед - тогда вам надо перестать ее пришпоривать (если,
конечно, вы не хотите, чтобы она двигалась быстрее). Начинающие наездники
часто тычут лошадь в бока непрерывно, как будто шпоры это своего рода
педаль газа в автомобиле, необходимая для движения. Пришпоривание не
прекращается и тем самым не несет никакой информации для лошади. Так в
школах верховой езды появляются лошади с железными боками, которые
передвигаются черепашьим шагом независимо от того, как часто их
пришпоривают.
То же происходит и с людьми, к которым постоянно придираются и бранят
родители, начальство или учителя. Если отрицательное подкрепление не
прекращается в момент достижения желаемых результатов, то оно не является
подкреплением и не несет информации. Оно становится как буквально, так и в
терминах теории информации "шумом".
Когда я смотрю по телевизору футбол или бейсбол, я всегда поражаюсь
замечательной своевременности подкреплений, вновь и вновь получаемых
игроками. Как только забивают гол или бегун пересекает финишную линию, рев
толпы сигнализирует полное одобрение; а только посмотрите на бешеный обмен
взаимоподкреплений игроков в тот момент, когда счет открыт или игра
выиграна. С артистами, особенно с киноактерами, дело обстоит совершенно
иначе. Даже на сцене аплодисменты раздаются после того, как работа
кончается. У артистов кино не существует своевременного подкрепления, за
исключением редкого отзыва режиссера или оператора об их работе или
рукопожатия; письма поклонников и положительные рецензии, приходящие спустя
недели и месяцы, бледнеют в сравнении с неистовством американского стадиона
в минуту успеха. Нет ничего удивительного, что некоторые звезды кино
проявляют болезненную страсть к низкой лести, и сенсациям; работа может
совершенно не удовлетворять, если подкрепления, даже самые блестящие,
всегда опаздывают.
Величина подкрепления
Начинающие тренеры, использующие пищевое подкрепление при работе с
животными, часто не знают, какова должна быть величина каждого
подкрепления. Ответ таков: чем меньше, тем лучше. Чем меньше подкрепление,
тем быстрее животное съест его. Это не только экономит время, но и
позволяет дать большее количество подкреплений за один сеанс, прежде чем
животное насытиться. В 1979 г. Национальный зоопарк в Вашингтоне, штат
Колумбия, пригласил меня в качестве консультанта для обучения группы
работников зоопарка технике положительного подкрепления. Одна из
смотрительниц в моей группе жаловалась, что обучение панды продвигается у
нее очень медленно. Мне показалось это странным, потому что интуитивно я
чувствовала, что панды - эти большие, прожорливые, активные животные -
должны легко поддаваться обучению с пищевым подкреплением. Я понаблюдала за
ее занятиями и обнаружила, что, когда смотрительнице удавалось добиться
какого-либо движения, она давала панде целую морковку. Панда долго
смаковала каждую морковку, поэтому в течение пятнадцати минут отведенного
ей драгоценного времени она зарабатывала только три подкрепления (а кроме
того, морковь ей надоедала). Один ломтик моркови на подкрепление был бы
лучше.
Вообще, подкрепление величиной в один глоток животного вполне достаточно
для поддержания его заинтересованности - одно-два зернышка для цыпленка,
кубик мяса в 6 мм для кошки, половина яблока для слона. Особо любимой пищи
можно давать и еще меньше - например чайную ложку зерна для лошади.
Служители Национального зоопарка обучали белых медведей многим полезным
вещам, таким, как переход по команде в другую клетку, используя изюминки.
Основное правило дрессировщика заключается в том, что если вы собираетесь
провести в день одно занятие, то можете рассчитывать на хорошую работу
животного примерно за четверть его дневного рациона, остальное дается после
окончания работы. Если же вам надо провести три или четыре занятия в день,
то дневную порцию пищи надо разделить примерно на восемьдесят частей и за
один сеанс давать двадцать или тридцать. Восемьдесят подкреплений, видимо,
являются максимумом, способным заинтересовать субъекта в течение дня.
(Может быть, поэтому слайдовая кассета содержит восемьдесят слайдов; по
крайней мере, когда лектор просит демонстратора показать вторую кассету
слайдов, я тяжело вздыхаю.)
Размер подкрепления зависит также от сложности задачи. В океанариуме
"Жизнь моря" мы сочли необходимым давать каждому [дельфину] по большой
макрели за их олимпийские 6-7-метровые вертикальные прыжки.
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51