умают, что у Ли врожденное умение поддерживать тишину в
классе, а директор считает его хорошим "дисциплинщиком". Что же касается
Ли, то он считает детей достаточно сообразительными, чтобы обобщить свои
реакции, и любит их за это. А жевательная резинка тут ни при чем.

Провалы преднаучения

и вспышки раздражения

Установление контроля над поведением с помощью стимулов часто порождает
интересный феномен, который один из тренеров назвал "провалом
преднаучения". Вы сформировали поведение и теперь пытаетесь сделать его
управляемым с помощью стимулов. Но когда вам кажется, что субъект уже
проявляет способность отвечать на стимулы, он внезапно перестает отвечать
не только на стимулы, но и вообще давать нужные реакции. Он ведет себя так,
будто никогда и не слышал о действиях, которые вы сформировали.

Этот момент полностью обескураживает тренера. Вот вы очень изобретательно
научили цыпленка танцевать, а теперь хотите, чтобы он танцевал только,
когда вы поднимаете правую руку. Цыпленок смотрит на вашу руку, но не
танцует.

Или же он может стоять на месте, когда вы подаете сигналы, и начинать
интенсивно отплясывать, когда никакого сигнала не было.

Если вы построите график этой последовательности, то увидите постоянно
идущую кверху линию, отражающую увеличение процента правильных ответов
(т.е. ответов на сигналы), которая затем резко снижается, ибо
соответственно правильность ответов падет до нуля (когда вы имеете букет
отсутствия ответов и неправильных ответов). Однако если вы продолжаете
упорно работать, затем внезапно наступает озарение: вдруг, совершенно
случайно, субъект скачком начинает отвечать на команды действительно
идеально -- вы поднимаете руку, цыпленок танцует. Поведение управляется
стимулами.

На мой взгляд, происходит вот что: сначала субъект выучивает сигнал, не
осознавая этого, дрессировщик видит только обнадеживающую тенденцию
медленного нарастания правильного выполнения команд. Но затем субъект
замечает (!) сигнал и осознает, что на него надо как-то отвечать, чтобы
получить подкрепление. В этот период он уделяет большее внимание сигналу,
чем проявляемому поведению. Конечно, при этом ответ отсутствует, так же как
и подкрепление. Когда же, по случайному стечению обстоятельств, или в
результате упорства тренера, субъект однажды осуществит реакцию при наличии
сигнала и получит подкрепление, у него "возникнет картина". С этого момента
он "знает", что означает сигнал, и отвечает на него правильно и уверенно.

Я понимаю, что говорю по этому поводу много таких слов, как "отдает себе
отчет", "знает" в отношении того, что происходит в голове субъекта, которые
большинство психологов считают неприменимыми к животным. Однако при
дрессировке животных иногда так оно и есть, что уровень правильных ответов
постепенно нарастает, хотя внешне ничего существенного не происходит;
трудно сказать, с какого момента, если таковой вообще существует, животное
начинает осмысленно отдавать себе отчет в том, что делает. Но наличие
провала преднаучения, по моему мнению, является отражением осознания, вне
зависимости от того, какие процессы в это вовлекаются. Я могла обнаружить
ярко выраженное проявление провала преднаучения (а следовательно, и своего
рода сдвиг осознания) в данных Мишеля Уолкера, исследователя из Гавайского
университета, ставившего эксперименты по сенсорному различению у тунца,
одного из наиболее разумного вида рыб, но в конце концов только рыбы.

Для субъекта провал преднаучения -- время наибольших огорчений. Мы все
знаем, как расстраивает борьба с тем, что понимаем только наполовину
(общеизвестный пример -- математические понятия), зная только то, что
по-настоящему их не понимаем. Часто субъект бывает настолько расстроен, что
проявляет гнев и агрессивность. Дети разражаются слезами и тычут в учебник
математики карандашом. Дельфины многократно выпрыгивают из воды и шлепаются
о ее поверхность со страшным шумом. Лошади размахивают хвостом и норовят
лягнуть. Собаки рычат. Доктор Уолкер обнаружил, что если при выработке
распознавания стимула он допускает, что его подопытные тунцы и совершают
ошибки и не получают подкрепления более сорока пяти секунд, они настолько
расстраиваются, что выпрыгивают из бассейна.

Я пришла к тому, что стала называть эти проявления преднаучения вспышками
раздражения. Мне кажется, что вспышки раздражения возникают потому, что
субъект, считавший себя всегда правым, вдруг обнаруживает, что он ошибается
(раз за разом), а причина этого неясна... пока. У людей вспышки раздражения
в период преднаучения, по-видимому, часто происходят в моменты, когда
бросается вызов привычным представлениям, которых длительно придерживались,
а где-то в глубине души субъект знает (!), что в новой информации кроется
некая правда. Именно распознание того, что выученное ранее не совсем верно,
по-видимому, и приводит к неистовым возражениям, чрезмерным ответам,
которые намного превышают степень несогласия, спорам, скандалам, которые
могут казаться по наитию наиболее подходящими и вероятными к случаю.
Иногда, рассказывая о подкреплении в научных кругах, я вызывала, большую,
чем предполагала, враждебность со стороны представителей других дисциплин,
начиная от психологов, занимающихся познавательными процессами, кончая
нейрологами и представителем высшего духовенства. Я часто подозреваю, что
гневные слова являются симптомом преднаучения.

Я всегда сожалею, когда вижу приступы плохого настроения, связанного с
преднаучением, даже у тунцов, потому что при определенных навыках можно
провести субъекта по пути обучения, не вызывая столь большого раздражения.
Однако я пришла к убеждению, что вспышки раздражения в период преднаучения
являются четким индикатором того, что вот-вот произойдет истинное обучение.
Если вы отойдете в сторонку и дадите ему отшуметь как ливню, то вслед за
этим может появиться радуга.

Применение управления с помощью сигналов

Никому не нужно постоянно управлять или быть управляемым с помощью условных
стимулов или выученных сигналов, живые существа -- это не машины. В
действительности реакция на выученный сигнал представляет собой усилие,
причем такое усилие, которое не только не должно, но и не может
поддерживаться постоянно.

Большую часть времени у начальника нет надобности держать подчиненных
радом. Если дети бездельничают, а вы не очень спешите, то вы можете сами
расслабиться. Служащим, которые и так уже работают с полной отдачей, не
нужны приказы и инструкции. Ни нас самих, ни других людей не должны
опутывать ненужные правила и регламентации: они вызывают только
сопротивление.

Совершенно очевидно, что управление с помощью стимулов используется, чтобы
дети стали воспитанными, домашние животные слушались, персонал был надежным
и т.д.

Очень своеобразное управление с помощью стимулов необходимо также для
многих видов коллективной деятельности, таких, как марширующие колонны,
танцевальные ансамбли, спортивные команды. Отвечать на выработанную систему
выученных сигналов доставляет определенное удовольствие, даже животным,
по-видимому, это нравится. Я думаю, эте происходит оттого, что стимулы
становятся подкреплениями, как в поведенческой цепи, так что, когда
овладеваешь всеми типами поведения и сигналами, осуществление ответов имеет
сильное подкрепляющее действие. Словом, это интересно.

Отсюда то удовольствие от участия в управляемой стимулами групповой
деятельности, как, например, согласованный танец, игра в футбол, хоровое
пение и игра в оркестре.

Когда мы видим какой-либо пример прекрасно управляемого сигналом поведения,
начиная с фигур высшего пилотажа, исполняемых группой истребителей, до
класса хорошо умеющих вести себя детей, то, желая похвалить их, используем
понятие дисциплины. "Они поистине хорошо дисциплинированы" или "Этот
учитель знает, как

поддерживать дисциплину". Однако понятие о дисциплине включает применение
наказания, которое, как мы видели, совершенно не нужно при установлении
управления с помощью стимулов.

В обиходе сторонниками дисциплины считаются инструктор, родитель, тренер,
которые требуют совершенного исполнения и наказывают за любое отклонение, а
совсем не те, кто добивается совершенства, подкрепляя улучшения в его
сторону. И именно поэтому люди, задавшиеся целью установить "дисциплину",
часто пытаются управлять с помощью стимулов на основе: "Делай, что я скажу,
иначе..." Поскольку субъект должен ошибиться или не послушаться, чтобы
узнать, что значит "иначе", и поскольку тогда становится уже слишком поздно
этого не совершать, то этот распространенный подход вовсе не так хорош.

Истинное, изящное управление сигналами, установленное с помощью
подкрепления, может делать то, что мы считаем дисциплиной субъекта. Однако
кто должен стать действительно дисциплинированным так это тренер.

Да, но с чего начать? Что, если вы живете и работаете среди людей, которые
являются закоренелыми неслухами?

Вот система Карен Прайор эффективного воздействия в тяжелом случае.

Карен Прайор (видя мокрые плавки и полотенце Юного Гостя на кушетке в
гостиной): Пожалуйста, снимите свои мокрые вещи с кушетки и повесьте на
сушилку.

Юный Гость: 0'кей, минуточку.

К.П. (подходит к Ю.Г. и стоит рядом с ним молча).

Ю.Г. В чем дело?

К.П. Пожалуйста, снимите свой мокрый купальник с кушетки и повесьте на
сушилку (NB: не прибавляя: "Сейчас же!", "Сию минуту!", "Я сказала" или
что-нибудь в этом роде. Я обучаю этого человека выполнять просьбы с первого
раза, а не ждать, когда сигнал будет усилен дальнейшими деталями ими
угрозами.)

Ю.Г. Вот еще, если вы так спешите, то почему бы вам не сделать это самим?

К.П. (Любезная улыбка, но никакого ответа. Я жду момента подкрепить
желаемое поведение. Препирательство со мной не является желаемым
поведением, поэтому я пренебрегаю им.)

Ю.Г. Ладно, ладно (Встает, идет к кушетке, забирает вещи, бросает их в
комнату, где стирают.)

К.П. В сушилку.

Ю.Г. (Ворчит, поднимает и вешает вещи на сушку.)

К.П. (Широкая улыбка, искренне, без издевки) Благодарю вас!

В следующий раз, когда мне будет нужно попросить юного гостя что-нибудь
сделать, возможно, мне потребуется всего лишь взглянуть на него, чтобы
вызвать действие. Мало-помалу он станет одним из тех домочадцев, которые
быстро исполняют мои просьбы, а я со своей стороны - буду платить ему тем
же, буду выполнять то, что он просит, если это выполнимо, и буду стараться
не просить его делать более, чем он должен.

Знание того, как добиться управления с помощью стимулов, не прибегая к
крику и принуждению, в равной мере облегчает жизнь всем -- воспитателю и
обучаемому. Когда моя дочь Гейл поступила в высшую школу, ей пришлось
ставить учебную пьесу, ежегодно для этого выбирали кого-либо из студентов.

IV. ОТУЧЕНИЕ:

КАК ИСПОЛЬЗОВАТЬ ПОДКРЕПЛЕНИЕ,

ЧТОБЫ ИЗБАВИТЬСЯ ОТ НЕЖЕЛАТЕЛЬНОГО

ПОВЕДЕНИЯ

Итак, вы знаете о том, как сформировать новое поведение, а как вам
избавиться от нежелательного поведения, которое уже имеется?

Люди и животные всегда совершают то, что с нашей точки зрения лучше бы они
не делали. Дети устраивают потасовку и кричат в машине. Собака лает всю
ночь. Кошки дерут когтями мебель. Ваш сосед по комнате всюду разбрасывает
грязные вещи. От кого-нибудь из родственников слышишь постоянные придирки с
требованием телефонных звонков. Все это -- нежелательные виды поведения.

Существует восемь способов избавиться от нежелательного вида поведения.
Всего восемь. И не важно, является ли это поведение укоренившимся, как в
случае неряшливого соседа по комнате, или внезапным, как в случае детей,
бесчинствующих в машине. Все, что вы можете предпринять по этим поводам,
будет вариацией на тему одного из восьми методов.

(Я не касаюсь здесь сложных сочетаний поведенческих проблем, которые
возникают у человека с психическими нарушениями или у непредсказуемо
свирепой собаки; я рассматриваю только отдельные проявления нежелательного
поведения.)

Вот эти восемь методов.

Метод 1. "Убить зверя". Это безусловно подействует. Вам никогда больше не
придется снова иметь дело с данным поведением у данного субъекта.

Метод 2. Наказание. (Предпочитаемо всеми, хотя оно почти никогда не
приносит действительной пользы.)

Метод 3. Отрицательное подкрепление.

Метод 4. Угашение: поведению предоставляется возможность исчезнуть самому
по себе.

Метод 5. Выработка несовместимого поведения. (Этот метод имеет особую
значимость для спортсменов и владельцев домашних животных.)

Метод 6. Добиться, чтобы данное поведение совершалось по сигналу. (В
последующем вы перестанете давать этот сигнал. Это наиболее изощренный
метод, применяемый тренерами дельфинов для того, чтобы избавиться от
нежелательного поведения.)

Метод7. "Формирование отсутствия": подкрепляется все что угодно, кроме
нежелательного поведения. (Вежливый способ превратить неприятных
родственников в приятных.)

Метод 8. Смена мотивации. (Это основной и самый лучший способ.)

Видно, что есть четыре "злых волшебника", или отрицательных метода, и
четыре "добрых волшебника", или методы, использующие положительное
подкрепление. У каждого своя роль. Я собираюсь привести "за" и "против"
каждого из методов по очереди, а также некоторые истории и обстоятельства,
в которых данный метод оказывался действенным.

В рассмотрение каждого метода я включу повторяющийся набор знакомых всем
проблем (шумливая собака, раздражительный спутник жизни и т.д.) и примеры
того, как каждая из проблем может быть решена данным методом.

Я не считаю, что все эти решения применимы. Например, я думаю, что
пригласить ветеринара, чтобы заставить собаку прекратить лаять, перерезав
голосовые связки (метод 1), является отвратительным решением проблемы
собаки, лающей по ночам. Я утверждаю это, несмотря на то, что мой дядя Джон
Слэтер прибег к этому решению, и я вынуждена была согласиться, когда соседи
стали жаловаться на лай его морских львов. Конечно, немногие держат морских
львов у себя в плавательном бассейне.

Вероятно, в этом случае можно было бы найти какой-то другой способ.

Я не могу сказать, какой из восьми методов вам надо выбрать, чтобы
избавиться от данной конкретной помехи. Вы тренер, вам и решать.

Метод 1. "Убить зверя"

Это действует безотказно. С данным субъектом у вас наверняка больше не
возникнет этой поведенческой проблемы. Фактически это широко
распространенный и всеми признаваемый метод борьбы с собаками, загрызающими
овец.



Метод 1 является высшей мерой наказания. Каковы бы ни были моральные или
другие подтексты (аспекты) высшей меры наказания, но если казнить убийцу,
он больше не совершит преступления. Методом 1 избавляются от поведения,
временно или навсегда избавляясь от того, кто его совершает.

Увольнение служащего, развод с супругом, переселение в другую комнату от
неряшливого соседа -- все это метод 1.

С другими людьми могут возникнуть новые проблемы, но того субъекта, чьим
поведением вы сыты по горло, больше нет, и с ним исчезло данное поведение.

Метод 1 довольно жесток, но иногда вполне адекватен, когда проступок
слишком велик для того, чтобы иметь продолжение и не представляется
возможности для его легкого изменения. Допустим, например, что кто-то из
ваших родителей, супруг (или ребенок) бьют вас. Некоторые находят из этого
выход в реальном уничтожении того человека, и в крайних случаях самозащита
может быть оправдана. Уход из дома -- тоже разрешение проблемы методом 1,
но более гуманное.

Однажды у меня была кошка, у которой появилась привычка прокрадываться по
ночам в кухню и мочиться на конфорку плиты. Запах, когда на следующий день
вы, ничего не подозревая, включали одну из этих конфорок, был совершенно
невыносимым. Кошка могла свободно выходить на улицу, я никогда не поймала
ее на месте преступления, а если конфорки закрывались, она мочилась на то,
чем они были закрыты. Я не могла понять побуждающих ее причин, и в конце
концов ее пришлось усыпить. Метод 1.

Существует много простых и широко распространенных модификаций метода 1:
отправить ребенка в его комнату, когда он вмешивается в разговор взрослых;
привязать собаку, чтобы она не гонялась за машинами; посадить того или
иного человека в тюрьму на различный срок. Мы привыкли считать такие меры
наказанием (Метод 2), и они могут рассматриваться, а могут и не
рассматриваться субъектом как наказание, но они являются приемами метода 1.
В их основе лежит то, что они прекращают данное поведение, физически лишая
субъекта возможности его осуществления или избавляясь от присутствия самого
субъекта.

Самое важное, что нужно усвоить относительно метода 1., это то, что он
ничему не учит субъекта. Не допустить того, чтобы субъект проявил данное
поведение -- с помощью изоляции, тюремного заключения, развода, казни на
электрическом стуле, -- не многому учит субъекта. Казалось бы, что человек,
попавший в тюрьму за кражу, дважды подумает, прежде чем снова украсть, но
мы знаем, что очень часто этого не происходит; мы можем быть уверены лишь в
том, что он не стянет ваш телевизор, пока находится под замком.

Поведение не обязательно бывает рассудочным. Если оно уже сложилось как
способ получения подкрепления, и если мотивация и обстоятельства,
вызывающие поведение присутствуют, то весьма вероятно, что оно проявится
снова.

Пока субъект находится в изоляции, никакого переучивания в отношении
данного поведения не происходит; нельзя изменить поведение, которое не
осуществляется. Ребенок, запертый в своей комнате, может быть, чему-нибудь
и научится (вероятно, обижаться и бояться вас), но при этом он не учится
тому, как вступить в вежливый разговор. Отпустите собаку с привязи, и она
тут же снова начнет гоняться за машинами.

Тем не менее у метода 1 есть своя роль. Часто он даст наиболее практичное
решение вопроса, и не обязательно связан с жестокостью. Мы часто пользуемся
своего рода временным лишением свободы, когда у нас нет времени обучать или
наблюдать за субъектом; мы, например, сажаем детей в манеж, и в течение
некоторого непродолжительного времени большинство детей не протестует
против этого. Вице-президент американского клуба собаководства рассказывал
мне, что пользуется проволочным вольером на кухне в своей квартире при
выращивании дома щенков. Щенков надо научить когда и где оправляться, что
достигается тем, что их выносят в подходящее место, прежде чем они сделают
это, и вознаграждают за то, что они там оправились. Но невозможно следить
за щенками постоянно. Этот кинолог помещает своих щенков в клетку на ночь,
когда ему надо уйти или когда он занят; там они могут делать лужи
безнаказанно. Они ничему не учатся, но и не делают луж на ковре.
Положительное подкрепление может происходить только тогда, когда хозяин
присутствует и может дать его, но метод 1 предотвращает неприятности
лишением свободы.

Этот же владелец собак сажал на ночь в клетку, находящихся в доме трех
взрослых терьеров, чтобы воспрепятствовать им вытворять то, что они никогда
не делают днем: скулить под дверью спальни, грызть мебель, перевертывать
корзины с мусором. Собаки совсем не обижались на это и весьма охотно
отправлялись "в постель". Возможно, собакам тоже надо отдохнуть от нас.

Примеры применения метода 1. "Убить зверя"

Метод 1 в некотором смысле решает проблему, но его применимость в каждой
данной ситуации относительна.

 Поведение
                                    Метод воздействия

 Сосед по комнате повсюду
 разбрасывает грязные вещи
                                    Сменить соседа

 Собака на дворе лает всю ночь
                                    Убрать собаку (застрелить,
                                    продать и т.п.)

 Дети слишком шумят в машине
                                    Пусть идут домой пешком. Пусть
                                    едут на автобусе. Поручить возить
                                    их кому-нибудь другому

 Супруг обычно возвращается домой
 в плохом настроени