    “словным  стимулом - выученным сигналом может быть все, абсолютно  все,
что  может быть  воспринЯто.  ”лаги, свет, слова,  прикосновениЯ,  вибрациЯ,
хлопки  пробок шампанского  -  короче  говорЯ,  безразлично, какой сигнал вы
используете Љоль скоро  субъект может воспринимать его,  сигнал  может  быть
использован длЯ вызова выученного поведениЯ.
     „ельфинов  обычно тренируют  с помощью воспринимаемых зрением сигналов,
руки, но Я знаю одного слепого  дельфина, который выучил много разных  типов
поведениЯ  в  ответ  на  различные  прикосновениЯ.  Џастушьих  собак  обычно
дрессируют с  помощью  сигналов,  поданных рукой  и голосом. Ћднако  в Ќовой
‡еландии с ее широкими просторами, где собака может находитьсЯ очень далеко,
     в качестве условного сигнала  используют пронзительные свистки, которые
слышны на большем расстоЯнии, чем голос. Љогда новозеландский пастух продает
такую  собаку, покупателем  может оказатьсЯ  человек, живущий за много миль;
так  как свистки  невозможно записать  на бумаге,  то старый хозЯин  обучает
нового командам по телефону.
     “  рыб  можно  выработать условный  рефлекс на звуки или свет -  мы все
знаем,  как аквариумные рыбки устремлЯютсЯ к поверхности, если  постучать по
стеклу или включить свет, Ђ  человеческие существа могут выработать условные
свЯзи практически на все что угодно.
     ‚ тренировочной ситуации полезно, чтобы длЯ  всех субъектов были одни и
те  же ключи и сигналы, чтобы не только дрессировщик, но и другие люди могли
вызывать  данное поведение.  Џоэтому дрессировщики склонны строго  следовать
традициЯм в использовании условных стимулов. ‚о всем мире лошади  под седлом
начинают движение, когда вы толкаете их пЯтками в бока,
     и останавливаютсЯ, когда вы  натЯгиваете поводьЯ. ‚ерблюды  в  зоопарке
Ѓронкс ложатсЯ, когда
     слышат команду "Љаш!", даже  если рЯдом  с ними никого нет,  включаЯ их
дрессировщика,  говорЯщего  по-арабски;  и  любой  человек  знает,  что надо
сказать, чтобы верблюд лег.
     € то, что живущих в Ќью-‰орке верблюдов можно с тем же успехом  обучить
ложитьсЯ при словах "‘покойно, крошка!", не имеет ни малейшего значениЯ.
     Џоэтому-то  профессиональные дрессировщики не могут понЯть,  что многие
условные стимулы выбраны произвольно. Ћднажды в платной конюшне Я работала с
молодой  лошадью  на корде, обучаЯ  ее  команде  "‚перед!".  ’ренер  конюшни
смотрел на это с  отвращением и  наконец  сказал: "’ак  ничего не  выйдет  -
лошади  не  понимают "‚перед!",  надо цокать". Џотом взЯл  веревку у менЯ из
рук,  сказал:  "’цо-тцо"  и  стеганул  жеребенка по  крупу  свободным концов
веревки, что  естественно тотчас  же вызвало движение  вперед.  "ЏонЯтно?" -
сказал он, считаЯ свои слова доказанными.
     џ понЯла. ‘  тех пор,  воспитываЯ моих  пони, Я обучала их слушатьсЯ не
только моих команд,
     но  и любой  возможной системы  понуканий, окриков, применЯемой другими
дрессировщиками.
     ќто избавило менЯ  от  неприЯтностей и заставило говорить обо мне как о
подающем надежды дрессировщике-любителе. Џо крайней мере мне не  приходилось
переделывать моих сигналов!
     Ћбучить пони двум системам команд не только  возможно, но и легко. ‚ то
времЯ,  как на  каждый отдельный сигнал вам надо получать только  какое-либо
одно поведение, вполне достижимо  получение одного и  того  же  поведениЯ на
несколько  условных  сигналов.  Ќапример, в переполненном  людьми  помещении
оратор может  потребовать тишины, воскликнув:  "’ихо!", или встать и, поднЯв
руку, жестом призвать  к молчанию. Ђ  если присутствующие шумЯт  и при  этом
находЯтсЯ  в  некотором  подпитии  и, следовательно,  отличаютсЯ  рассеЯнным
вниманием,  поможет  позвЯкивание   ложкой   по  стакану.   Њы  все  обучены
осуществлЯть данное  поведение в  ответ  на  любой из, по крайней мере, трех
этих стимулов.

     ‚ведение  второго условного стимула длЯ выученного поведениЯ называетсЯ
переносом стимулов. —тобы добитьсЯ переноса, вы предъЯвлЯете старый стимул -
допустим, команду, поданную
     голосом,  -  как всегда, и  новую  команду -  скажем,  сигнал, поданный
рукой, - и подкреплЯете ответ;
     затем  постепенно делаете  старый  стимул  все менее и менее заметным и
одновременно привлекаете внимание к новому, делаЯ его очень выраженным, пока
на новый стимул не будете получать столь же хороший ответ, даже тогда, когда
старый стимул не  предъЯвлЯетсЯ вовсе.  Ћбычно этот  процесс  идет несколько
быстрее, чем выработка ответа на первоначальный стимул; когда уже выработано
"‚ыполнЯй  это действие"  и "‚ыполнЯй это действие  по  команде",  то  легче
выработать "‚ыполнЯй это действие также по другой команде".


     €нтенсивность сигнала и стирание стимулов

     Ќе  существует  определенных  требований  к  интенсивности  и  величине
условного сигнала,  вызывающего  ответ. Џервичные, или безусловные, стимулы,
дают  градуальный  ответ в зависимости  от интенсивности: реакциЯ на резкий,
колющий удар  сильнее, чем на булавочный укол, и  чем громче  внезапный шум,
тем сильнее мы вздрогнем.  Ћднако условному стимулу достаточно быть  узнану,
чтобы вызвать полный ответ. ‚ы видите красный свет и  останавливаете машину;
быстрее или медленнее вы это делаете не зависит от размера светофора. „о тех
пор, пока вы распознаете сигнал, вы знаете,  что делать. Џоэтому, как только
стимул заучен, возможно не  только получить его перенос, но также постепенно
его уменьшать, пока он не станет едва различим, но по-прежнему  будет давать
те же результаты. ‚озможен случай,  когда вы можете  получать результаты при
таких слабых
     сигналах,   которые   не  видны  постороннему   глазу.  ќто  называетсЯ
"стирание" стимулов.
     Њы  пользуемсЯ стиранием  постоЯнно: то, что поначалу должно быть очень
массированньм стимулом ("„ик, нельзЯ сыпать песок на головы другим детЯм", -
говорим мы,  вытаскиваЯ  „ика из песочниц), со временем превращаетсЯ  в чуть
заметный  сигнал (просто поднЯть брови или погрозить пальцем). „рессировщики
животных иногда добиваютсЯ поразительных, просто волшебных результатов
     с помощью стертых стимулов.  Ћдин из самых забавных номеров, которые  Я
видела, проделывал попугай в Џарке диких животных в ‘ан-„иего. Ћн разражалсЯ
истерическим  хохотом в ответ  на чуть заметное движение руки дрессировщика.
Џредставьте себе возможности этого трюка: "Џедро,
     что  ты  думаешь о  шлЯпе этого  человека?"  -  "•а-ха-ха!".  Џоскольку
публика  не  замечает  сигнал,  единственное  выученное  попугаем  поведение
кажетсЯ результатом разумного сардонически-Язвительного ответа на  вопрос; а
на  самом  деле  это  был  четкий  ответ  на  очень  ослабленный  стимул,  а
сардонический  ум, если  и присутствовал, то  принадлежал  дрессировщику,  а
может быть, сценаристу.
     Ћднако лучшие примеры обусловливаниЯ, стираниЯ и переноса  стимулов мне
приходилось наблюдать не в мире дрессированных  животных,  а  на  репетициЯх
симфонических оркестров.
     Ѓудучи   певцом-любителем,  Я  занималась   в   нескольких  оперных   и
симфонических хорах,  которые  часто  управлЯлись  заезжими дирижерами. ‚ то
времЯ  как многие из сигналов, которые подают дирижеры  музыкантам, ЯвлЯютсЯ
более  или  менее  стандартизованными,  у  каждого  из  дирижеров есть  свои
собственные сигналы,  и их  значение должно быть усвоено  в  очень  короткое
времЯ - времЯ
     на  репетицию часто лишь  немногим  превосходит времЯ  на  выступление.
Ћднажды  на репетиции симфонии Њалера "‚оскрешение", как  раз в тот  момент,
когда басы собирались вступить с обычной оглушительной силой, Я увидела, как
дирижер  предъЯвил  безусловный сигнал, предупреждавший: "‚ступайте  мЯгче",
изобразив на  лице страшную тревогу, пригнувшись  к  земле  и  заслонив лицо
рукой, как бы защищаЯсь от  удара. ‚се понЯли смысл переданного сообщениЯ, и
в  следующие  несколько  минут  дирижер  смог  ослабить сигнал  и  уменьшить
интенсивность звучаниЯ всех частей хора
     с   помощью   предостерегающего   взглЯда,  легкого   движениЯ   спины,
имитирующего  припадание к земле,  или чуть заметного  отголоска от прежнего
жеста,  и, наконец,  только  вздрагивание  плеч.  ‘толь  же  часто  дирижеры
осуществлЯют   перенос   стимулов,    сочетаЯ   какой-либо   известный   или
самоочевидный жест - скажем, поднЯтие ладони кверху длЯ обозначениЯ "ѓромче"
-  с незнакомым жестом,  таким, как  присущий  только ему наклон  головы или
поворот  тела - однажды, сидЯ  слева от  дирижера среди альтов, Я  наблюдала
дирижерский жест,  управлЯющий  громкостью  звучаниЯ альтов  с помощью левой
брови.
     Ћдним из  результатов введениЯ  управлениЯ с  помощью стимулов ЯвлЯетсЯ
усиление вниманиЯ
     субъекта,   необходимое,  если  он   хочет  получить  подкрепление   за
правильный ответ, особенно, если стимулы подвергаютсЯ стиранию.  Ѓывает, что
субъект способен воспринЯть столь слабые сигналы,
     в  которых  не  отдает  себе  отчета  сам  дрессировщик,  подающий  их.
Љлассический  пример этого - “мный ѓанс, лошадь, жившаЯ в ѓермании. ќто было
в  начале  века; ее считали гениальной.  “дарами  копыт  она  могла считать,
производить  арифметические  действиЯ,  складывать  из  букв  слова  и  даже
извлекать   квадратные  корни;  правильные  ответы,  конечно,  подкреплЯлись
лакомством. •озЯин,
     в прошлом школьный  учитель, был  совершенно уверен,  что обучил лошадь
читать, думать, заниматьсЯ математикой и вступать в общение. € действительно
лошадь "отвечала" на  вопросы даже в  отсутствие хозЯина. Њногие ученые мужи
приезжали в  Ѓерлин изучать “много  ѓанса и убеждались в его гениальности. €
лишь  одному  из психологов удалось показать,  что лошадь  ориентируетсЯ  на
какой-то  сигнал, и, если никто из  присутствующих  не  знает ответа,  удары
копыта  носЯт  неопределенный  характер.  Џотребовалось  длительное времЯ  и
дальнейшее исследование, против которого восставали те,  кто  был  убежден в
гениальности  лошади; чтобы  показать,  что  сигналом  к прекращению  ударов
копыта  был  легкий  подъем  головы  хозЯина  или  любого другого  человека,
задающего  вопрос,  когда  достигалось   правильное  число,  это   движение,
первоначально усиливаемое широкополой шлЯпой, которую носил  учитель, теперь
было столь малым, что его почти не было видно (никому,  кроме “много ѓанса),
но  оно почти не  поддавалось подавлению  произвольным  усилием. ‚от поэтому
лошадь  могла  ориентироватьсЯ, когда прекращать удары копытом, наблюдаЯ  за
любым  человеком,  а  не  только  за  хозЯином. ”еномен  “много  ѓанса  стал
нарицательным  длЯ  любого случаЯ,  когда  внешне  поразительное  поведение,
начинаЯ  от разума животного,  кончаЯ психическими  ЯвлениЯми, на самом деле
управлЯетсЯ  какими-либо  мельчайшими  или стертыми  проЯвлениЯми  поведениЯ
экспериментатора, ставшими условными стимулами длЯ субъекта.


     “словные стимулы, вызывающие отвращение

     …динственным  случаем,  где сила  условного стимула, по-видимому, имеет
значение, ЯвлЯетсЯ обычно дрессировка  домашних животных  - рывок за поводьЯ
или  привЯзь,  легкий  удар по бокам  лошади  -  все  это  размытый  вариант
первоначального  безусловного стимула,  резкого рывка  или  толчка, сильного
удара рукой, которые  вызывают ответ, не требующий  обучениЯ. Џоэтому,  если
слабый  стимул  не действует,  создаетсЯ впечатление, что  ответ возрастает,
если вы усилите стимул. Ћднако попытки осуществить это на практике встречают
большие затруднениЯ.
     ‚ыученные сигналы и первоначальные стимулы совершенно различны по своей
природе, а новички обычно  это  не  учитывают. …сли они не  получают ответа,
скажем,  на  легкий  рывок,  они дергают  чуть  сильнее,  затем  еще немного
сильнее, и все совершенно без пользы, так как лошадь или собака
     с той же возрастающей силой тЯнут в другую сторону.
     Џрофессиональные дрессировщики имеют обыкновение работать  над сигналом
и применЯть силу раздельно; они дают условный стимул, и если животное ему не
повинуетсЯ,
     они,   минуЯ  все  градации,  немедленно   вызывают   нужное  поведение
чрезвычайно  сильным  неприЯтным стимулом, способным "освежить  памЯть", как
выражаетсЯ один дрессировщик лошадей.  ’акую же функцию выполнЯет  парфорс в
дрессировке  собак.  Џри  умении  даже небольшой  человек,  используЯ  такой
ошейник,  может  добитьсЯ такого  рывка,  который  будет  достаточен,  чтобы
свалить
     с ног датского дога. €меЯ в запасе  эти первичные стимулы, можно быстро
получить хороший ответ
     на очень слабые рывки, и, как замечает английскаЯ дрессировщица Ѓарбара
‚удхаус, это в  конечном счете гораздо лучше, чем постоЯнно дергать и тЯнуть
за шею бедное животное к каким-то промежуточным и бессмысленным целЯм.


     ‚ремЯ отставлениЯ

     —тобы добитьсЯ  точности ответа на условный  стимул,  полезно применЯть
прием ограничениЯ  времени отставлениЯ.  „опустим, ваш  подопечный  обучилсЯ
совершать какое-либо действие в ответ
     на условный сигнал, но обычно имеетсЯ некоторый интервал времени  между
предъЯвлением стимула
     и  ответом  субъекта.  ‚ы  пригласили  людей  на  ужин,  и  они  немого
запоздали, или ваш слон после сигнала к остановке постепенно замедлЯет ход и
наконец останавливаетсЯ.
     …сли вы хотите, то,  используЯ ограничение времени отставаниЯ, можете в
процессе тренировки
     так сократить этот интервал, что поведение будет  возникать так быстро,
как это только физически возможно.
     ‚ы начинаете с того, что устанавливаете нормативный интервал, с которым
обычно  наблюдаетсЯ поведение;  затем вы подкреплЯете только  то  поведение,
которое  совершаетсЯ  в течение  этого интервала.  Џоскольку  живые существа
характеризуютсЯ  вариабельностью, некоторые ответы будут выходить за пределы
интервала и за них не будет даватьсЯ подкрепление. Ќапример, если
     вы  подаете ужин точно в назначенное  в приглашении  времЯ, а  не ждете
опоздавших, то они рискуют получить все холодное или застать меньший выбор,
     Љогда вы подобным образом установите временной интервал и будете давать
подкрепление только
     на его  протЯжении, то скоро вы обнаружите,  что постепенно  все ответы
начинают наблюдатьсЯ
     в  его  пределах и ни один не выходит за него.  ’еперь вы снова  можете
подтЯнуть гайки. „остаточно
     ли пЯтнадцати минут,  чтобы семьЯ собралась? Ќачните  подавать  на стол
через двенадцать минут  после того,  как всех позвали, или через десЯть. Љак
быстро вы будете закручивать гайки, должно  быть точно определено; как и при
каждом процессе выработки желательно находитьсЯ в тех пределах,
     в которых наиболее часто наблюдаетсЯ данное поведение.
     †ивотные  и  люди  имеют очень  развитое  чувство времени и чрезвычайно
четко реагируют
     на выработку времени отставаниЯ, но дрессировщик  не  должен полагатьсЯ
на  авось.  Џользуйтесь часами  или  даже  секундомером, если  хотите, чтобы
выработка отставлениЯ работала на вас.
     „лЯ  поведениЯ  ближайших  окружающих, включаЯ  себЯ,  сократите  времЯ
ответа, скажем,  с пЯти  тактов  до двух.  €  конечно, если  вы работаете  с
людьми,  не  обсуждайте   ваши   действиЯ;  вы  не  получите  ничего,  кроме
возражений. Џросто делайте и смотрите, что получаетсЯ.
     ‚  1960 г.  в  океанариуме "†изнь  морЯ"  одним из  наиболее  эффектных
номеров, всегда  привлекавших  внимание,  была  группа  из  шести  небольших
дельфинов, выполнЯвших различные  акробатические трюки в  воздухе синхронно.
Ћни совершали  различные  прыжки  и повороты в ответ на  подводные  звуковые
сигналы.  Џервоначально, когда сигналы только вводились, прыжки,  вращениЯ и
все остальные действиЯ, которые от них требовались, возникали спорадически с
интервалами   пЯтнадцать-двадцать  секунд.  Ќо   использовав  секундомер   и
установив фиксированное отставание,
     мы смогли  снизить времЯ реакции  до двух  с  половиной  секунд. Љаждое
животное  знало, что получить рыбу можно только выскочив в воздух и совершив
нужный прыжок или вращение в течение двух
     с  половиной   секунд  после  начала  сигнала.  ‚  результате  дельфины
располагались  вокруг подводного  источника  звука  навострив уши,  и  когда
включалсЯ   сигнал,  поверхность  бассейна  просто  взрывалась   их  телами,
извергающимисЯ в воздух; это было действительно зрелище. Ћднажды, сидЯ среди
зрителей, Я  была  поражена,  услыхав,  как какой-то человек  профессорского
вида, по-видимому
     психолог,  безапеллЯционно объЯснЯл  своим спутникам,  что единственный
способ, который  мы могли применить, чтобы добитьсЯ такой  реакции, ЯвлЯетсЯ
удар электрического тока.
     ‚  реальной жизни ограничение времени отставаниЯ ЯвлЯетсЯ  попросту тем
временем, которое
     вы считаете нужным ждать, пока просьба или инструкциЯ  будут выполнены.
ђодителей, начальников
     и   учителей,   которые   проЯвлЯют   последовательность   в  выработке
определенного временного
     интервала реакции, обычно  считают хорошими, заслуживающими того, чтобы
с ними иметь дело,
     даже  если  отставание -  временное "окно", в  течение которого  должно
осуществлЯтьсЯ поведение, которое будет подкреплено, - очень короткое.


     Џредвосхищение

     Ќаиболее частым недостатком  в управлЯемом сигналами поведении ЯвлЯетсЯ
предвосхищение:
     как  только  сигнал  усвоен,  субъект так стремитсЯ  продемонстрировать
требуемое поведение,
     что совершает его раньше, чем подаетсЯ сигнал.  ’ермин, описывающий это
проЯвление, заимствован из опережающего поведениЯ у людей  при состЯзаниЯх в
беге - опережаЯ выстрел, фальстарт, ложнаЯ тревога. ‹юди,  которые опережают
указаниЯ  и  просьбы других,  обычно считаютсЯ нетерпеливыми, выскочками или
подобострастными; это очень раздражающаЯ привычка, а вовсе
     не добродетель.
     Ќа   соревнованиЯх   по  выучке   с  доберман-пинчерами  часто   бывают
неприЯтности.  •отЯ эти собаки прекрасно  поддаютсЯ  дрессировке,  они столь
возбудимы, что предвосхищают команды по малейшим
     намекам  и   начинают  работать  прежде,   чем  им  в  действительности
приказывают, терЯЯ при этом
     баллы.  Џредвосхищение ЯвлЯетсЯ  обычной  ошибкой  лошадей,  с  которых
бросают лассо на родео. ЏредполагаетсЯ, что ковбой  и лошадь должны ждать за
барьером, пока не пустЯт бычка,
     но  возбужденнаЯ  лошадь перескакивает  барьер раньше  сигнала.  Љовбой
иногда думает, что у него лошадь с высокими ходовыми качествами, но на самом
деле это просто недостаточно выработанное управление с помощью сигналов.
     „ругой  чрезвычайно  распространенный  случай предвосхищениЯ - офсайт в
американском футболе.  Ћдин из  игроков  так нетерпелив, что продвигаетсЯ на
территорию  другой команды до того, как подан  сигнал игры,  за  что команду
наказывают.
     ‘ практической точки зрениЯ ликвидировать  предвосхищение можно,  вводЯ
тайм-ауты.  …сли  субъект предвосхищает  сигнал, и  если  это  нежелательно,
прекратите всЯкую работу. Ќе давайте сигналов
     и ничего  не  делайте целую  минуту.  Љаждый раз как  субъект  опередит
выстрел, останавливайте  часы.  ‡а  нетерпение  вы наказываете  отставлением
возможности работать.  ќто  вызывает очень эффективное подавление опережениЯ
команды, в  то времЯ  как выговоры, наказание или повторение могут оказатьсЯ
вовсе недейственными.


     ‘тимулы в качестве подкреплениЯ: поведенческие цепи

     Љак  только стимул становитсЯ  условным сигналом, происходит интереснаЯ
вещь: он превращаетсЯ
     в  подкрепление.  ‚спомните  звонок  на  перемену  в  школе.  ‡вонок на
перемену  ЯвлЯетсЯ  сигналом,  условным сигналом, означающим:  "‚ы свободны,
идите  и играйте". Ђ кроме того,  он  воспринимаетсЯ как подкрепление - дети
рады,  когда  слышат его,  и  если  бы  они  смогли  сделать  что-либо, чтоб
заставить его прозвенеть скорее, они бы это сделали. ’еперь представьте себе
звонок на перемену, который  не звонит, если в классе нет тишины. Љо времени
перемены у вас будет очень тихий класс.
     “словный стимул  -  предвестник  подкреплениЯ, и поэтому  он становитсЯ
желаемым событием.  †елаемое событие -  это само по себе уже подкрепление, а
потому  вы с успехом  можете  подкреплЯть поведение,  даваЯ условный  стимул
другого поведениЯ. Ќапример,  Я  вознаграждаю  кошку лакомством,  когда  она
подходит ко мне по команде - она  этому научаетсЯ и  выполнЯет это.  ’еперь,
если Я буду говорить:  "Љо мне" и вознаграждать ее за реакцию всЯкий раз как
увижу ее на камине,
     то  скоро  окажетсЯ,  что  кошка, стремЯсь  получить  лакомство,  будет
забиратьсЯ на камин.
     Љак  вы понимаете,  с  точки  зрениЯ кошки,  она обучает менЯ давать ей
лакомство. „лЯ этого она нашла способ заставлЯть менЯ произносить: "Љо мне".
’еперь допустим, что Я обучаю ее вспрыгивать
     на  камин,  когда  Я  жестом показываю  на него, подкреплЯЯ  правильные
ответы либо пищей, либо командой  "Љо мне". ‡атем Я буду жестом указывать на
камин  всЯкий  раз,  когда: а) Я знаю, что  кошка  голодна и  б)  когда  она
случайно перевернетсЯ через спину...
     џ выработала цепное поведение.
     Џоведенческие цепи - очень распространенное  Явление. ‚ реальной  жизни
мы часто производим серии свЯзанных действий,  состоЯщих из многих отдельных
поведенческих актов. Ќе  надо далеко ходить  за примерами - работа  плотника
или уборка квартиры  - неплохаЯ иллюстрациЯ. Њы ожидаем, что и  наши питомцы
будут  вести себЯ так  же: "Џодойди", "‘Ядь",  "‹Яг", "‘ледуй за мной" и так
далее без перерыва и без видимого подкреплениЯ. ќти длительные рЯды действий
ЯвлЯютсЯ  цепным поведением. ‚ противоположность другим длительным действиЯм
эти  могут выполнЯтьсЯ часами,  сотни  раз без  напрЯжениЯ, без  сбоев,  без
задержек, поскольку каждый акт в действительности
     подкреплЯетсЯ возможностью выполнить  следующее действие цепочки, и так
до заключительного подкреплениЯ выполнением всего дела, всей цепи.
     Ћднако  поведенческие цепи рвутсЯ и поведение  рассыпаетсЯ на элементы,
если в цепочку  вклиниваетсЯ невыученный поведенческий акт, или действие, не
находЯщеесЯ  под  контролем  стимулов.  ‚ы  не  можете  подкрепить  субъекта
сигналом, если он этот сигнал не распознает или
     не  может выполнить то, что  этот сигнал требует.  Ћтсюда следует,  что
цепное поведение следует всегда вырабатывать с конца. Ќачинайте с последнего
действиЯ в цепи, удостоверьтесь, что оно  усвоено  и сигнал к его выполнению
хорошо узнаетсЯ, лишь потом переходите к разучиванию предпоследнего действиЯ
и т.д. Ќапример, если при  заучивании  стихотворениЯ, мелодии,  текста речи,
роли  в  пьесе  вы  разделите  заданиЯ,  скажем, на  пЯть  частей и  начнете
запоминать их в  обратном порЯдке,  с конца - вы всегда будете двигатьсЯ  от
того, что вы знаете слабее, к тому, что знаете
     более  прочно,  от  материала,  в  котором  вы  не  совсем  уверены,  к
материалу,   хорошо   уже   усвоенному,  имеющему  подкреплЯющее   действие.
‡апоминание материала в том порЯдке как он написан и должен воспроизводитьсЯ
приводит к необходимости постоЯнно продиратьсЯ  от знакомой тропы  в сторону
более  трудного  и неизвестного,  что  ЯвлЯетсЯ  неподкреплением.  Џодход  к
запоминанию материала как  к цепному  поведению не  только убыстрЯет процесс
запоминаниЯ, но и делает его более приЯтным.
     Џоведенческие цепи  - это особое понЯтие.  џ часто сама спотыкалась  на
них, чувствуЯ, что надо вернутьсЯ к концу  рЯда, так как Я не могу заставить
животное, ребенка или  себЯ  выполнить  кажущуюсЯ простой последовательность
действий, пока Я не понимала, что пыталась выработать цепное  поведение не с
того  конца.  Љогда  делают  пирог,  то  глазурью  его украшают  в последнюю
очередь, но если
     вы  хотите  обучить  ребенка  получать  удовольствие  от  приготовлениЯ
пирога, начните с того,
     что попросите "помочь" украсить его глазурью.

        Џример цепного поведениЯ: обучение собаки игре в фризби (пчелку)

     Ћдин  мой   нью-йоркский  знакомый  каждый  выходной  ходит  со   своим
золотистым спаниелем
     в –ентральный парк,  чтобы играть в "пчелку".  Ћн рассказывает мне, что
сплошь и  рЯдом  встречает  людей, безуспешно пытающихсЯ обучить своих собак
этой игре. ќто досадно, потому что игра
     в "пчелку" прекрасный способ тренировки собаки в городе. Џо сравнению с
простым  мЯчом  "пчелка"  летит медленнее и  по  неопределенной  траектории,
возможно,  больше  напоминает  реальную  дичь,  заставлЯет  собаку совершать
прыжки в попытках поймать  ее,  что доставлЯет  удовольствие  и хозЯину.  €,
наконец,  игра  в "пчелку"  позволЯет  хозЯину, оставаЯсь  на  одном  месте,
заставлЯть собаку бегать.
     ‹юди жалуютсЯ,  что, когда они бросают "пчелку", собака наблюдает за ее
полетом, продолжаЯ оставатьсЯ на месте, хотЯ  если  ее раззадорить,  то  она
будет прыгать, пытаЯсь  схватить "пчелку", когда та пролетает мимо.  ‚  этой
игре два дрессировочных момента: первый состоит в том, чтобы обучить собаку,
на какое расстоЯние она  должна отбегать за "пчелкой". ‚торой состоит в том,
что даннаЯ  игра - цепное поведение:  сначала  собака гонитсЯ за  "пчелкой",
затем ловит "пчелку", наконец,  несет ее назад хозЯину, чтобы он снова кинул
ее.  Џоэтому  каждому  элементу  этого  сложного  поведениЯ  следует обучать
отдельно,  и  последнее действие  в  цепи,  принос, должно  быть  выработано
первьм.
     ‚ы  можете обучить приносу  с очень  маленьких  расстоЯний даже в доме,
используЯ  предмет, который  легко носить, скажем, старый носок. Ѓольшинство
охотничьих  собак  приносЯт  предметы сами,  без  обучениЯ, собак  некоторых
пород,  таких, как бульдоги, боксеры, необходимо обучать класть  апорт около
хозЯина или отдавать его в руки,  поскольку они предпочитают игры, в которых
бы вещи у них отбирали.
     Љогда по  команде  собака  будет приносить  предметы, обучите ее ловить
"пчелку".  ‘начала  заставьте  собаку  как  можно  сильнее  заинтересоватьсЯ
"пчелкой", двигаЯ ее у самой морды. Џозвольте
     ей несколько раз взЯть игрушку в рот  и добейтесь, чтобы она отдала вам
ее обратно, при этом,
     конечно, бурно  поощрЯйте  ее за возврат.  ‡атем  подбросьте  игрушку в
воздух,  позвольте собаке завладеть ею в прыжке и заставьте  отдать обратно.
‡атем вы тут же снова подбрасываете игрушку
     в  воздух и бурно радуетесь, когда собака ее  поймает.  €  теперь вы на
прЯмой дороге к получению великолепного игрока в "пчелку".
     ђасстоЯние   бросков  постепенно  увеличиваетсЯ,  и  собаке  необходимо
научитьсЯ  следить за "пчелкой" и перемещатьсЯ так,  чтобы  поймать ее.  ќто
требует  тренировки,  поэтому  может   понадобитьсЯ  пара   выходных,  чтобы
заставить собаку отходить на семь-восемь метров. Ќекоторым очень быстрым
     собакам удаетсЯ оказыватьсЯ точно  на месте  и ловить "пчелку" на таком
большом расстоЯнии,
     на  какое  вы   сможете   ее   забросить.  Њне  приходилось   встречать
необыкновенных  собак,  которые  могли  поймать  "пчелку"  на  другом  конце
футбольного полЯ. ‘оздавалось  впечатление, что собаки получают удовольствие
от  точности  своей оценки  места падениЯ.  ЃлестЯщий бег или фантастические
захваты в прыжках с  переворотом,  которые вызывают  восторг  зрителей, тоже
доставлЯют собаке  радость.  ’ем не  менее, поймав "пчелку", собака несет ее
вам, поскольку последнее звено цепи разучено  первым и поскольку именно  это
действие приводит к  подкреплению,  будь то ваша похвала  или другой бросок.
ђазумеетсЯ, если вы будете невнимательны и собака будет систематически
     не получать похвалы или следующего броска не будет, принос подвергнетсЯ
затуханию. € еще, когда собака слишком устает и не хочет больше играть,  она
начинает все хуже и хуже приносить "пчелку", медлит с возвращением и бросает
ее  на полпути. ќто означает,  что пора остановитьсЯ - вы  оба  уже взЯли от
игры все.


     ѓенерализованное управление с помощью стимулов

     ‘  большинством животных приходитсЯ  сначала  немного повозитьсЯ, чтобы
установить управление
     их поведением с помощью стимулов, но часто к  тому времени, как  берете
под контроль сигналов третий или четвертый  тип поведениЯ,  оказываетсЯ, что
животное  как  бы обобщает,  у  него  поЯвлЯетсЯ нечто вроде пониманиЯ идеи.
‚ыучив  три-четыре   условных  поведенческих  акта,  большинство  субъектов,
по-видимому, начинают распознавать определенные событиЯ в качестве сигналов,
каждый из которых означает свой тип поведениЯ, и  что получение подкреплениЯ
зависит от правильного
     распознаваниЯ и  ответа  на сигналы. ‘ этого момента  введение условных
сигналов становитсЯ простым. “ субъекта уже имеетсЯ общаЯ картина, и все что
ему  надлежит  сделать  -  это  научитьсЯ классифицировать новые  сигналы  и
ассоциировать  их  с  правильным  поведением.  …сли  вы,  как  дрессировщик,
поможете питомцу, сделав  это понЯтным, последующее обучение может идти само
собой много быстрее, чем трудные начальные шаги.
     “ людей обобщение происходит еще быстрее. …сли вы вознаградили за ответ
только на одну выученную команду,  люди очень скоро начинают давать ответы и
на  другие  команды,  чтобы  заслужить подкрепление.  Њой друг  ‹и,  учитель
математики шестого класса школы в одном
     из непривилегированных районов Ќью-‰орка, каждый учебный год начинает с
того, что обучает школьников выбрасывать жевательную  резинку, как только он
попросит   их  об  этом.  Ќикакого   принуждениЯ.  Џросто:  "‚се,  внимание,
жевательную резинку изо рта. •орошо! ‘топ! Џодождем,
     у „орин  она еще есть...  великолепно! Ћна ее вынула. Њолодец, „орин!".
Ћн говорит детЯм, что после урока они, могут снова взЯть жевательную резинку
(используЯ  в  качестве  подкреплениЯ слова "Љласс  свободен!").  ќто  может
показатьсЯ фривольным  и  даже  глупым  (поскольку  это стоит ‹и вида жующих
челюстей, чего он  терпеть не может), но ‹и установил, что этот первый  опыт
подготавливает  его  класс  к  тому,   что  выполнение  его  просьб  создает
возможность подкреплениЯ. Љонечно, подобно  хорошему дрессировщику китов, он
использует разнообразные подкреплениЯ, помимо хороших отметок
     и собственной похвалы, включаЯ игры, одобрение сверстников, более ранее
окончание  урока, даже  раздачу жевательной  резинки. €  конечно, сначала он
уделЯет много времени жевательной резинке, вместо  того, чтобы  уделЯть  его
десЯтичным дробЯм, дети думают, что он помешан на резинке.
     Ќо  дети так же придают значение его словам и  считают, что имеет смысл
делать то, что хочет ‹и.
     „ругие учителЯ думают, что у ‹и врожденное умение поддерживать тишину в
классе, а директор считает его хорошим "дисциплинщиком". —то же касаетсЯ ‹и,
то  он  считает  детей  достаточно  сообразительными,  чтобы  обобщить  свои
реакции, и любит их за это. Ђ жевательнаЯ резинка
     тут ни при чем.


     Џровалы преднаучениЯ и вспышки раздражениЯ

     “становление контролЯ над поведением с помощью стимулов часто порождает
интересный феномен, который один из тренеров назвал "провалом преднаучениЯ".
‚ы  сформировали  поведение  и  теперь пытаетесь сделать  его управлЯемым  с
помощью   стимулов.  Ќо   когда  вам  кажетсЯ,  что  субъект  уже  проЯвлЯет
способность отвечать на стимулы, он внезапно перестает отвечать не только на
стимулы, но и вообще давать нужные реакции. Ћн ведет себЯ так, будто никогда
и не слышал о действиЯх, которые вы сформировали.
     ќтот   момент   полностью   обескураживает  тренера.   ‚от   вы   очень
изобретательно  научили  цыпленка  танцевать,  а  теперь  хотите,  чтобы  он
танцевал только, когда  вы поднимаете правую руку.  –ыпленок смотрит на вашу
руку, но не танцует. €ли же он  может стоЯть  на  месте,  когда  вы  подаете
сигналы, и начинать интенсивно отплЯсывать, когда никакого сигнала не было.
     …сли вы построите график этой последовательности, то увидите  постоЯнно
идущую кверху линию, отражающую увеличение процента правильных ответов (т.е.
ответов  на сигналы),  котораЯ  затем резко  снижаетсЯ,  ибо  соответственно
правильность ответов падет до нулЯ (когда вы имеете букет отсутствиЯ ответов
и неправильных ответов). Ћднако если вы продолжаете упорно работать, затем
     внезапно  наступает  озарение:  вдруг,  совершенно  случайно,   субъект
скачком начинает отвечать
     на  команды  действительно  идеально  -  вы  поднимаете руку,  цыпленок
танцует. Џоведение управлЯетсЯ стимулами.
     Ќа мой взглЯд, происходит вот что: сначала субъект выучивает сигнал, не
осознаваЯ  этого,   дрессировщик   видит  только   обнадеживающую  тенденцию
медленного  нарастаниЯ  правильного  выполнениЯ  команд.  Ќо  затем  субъект
замечает (!) сигнал  и  осознает, что на  него надо  как-то  отвечать, чтобы
получить подкрепление. ‚ этот период он уделЯет большее внимание сигналу,
     чем проЯвлЯемому поведению. Љонечно, при этом ответ отсутствует, так же
как и подкрепление.
     Љогда  же,  по  случайному  стечению  обстоЯтельств,  или в  результате
упорства  тренера, субъект однажды осуществит реакцию  при наличии сигнала и
получит подкрепление,  у  него  "возникнет  картина".  ‘  этого  момента  он
"знает", что означает сигнал, и отвечает на него правильно и уверенно.
     џ понимаю, что  говорю по этому  поводу  много  таких слов, как "отдает
себе отчет", "знает"
     в отношении того, что происходит в голове субъекта, которые большинство
психологов считают неприменимыми к животным. Ћднако при дрессировке животных
иногда так оно и есть, что уровень правильных ответов постепенно  нарастает,
хотЯ внешне ничего существенного  не происходит;  трудно  сказать, с  какого
момента,  если  таковой  вообще  существует,  животное  начинает  осмысленно
отдавать себе отчет в том, что делает. Ќо  наличие провала преднаучениЯ,  по
моему мнению, ЯвлЯетсЯ отражением  осознаниЯ, вне зависимости от того, какие
процессы в это  вовлекаютсЯ. џ могла  обнаружить Ярко  выраженное проЯвление
провала  преднаучениЯ  (а следовательно, и  своего  рода сдвиг осознаниЯ)  в
данных ЊишелЯ  “олкера, исследователЯ из ѓавайского университета, ставившего
эксперименты по сенсорному  различению у тунца, одного из наиболее разумного
вида рыб, но в конце концов только рыбы.
     „лЯ субъекта провал преднаучениЯ - времЯ наибольших  огорчений. Њы  все
знаем,  как  расстраивает  борьба  с  тем, что  понимаем  только  наполовину
(общеизвестный  пример  -  математические  понЯтиЯ),  знаЯ  только  то,  что
по-настоЯщему их не понимаем. —асто субъект бывает настолько расстроен,
     что проЯвлЯет гнев и  агрессивность. „ети разражаютсЯ слезами и тычут в
учебник математики карандашом.  „ельфины  многократно выпрыгивают из воды  и
шлепаютсЯ о ее поверхность
     со страшным шумом. ‹ошади размахивают хвостом и норовЯт лЯгнуть. ‘обаки
рычат. „октор “олкер обнаружил, что если при выработке распознаваниЯ стимула
он допускает, что его подопытные тунцы
     совершают ошибки и не получают  подкреплениЯ более сорока пЯти  секунд,
они настолько расстраиваютсЯ, что выпрыгивают из бассейна.
     џ  пришла  к  тому,  что  стала называть  эти  проЯвлениЯ  преднаучениЯ
вспышками  раздражениЯ.  Њне  кажетсЯ,  что  вспышки  раздражениЯ  возникают
потому, что субъект,  считавший себЯ всегда правьм,  вдруг обнаруживает, что
он ошибаетсЯ (раз за разом), а причина этого неЯсна... пока. “ людей вспышки
раздражениЯ в  период преднаучениЯ, по-видимому, часто происходЯт в моменты,
когда  бросаетсЯ   вызов   привычным   представлениЯм,   которых   длительно
придерживались, а  где-то в  глубине  души субъект знает  (!),  что в  новой
информации кроетсЯ  некаЯ  правда. €менно  распознание  того,  что выученное
ранее не  совсем  верно, по-видимому,  и приводит  к неистовым  возражениЯм,
чрезмерным ответам,  которые  намного превышают степень несогласиЯ,  спорам,
скандалам,   которые   могут  казатьсЯ  по  наитию  наиболее  подходЯщими  и
вероЯтными к случаю. €ногда, рассказываЯ
     о подкреплении  в научных кругах, Я вызывала большую, чем предполагала,
враждебность   со  стороны   представителей  других  дисциплин,  начинаЯ  от
психологов, занимающихсЯ познавательными
     процессами, кончаЯ нейрологами и представителЯми высшего духовенства. џ
часто подозреваю,
     что гневные слова ЯвлЯютсЯ симптомом преднаучениЯ.
     џ всегда сожалею, когда вижу приступы плохого  настроениЯ, свЯзанного с
преднаучением, даже
     у  тунцов, потому что при  определенных навыках можно провести субъекта
по пути обучениЯ,
     не вызываЯ столь большого раздражениЯ. Ћднако Я пришла к убеждению, что
вспышки раздражениЯ
     в  период преднаучениЯ  ЯвлЯютсЯ четким индикатором  того, что  вот-вот
произойдет  истинное обучение.  …сли вы  отойдете  в  сторонку и  дадите ему
отшуметь как ливню, то вслед за этим может поЯвитьсЯ радуга.


     Џрименение управлениЯ с помощью сигналов

     Ќикому  не нужно  постоЯнно  управлЯть  или быть управлЯемым  с помощью
условных стимулов или выученных сигналов, живые  существа - это не машины. ‚
действительности реакциЯ на выученный
     сигнал  представлЯет собой  усилие,  причем  такое  усилие,  которое не
только не должно, но и не может поддерживатьсЯ постоЯнно.
     Ѓольшую часть  времени у начальника нет надобности держать  подчиненных
рЯдом.  …сли дети  бездельничают, а вы не очень  спешите, то вы можете  сами
расслабитьсЯ. ‘лужащим, которые
     и так уже работают с полной отдачей, не  нужны приказы и инструкции. Ќи
нас?  самих,  ни  других  людей  не  должны  опутывать  ненужные  правила  и
регламентации: они вызывают только сопротивление.
     ‘овершенно  очевидно,  что  управление с помощью стимулов используетсЯ,
чтобы  дети стали воспитанными,  домашние  животные слушались, персонал  был
надежным и т.д. Ћчень своеобразное управление с помощью стимулов  необходимо
также длЯ многих видов  коллективной  деЯтельности,  таких,  как марширующие
колонны, танцевальные ансамбли, спортивные команды. Ћтвечать
     на  выработанную  систему  выученных  сигналов  доставлЯет определенное
удовольствие,  даже  животным,  по-видимому,  это  нравитсЯ.  џ  думаю,  это
происходит   оттого,   что  стимулы   становЯтсЯ   подкреплениЯми,   как   в
поведенческой цепи, так что, когда овладеваешь всеми типами поведениЯ
     и  сигналами,   осуществление   ответов  имеет   сильное  подкреплЯющее
действие.  ‘ловом,  это  интересно.  Ћтсюда  то  удовольствие  от участиЯ  в
управлЯемой стимулами групповой  деЯтельности, как,  например, согласованный
танец, игра в футбол, хоровое пение и игра в оркестре.
     Љогда  мы  видим  какой-либо  пример  прекрасно  управлЯемого  сигналом
поведениЯ,   начинаЯ   с   фигур   высшего   пилотажа,  исполнЯемых  группой
истребителей, до класса хорошо умеющих вести себЯ детей, то, желаЯ похвалить
их,  используем  понЯтие дисциплины. "Ћни поистине хорошо  дисциплинированы"
или "ќтот учитель знает, как поддерживать дисциплину". Ћднако понЯтие
     о дисциплине  включает  применение наказаниЯ,  которое, как  мы видели,
совершенно не нужно при установлении управлениЯ с помощью стимулов.
     ‚  обиходе  сторонниками  дисциплины  считаютсЯ  инструктор,  родитель,
тренер,  которые  требуют  совершенного  исполнениЯ  и  наказывают за  любое
отклонение,  а   совсем  не  те,  кто  добиваетсЯ  совершенства,  подкреплЯЯ
улучшениЯ в его сторону. € именно поэтому люди,  задавшиесЯ целью установить
"дисциплину", часто пытаютсЯ управлЯть с помощью стимулов на основе: "„елай,
     что  Я  скажу,  иначе..." Џоскольку  субъект должен  ошибитьсЯ  или  не
послушатьсЯ, чтобы узнать,
     что значит "иначе",  и поскольку  тогда  становитсЯ уже  слишком поздно
этого не совершать, то этот распространенный подход вовсе не так хорош.
     €стинное,  изЯщное  управление  сигналами,   установленное  с   помощью
подкреплениЯ, может делать то, что мы  считаем дисциплиной  субъекта. Ћднако
кто должен стать действительно дисциплинированным так это тренер.
     „а,  но с  чего начать? —то,  если вы живете  и  работаете среди людей,
которые   ЯвлЯютсЯ  закоренелыми   неслухами?  ‚от  система   Љарен   Џрайор
эффективного воздействиЯ в тЯжелом случае.
     Љарен Џрайор (видЯ мокрые плавки и полотенце ћного ѓостЯ  на  кушетке в
гостиной): Џожалуйста,  снимите свои мокрые вещи  с  кушетки  и повесьте  на
сушилку.
     ћный ѓость: 0'кей, минуточку.
     Љ.Џ. (подходит к ћ.ѓ. и стоит рЯдом с ним молча).
     ћ.ѓ. ‚ чем дело?
     Љ.Џ. Џожалуйста, снимите  свой мокрый купальник с кушетки и повесьте на
сушилку  (NB: не прибавлЯЯ: "‘ейчас же!", "‘ию  минуту!",  "џ  сказала"  или
что-нибудь в этом роде. џ обучаю  этого человека выполнЯть просьбы с первого
раза,  а не  ждать, когда  сигнал  будет  усилен  дальнейшими  деталЯми  или
угрозами.)
     ћ.ѓ. ‚от еще, если  вы так спешите,  то почему  бы вам  не сделать  это
самим?
     Љ.Џ.  (‹юбезнаЯ улыбка, Ќо  никакого ответа.  џ жду момента  подкрепить
желаемое поведение. Џрепирательство со мной не ЯвлЯетсЯ желаемым поведением,
поэтому Я пренебрегаю им.)
     ћ.ѓ. ‹адно, ладно (‚стает, вдет к кушетке, забирает вещи, бросает их  в
комнату, где стирают.)
     Љ.Џ. ‚ сушилку.
     ћ. ѓ. (‚орчит, поднимает и вешает вещи на сушку.)
     Љ.Џ. (ирокаЯ улыбка, искренне, без издевки) Ѓлагодарю вас!
     ‚ следующий раз, когда мне будет нужно попросить юного гостЯ что-нибудь
сделать,  возможно, мне  потребуетсЯ  всего  лишь  взглЯнуть  на него, чтобы
вызвать действие. Њало-помалу он станет одним
     из тех домочадцев, которые  быстро исполнЯют мои просьбы,  а Я со своей
стороны буду платить ему тем же, буду  выполнЯть то, что он просит, если