Не рычите на собаку! Книга о дрессировке людей, животных и самого себя

Например, я могут заставить дельфина прыгать шесть раз подряд, используя подкрепление только при каждом шестом прыжке. Очень скоро дельфин усвоит, что от него требуется. Проблема с фиксированным режимом заключается в том, что более ранние проявления желательного поведения не подкрепляются, поэтому они будут выполняться с минимальными усилиями. В случае с дельфиньими прыжками можно быть уверенным, что первые пять будут довольно посредственными, а по-настоящему качественным только последний, за которым последует подкрепление.

Такой эффект фиксированного режима, по-видимому, влияет на выполнение множества человеческих задач – например, на сборочном конвейере. Для того чтобы получить подкрепление, необходимо проработать определенное количество времени. Но, поскольку подкрепление поступает по фиксированному режиму и не зависит от качества работы, человек, естественно, стремится выполнять минимальный объем работы, достаточный лишь для сохранения рабочего места. В начале рабочего периода показатели могут быть особенно плохими. Выплаты по пятницам – это фиксированное подкрепление, которое приводит к «черному понедельнику».

При работе с дельфинами случайное подкрепление первого или второго прыжка наряду с шестым помогает закрепить поведение. При работе с людьми различные виды поощрительных бонусов или иные подкрепления (премии, к примеру) самым прямым образом связаны с качеством и количеством продукции. Нарушение синхронности обычного подкрепления оказывается весьма эффективным.

С помощью фиксированного или вариативного режимов можно выработать невероятно длинные поведенческие цепочки. Цыпленка можно приучить сто и более раз нажимать на кнопку ради единственного зерна кукурузы. В человеческом обществе мы встречаемся с массой примеров отложенных поощрений. Один психолог как-то пошутил, что самый длительный период неподкрепляемого поведения – это обучение в школе.

В долговременных режимах иногда возникает так называемая точка невозврата. Для цыпленка это определяется обменными процессами: когда на нажатие кнопки он начинает тратить больше энергии, чем может восстановить при получении зернышка, поведение начинает угасать – цена работы падает так низко, что ее просто становится незачем делать. Такое сплошь и рядом происходит с людьми.

При очень длительных интервалах между подкреплениями происходит и еще одно явление, а именно, замедленный старт. В начале процесса цыпленок нажимает на кнопку с одинаковой частотой, поскольку каждое нажатие приближает его к желанному подкреплению. Но исследователи заметили, что по мере увеличения промежутка между подкреплениями цыпленок начинает поведенческую цепочку все позже и позже.

Такое явление называют отсроченным началом поведения с долговременной программой, и оно очень хорошо знакомо всем людям. Когда нам предстоит длительная работа – заполнение налоговой декларации или уборка в гараже, – мы придумываем для себя массу оправданий для того, чтобы не приступать к ней прямо сейчас. Иногда даже написание письма является для нас долговременной программой. Стоит нам начать, и мы справляемся с задачей вполне неплохо. Но, боже мой, до чего же трудно заставить себя сесть к столу и начать писать!

Джеймсу Терберу было так трудно начинать статью, что он порой обманывал жену, которая (что и неудивительно) заставляла его писать, потому что только так они могли оплатить арендную плату за жилье. Тербер уходил в свой кабинет и целое утро лежал на диване, держа книгу в одной руке, а другой рукой случайным образом нажимая на кнопки пишущей машинки. Желание отсрочить неприятный момент начала длительной работы оказывается гораздо сильнее перспективы получения положительного денежного подкрепления. А постукивание по клавишам пишущей машинки избавляло Тербера от отрицательного подкрепления, то есть от упреков жены.

Для того чтобы преодолеть это явление, необходимо установить подкрепление за начало работы. В работе с дельфинами я, к примеру, использовала случайное подкрепление за первый или второй прыжок из серии в шесть прыжков. Тот же прием я довольно эффективно применяла в аутотренинге. В течение нескольких лет я училась в вечернем институте. Занятия проходили один-два раза в неделю. Три часа уходило на занятия, и два часа я тратила на дорогу. Около пяти часов вечера я всегда испытывала ужасный соблазн не ходить. Но потом я обнаружила, что, если разбить дорогу на пять шагов – дорога до станции метро, ожидание поезда, пересадка, автобус до университета и подъем по лестнице до класса – и подкреплять завершение каждого шага маленьким кусочком шоколада, который я любила, но обычно не ела, то будет гораздо проще выбраться из дома. За несколько недель я научилась проделывать весь путь и без шоколада, и без внутренней борьбы.

Суеверия: случайное подкрепление

В реальной жизни подкрепления происходят сплошь и рядом. Зачастую это просто совпадения. Биолог, изучавший поведение ястребов, заметил, что стоит ястребу поймать мышь под каким-то кустом, в течение недели он будет каждый день прилетать к этому кусту. Вероятность того, что он пролетит над этим конкретным местом, значительно повышается. Достаточно найти в мусорном ящике двадцатидолларовую банкноту, и, я уверена, на следующий день вам не удастся пройти мимо, не бросив на него пристального взгляда.

Случайное подкрепление оказалось благотворным для ястреба. В действительности, поведение животных настолько эволюционировало, что каждый вид извлекает пользу из любого полученного подкрепления. Хотя многие подкрепления оказываются случайными, они все же оказывают сильнейшее влияние на поведение. Когда поведение не связано с последствиями подкрепления, но субъект все же поступает так, как необходимо для получения подкрепления, ученые называют его поведение суеверным.

Для примера рассмотрим привычку грызть карандаш. Если во время экзамена вы случайно прикусили кончик карандаша, а потом нашли правильный ответ или вас посетила хорошая идея, подкрепление может повлиять на поведение: хорошая идея пришла, когда вы грызли карандаш, таким образом, привычка получила подкрепление. Когда я училась в колледже, у меня не было ни одного неизгрызенного карандаша. Во время сложных экзаменов я порой даже перекусывала карандаши пополам. Я была абсолютно уверена, что привычка грызть карандаш помогает мне думать. Конечно, на самом деле это было не так. Налицо было случайно обусловленное поведение.

То же самое относится к привычке надевать определенную одежду или выполнять определенный ритуал, приступая к выполнению некоторой задачи. Я видела одного бейсболиста, который каждый раз выполнял сложную последовательность из девяти движений, когда был готов к удару. Он прикасался к кепке, прикладывал мяч к перчатке, натягивал кепку на лоб, тер ухо, сдвигал кепку назад, переминался с ноги на ногу и так далее. В напряженный момент он мог повторить все девять движений дважды и при этом никогда не менял их порядок. Последовательность проходила очень быстро – комментаторы никогда не обращали на нее внимание, – однако она являла собой идеальный пример суеверного поведения.

Суеверное поведение часто проявляется в дрессировке животных. Животное может реагировать на критерий, который вы устанавливать не собирались, но случайно подкрепляли настолько часто, что он стал условным. Например, животное может вести себя так, словно для получения подкрепления ему достаточно находиться в определенном месте или сидеть неким конкретным образом. Достаточно перенести занятие в другое место, и поведение таинственным образом нарушается, а вам остается только гадать, почему же это произошло. Было бы разумно в тот момент, когда поведение уже частично усвоено, повторять его в разных ситуациях, даже если они не кажутся вам важными. Таким образом, вы сможете минимизировать вероятность возникновения случайного обусловливания, которое может помешать вам в будущем.

Самое главное – следить за развитием случайных временных связей. И животные, и люди обладают очень четким ощущением временных интервалов. В этом я убедилась, когда дрессировала двух белух прыгать по сигналу (движению руки). Случайно присутствовавший при тренировке ученый с секундомером сообщил мне, что дельфины прыгают каждые двадцать девять секунд. И действительно, даже когда я не давала команды, они прыгали через двадцать девять секунд. Совершенно случайно получилось так, что я отдавала команду через регулярные промежутки времени, и животные привыкли к такому режиму. Они вовсе не опирались на ту информацию, которую должны были бы использовать, по моему мнению.

Многие дрессировщики старой школы находятся в настоящем плену суеверного мышления и поведения. Мне говорили, что дельфины предпочитают, чтобы люди, работающие с ними, были одеты в белое, что мулов нужно бить, что медведи не любят женщин и так далее. Точно такими же бывают школьные учителя, убежденные в том, что на пятиклассников, к примеру, нужно кричать и что завоевать уважение можно только с помощью наказаний. Такие учителя находятся в плену традиций. Они должны поступать совершенно одинаково, потому что не могут отделить по-настоящему эффективные методы от методов суеверных.

Такая путаница проявляется во многих профессиях – в преподавании, технике, военном деле и особенно часто в медицине. Удивительно, сколь многим процедурам приходится подвергаться пациентам не потому, что они необходимы для излечения, а просто потому, что их принято проводить и в настоящее время их проводят все. Любой, кто хоть раз лежал в больнице, может привести в пример десяток ненужных действий, которые являются не чем иным, как проявлением суеверного поведения.

Интересно, что даже после выявления неэффективности суеверного поведения оно пропадает не всегда. Поскольку оно сильно обусловлено, то и защищают его изо всех сил. Укажите врачу на бесполезность или даже вред проводимой им процедуры, и он обрушится на вас с обвинениями в некомпетентности. Я уверена, что бейсболист, выполнявший сложную последовательность движений, ни за что не согласится с тем, кто прикажет ему бросать мяч, не надевая, к примеру, кепки, к которой он перед каждым ударом прикасается по четыре раза.

Чтобы избавиться от собственного суеверного поведения, вы должны осознать, что оно никоим образом не связано с подкреплением.

Мой сын Тед – банкир. Он увлекается фехтованием. Два-три раза в неделю он ходит на тренировки, а по выходным часто уезжает на соревнования. Однажды, когда ему предстояло сразиться с особенно сильным противником, он чувствовал себя ужасно, потому что оставил дома свой любимый клинок. Ту схватку он проиграл. Потом он понял, что гораздо больший вред ему принес его настрой, а вовсе не клинок, который пришлось использовать. В действительности выбор «любимого» клинка являлся всего лишь примером суеверного поведения.

Тед решил избавиться от любых проявлений суеверного поведения, связанных с фехтованием. Сосредоточившись на этом, он выявил массу собственных суеверий – от пристрастия к определенным видам одежды до внутреннего убеждения в том, что на результат выступления могут повлиять плохой сон, конфликт и даже фруктовый сок, выпитый во время соревнований. Систематически анализируя каждое подобное обстоятельство, он поочередно избавлялся от выявленных зависимостей, стоило ему осознать их суеверный характер. Теперь он приезжает на любое соревнование спокойным и уверенным, даже если только что пережил настоящий кошмар – опоздал на поезд, перепутал пересадку, поругался с таксистом. Его не волнует даже перспектива использования чужого клинка или выступления в тренировочном костюме, к которому по цвету совершенно не подходят носки.

Чего можно добиться с помощью положительного подкрепления?

Вот несколько примеров того, чего мои знакомые добились с помощью положительного подкрепления:

* Дизайнер Джуди раз в неделю ходила на курсы живописи в местном университете, чтобы усовершенствовать свое мастерство. Двадцать ее однокурсников тоже были дизайнерами или художниками рекламы. Учитель каждую неделю задавал им домашнее задание. Поскольку все были очень заняты на работе, практически никто этого задания не делал. На каждом занятии учитель десять минут ругал учеников за невыполненное или плохо выполненное домашнее задание. В конце концов Джуди это надоело, и она предложила учителю, чтобы он поощрял тех, кто сделал задание, вместо того чтобы ругать тех, кто его не выполнил. Учитель так и поступил. Он стал хвалить своих учеников за каждое выполненное домашнее задание. Через две недели ученики стали гораздо счастливее, а вместо 30 процентов выполнять домашнее задание стали 75 процентов учеников.

* Студентка Шэннон пришла в гости к подруге и застала такую сцену. Четверо взрослых безуспешно и с определенным риском для себя пытались удержать немецкую овчарку, чтобы полечить ей ухо. Шэннон не особо любит собак, но она изучала роль положительного подкрепления. Она достала из холодильника кусок сыра и за пять минут научила собаку сидеть спокойно, а свободной рукой закапала ей в ухо лекарство.

* Молодая женщина вышла замуж за человека, который оказался чрезмерно властным и требовательным. Хуже всего было то, что свекор, который жил вместе с ними, вел себя по отношению к невестке точно так же. Об этой истории мне рассказала мать этой женщины. Впервые оказавшись в этом доме, она была в ужасе от того, что приходится терпеть ее дочери. «Не волнуйся, мама, – успокоила ее дочь. – Просто подожди и посмотри». Дочь привыкла практически не реагировать на приказы и грубость, но в то же время положительно подкрепляла любые проявления вежливости и нежности со стороны обоих мужчин. За год она превратила мужа и свекра в милейших людей. Они стали улыбаться ей и мгновенно бросаться на помощь, заметив, что у нее в руках тяжелые пакеты.

* Восьмиклассница, живущая в городе, любила отправляться на загородные прогулки со своей собакой. Но собака часто убегала слишком далеко и не возвращалась, когда ее звали. Особенно тяжело было уговорить пса пойти домой. В очередные выходные девочка устроила для собаки настоящий праздник. Она хвалила, ласкала, обнимала ее – но лишь тогда, когда собака подходила к ней во время прогулки. Когда настало время возвращаться домой, девочка позвала собаку, и та с радостью подбежала к ней. Нежность хозяйки перевесила прелесть свободы. Поведение девочки стало положительным подкреплением. Впоследствии никаких проблем во время загородных прогулок не возникало.

* Молодой сотрудник, которого буквально затерроризировал начальник, сумел выбрать те сферы своей работы, которые могли бы стать для начальника положительным подкреплением (например, подача бумаг на подпись). Эту работу он старался приурочить к тем моментам, когда начальник находился в хорошем настроении. Начальник оттаял и даже начал шутить и рассказывать анекдоты.

* Некоторые люди создают особые виды подкреплений. Чтобы их заслужить, другие готовы пойти на многое. Домохозяйка Аннет, когда ее дети выросли, почувствовала бы себя очень одиноко, если бы не подруги, которые каждую неделю, а то и чаще звонили, чтобы поделиться своими новостями. Речь идет вовсе не о соседках или родственницах. Многие подруги Аннет были занятыми деловыми женщинами и жили довольно далеко. Я была одной из них. Почему же все мы звонили Аннет? Если новости были плохими – грипп, проверка налоговой службы или увольнение няни, – Аннет всегда проявляла сочувствие и давала полезные советы. Но особенно необычно Аннет подкрепляла хорошие известия. Достаточно было сказать, что банк предоставил тебе кредит, и она не ограничивалась односложным восклицанием: «Это замечательно!» Она подробно и восхищенно рассказывала тебе, что ты сделала, чтобы заслужить эту радость. «Ты понимаешь? – говорила она. – Вспомни, как напряженно ты работала, чтобы создать хорошую кредитную историю? Помнишь, как тяжело тебе было с телефонной компанией? А как непросто было получить карточку авиакомпании? А теперь ты пожинаешь плоды своей работы. Все признали, что ты – успешная деловая женщина. Но сначала ты должна была сделать правильные ходы, и тебе это удалось. Я по-настоящему горжусь тобой!» Ее слова были не просто одобрением. Это было настоящее подкрепление. После этого все прошлые усилия казались более не испытаниями судьбы, а напряженной работой в верном направлении. Аннет переводила хорошие известия из категории случайной удачи в положительное подкрепление. Неудивительно, что все мы так любили ей звонить.

Организованное подкрепление

Совещания по продажам, клубы поддержки, курсы Дейла Карнеги, группы желающих похудеть – то есть большинство организаций, где группы людей обучаются самосовершенствованию, – активно используют прием положительного подкрепления со стороны группы в отношении отдельных ее членов. Аплодисменты, медали, церемонии вручения премий и другие формы группового признания являются сильными подкреплениями. Иногда такие средства используются весьма творчески.

Один менеджер по продажам из компании «Ай-би-эм», желая поощрить своих сотрудников за хорошие результаты, арендовал футбольный стадион. Он устроил отличную вечеринку для сотрудников и руководителей и пригласил членов их семей. Его сотрудники выходили на поле там, где обычно появляются игроки. И с появлением каждого из них на экране загоралось его имя, а все собравшиеся приветствовали его аплодисментами и криками одобрения.

Некогда я ходила на курсы повышения самооценки Вернера Эрхарда. Эта программа насквозь коммерческая, но меня подкупило в ней следующее. Как профессиональный тренер, я оценила, как великолепно применяются в ней приемы формирования поведения и положительного подкрепления. Программа, как я и предполагала, называлась «тренингом». Руководителя называли «тренером». Целью формирования являлось повышение самооценки. Основным подкреплением в рамках программы являлись не реакции тренера, а невербальное поведение всей группы.

Чтобы поведение группы стало подкреплением, всем участникам велели аплодировать после выступления каждого оратора, даже если делать этого им не хотелось. Таким образом, с самого начала участники группы избавлялись от застенчивости, получали вознаграждение и понимали, что любой их вклад, даже самый незначительный, оценен группой.

Сначала люди аплодировали по обязанности и не более того. Но очень скоро аплодисменты стали искренними. Конечно, они звучали не от радости и удовольствия, как в театре. Но они были исполнены чувства и смысла. В моем классе сложилась ситуация, которая наверняка часто складывается и в других подобных группах. Один из участников постоянно оспаривал то, что говорил тренер. Когда это случилось в третий или четвертый раз, тренер начал спорить с ним. Все понимали, что с логической точки зрения спорщик был совершенно прав. Но поскольку конфликт длился и длился, участникам группы стало неважно, кто из спорящих прав. Все 249 остальных участников хотели только одного – чтобы наш спорщик заткнулся и сел на место.

Правила игры – то есть правила формирования поведения – не позволяли нам протестовать или приказать спорщику замолчать. Но постепенно он почувствовал мрачное молчание группы. Мы видели, что он понял: никому нет дела до того, прав он или нет. Может быть, быть правым – еще не самое главное. Наш спорщик замолчал и сел на место. Все остальные участники группы тут же приветствовали его решение громкими аплодисментами. Это было проявление симпатии и понимания, но в то же время и знак глубокого облегчения. Наши аплодисменты стали очень мощным положительным подкреплением только что продемонстрированного поведения.

Случаи обучения такого типа, в которых важную роль играют поведенческие аспекты, а не словесное выражение, безумно трудно объяснить непосвященным. Эрхард, как любой наставник дзен, часто изрекал афоризмы. В только что описанной ситуации он изрек: «Когда ты прав, от тебя требуется только одно: быть правым». То есть не обязательно любимым или милым: просто правым. Когда я цитирую это высказывание на вечеринках, где кто-то начинает задираться, другие выпускники курсов Эрхарда улыбаются. Пожалуй, улыбнется в такой ситуации любой хороший современный тренер. Но большинство окружающих считают меня странной или захмелевшей. Великолепные приемы тренинга не всегда находят точное вербальное выражение.