Приведу пример. Я поощряю кошку лакомством за то, что она подошла ко мне, когда я ее позвала, и она это понимает и выполняет мою команду. Если я буду звать и угощать ее каждый раз, когда она будет сидеть на каминной полке, то она и это усвоит очень скоро. (С ее точки зрения, это она выдрессировала меня – приучила звать ее и давать ей лакомство.) А теперь предположим, что я хочу научить кошку прыгать на камин, когда я укажу на него. В качестве подкрепления я могу использовать или лакомство, или фразу «Иди ко мне». И тогда я могу указывать на камин, когда (1) я знаю, что кошка голодна, и когда (2) она случайно перевернется через спину

Уменьшение отсрочки в реальной жизни может быть таким, на какое вы готовы. Сколько вы готовы ждать выполнения своей просьбы или приказа? Родители, начальники и учителя, требующие выполнения своих заданий, всегда устанавливают определенное время отсрочки. Когда этот интервал установлен и всем известен, этих людей считают надежными и справедливыми, даже если «окно», в которое должно проявиться желательное поведение, очень невелико

Если собака подходит слишком близко к границе, ошейник наносит удар. Но за несколько футов до опасной черты приемник начинает подавать предупреждающий сигнал. Этот звук становится условным стимулом. Он говорит: «Дальше не ходи». Если ошейник настроен правильно, дрессированная собака будет держаться строго в заданных границах и никогда не получит удара. Я использовала такой прием при обучении своего терьера, когда наш дом находился в лесу. Настоящая ограда стала бы для собаки постоянным предложением сделать подкоп или убежать через открытые ворота. Условный предупреждающий сигнал и «невидимая ограда» оказались гораздо более эффективными

Мой бордер-терьер в юности обожал рыться в мусорном ведре, разбрасывая мусор вокруг. Я решила не наказывать собаку, но постоянно следить за тем, чтобы ведро было пустым, мне не хотелось. Я наполнила пульверизатор водой и добавила несколько капель ванильного экстракта. Этот сильный запах казался мне приятным. Потом я оскалила зубы и брызнула водой прямо в морду собаки. Обескураженный пес в ужасе умчался. После этого я обрызгала ванильной водой все мусорные ведра. С этого момента собака стала держаться в стороне от мусора. Мне не нужно было использовать неприятный для собаки запах. Стимул был изначально абсолютно нейтральным, неприятной была сама ассоциация. Я выяснила, что для закрепления желательного поведения нужно освежать стимул, каждые три месяца опрыскивая мусорные ведра ванильной водой. Брызгать же водой на собаку не было никакой необходимости

Я видела, как мишени (в том числе ладонь учителя и лазерная указка) использовались для того, чтобы научить умственно отсталых детей приходить в класс, садиться за парту или идти в другое место. Дети делали это добровольно, без физического воздействия. Очень полезный навык и для учеников, и для учителя

Полицейские кинологи и тренеры собак-спасателей обычно используют лазерную указку, чтобы посылать собак в определенные места. Кошки тоже с удовольствием ловят маленькую красную точку лазерной указки. Это отличное развлечение и упражнение для домашней кошки. Ваши гости будут поражены, если домашняя кошка, натренированная с помощью лазера, по сигналу мгновенно запрыгнет на холодильник

Феноменом Умного Ганса сегодня называют любые обстоятельства, в которых удивительное поведение (от проявлений интеллекта у животных до психических феноменов людей) на самом деле происходит по бессознательному или стертому сигналу экспериментатора. Такой сигнал становится различительным стимулом для субъекта и приводит к проявлению конкретного поведения

Второй способ (таким мы пользовались при дрессировке дельфинов) заключается в чередовании сигнала и отсутствия сигнала. Поведение проявляется часто. Вы говорите: «Сидеть!» – и кликаете. Затем вы позволяете собаке раз или два раза сесть, не подкрепляя это действие. Затем вы снова говорите: «Сидеть!» – и подкрепляете действие, произошедшее после сигнала. Таким образом в течение одного сеанса тренинга вы одновременно и подкрепляете привычку садиться по сигналу, и устраняете привычку садиться без сигнала

Существует несколько способов установки сигнала. Можно подавать сигнал, как только поведение начинает проявляться, затем подкрепить завершение поведения, а потом повторять эту последовательность в разное время и в разных местах, постепенно сдвигая подачу сигнала по времени до тех пор, пока не удастся подавать сигнал до начала проявления поведения. Постепенно ученик начнет воспринимать сигнал как возможность получения подкрепления за конкретное поведение. И когда вы скажете: «Сидеть!» – собака сразу же сядет

Обычные тренеры начинают с сигнала еще до начала тренировки. «Сидеть!» – и с этими словами они вынуждают собаку сесть. После множества повторений собака начинает садиться, чтобы ее не пихали и не толкали. В курсе дрессировки пес понимает, что, услышав ключевое слово, нужно сесть, и тогда не будет раздражающих стимулов. Традиционные сигналы или команды в действительности являются условными отрицательными подкреплениями

Проявление гнева бывает эффективно лишь в том случае, если субъект сознательно демонстрирует нежелательное поведение или столь же сознательно не проявляет отлично усвоенной реакции. В такой ситуации проявление гнева и демонстрация характера могут привести к требуемому результату

Если вы руководите людьми, но вам часто приходится повторять приказы и инструкции по несколько раз, прежде чем они будут исполнены, значит, у вас проблема с управлением с помощью стимулов. Вы никогда не замечали, что часто повторяете: «Я тебе уже говорила, я тысячу раз просила…» (не хлопать дверью, не оставлять мокрый купальник на диване и так далее и тому подобное)? Если ни первая, ни тысячная просьба не возымели действия, значит, поведение не подчиняется стимульному контролю

Все, что вызывает определенную поведенческую реакцию, называется стимулами. Некоторые стимулы могут вызывать реакцию без какого бы то ни было обучения или тренировки. Мы вздрагиваем от громкого звука, моргаем от яркого света и устремляемся на кухню, ощутив аппетитный запах. Животные поступают точно так же. Подобные звуки, свет и запахи называются безусловными, или первичными, стимулами

Отрицательные стимулы порой бывают настолько острыми, что могут вызвать настоящий страх и даже ужас. В лабораторных условиях психологи выявили феномен, который они назвали «усвоенная беспомощность». Если животное учат уклоняться от раздражителя, например от удара электрическим током, путем нажатия на рычаг или перемещения в другую часть клетки, а затем помещают в клетку, где уклониться нет никакой возможности, животное постепенно оставляет свои попытки. Животное впадает в депрессию, становится пассивным, может просто лечь и покорно принимать наказание, хотя путь к свободе уже открыт

Поскольку формирование поведения может и даже должно быть молчаливым, данный процесс многим кажется злонамеренной манипуляцией. Я считаю, что это заблуждение. Но формирование должно быть невербальным

Мудрые родители никогда не говорят о том, как хорошо они воспитывают ребенка. С одной стороны, всем ясно, что эта работа никогда не кончается, а с другой, дети заслуживают похвалы – хотя бы за то, что они пережили все воспитательные ошибки, совершенные их родителями

А если вы добьетесь успеха в формировании поведения другого человека, все равно не говорите об этом впоследствии. Некоторые никак не могут этого понять и постоянно стремятся подчеркнуть свои заслуги. Но достаточно одного покровительственного высказывания – и вы создадите себе врага на всю жизнь

Чтобы добиться результатов, нужно осуществлять формирование, а не говорить об этом

Однако при таком использовании подкреплений существуют две опасности. Первая заключается в том, что легче заметить ошибки, чем улучшения. Для вербальных существ (а люди именно такими и являются) гораздо проще указать на то, что критерии не выдерживаются, чем подкрепить их реальное соблюдение. И это может полностью остановить прогресс. Вторая опасность заключается в том, что, собираясь сформировать поведение другого человека, вам наверняка захочется поговорить об этом. А разговоры могут все испортить. Если вы скажете: «Я собираюсь поощрить тебя» – за складывание грязного белья в корзину, за отказ от курения марихуаны, за экономию, за что угодно, – то тем самым скатитесь к подкупу или обещаниям. Такие действия не будут положительным подкреплением. Узнав о ваших планах, человек может сознательно взбунтоваться и начать вести себя еще хуже

Даже если разбрасывание грязной одежды является проявлением замаскированной агрессии, направленной против вас («Собирай мою одежду, раб!»), с помощью положительного подкрепления вы сможете добиться ощутимого прогресса и приучить соседа к адекватной в условиях общежития аккуратности

Конечно, нужно составить план формирования, который был бы разбит на ряд этапов. По завершении каждого из этапов должна быть достигнута определенная цель. Например, чтобы научить соседа складывать грязную одежду в корзину, начните с одного носка. Оставьте открытую корзину рядом с носком, который валяется на полу

Однако в неформальных ситуациях реальной жизни чаще всего формирование происходит без инструкций и вербального обсуждения. Предположим, ваш сосед по комнате не отличается аккуратностью и постоянно разбрасывает повсюду грязную одежду. Вербальные инструкции – уговоры, просьбы, ругань – не работают. Как же воспитать в нем аккуратность? Все в ваших силах

Я выяснила, что для самосовершенствования очень важно вести записи, и это предлагалось делать в рамках всех четырех программ. Мне нужно было фиксировать собственное поведение таким образом, чтобы сразу же видеть улучшения. Я использовала графики. В результате, даже допустив промах, я сразу же видела, что все равно достигла значительного прогресса в сравнении с тем, что было шестью месяцами раньше. Совершенство – вещь труднодостижимая, но линия, уверенно идущая вверх, то есть в нужном направлении, служит визуальным доказательством произошедших сдвигов. Хотя график сам по себе является слабым и медленно действующим подкреплением, он по большей части обеспечивал мне достаточно сильную мотивацию

Ведущий редактор крупного издательства говорил мне, что сумел бросить курить после того, как гипнотизер научил его путем самогипноза входить в состояние легкого транса и повторять мантру: «Я не хочу курить». Это он проделывал каждый раз, когда ему хотелось закурить. Такой прием, в буквальном смысле слова, «опускал занавес» между ним и сигаретой. Ощущение облегчения и радости после того, как желание проходило, служило подкреплением. Разумеется, мы не можем точно сказать, на самом деле ли это случалось или в действие вступали другие подкрепления

Люди гораздо легче учат иностранные языки в детстве, чем во взрослой жизни, хотя недавно лингвисты выяснили, что взрослый, который хочет и готов работать, может изучить новый язык быстрее, чем большинство детей и подростков. Думаю, что есть только один навык, которому взрослого человека научить очень сложно, – это плавание. Человек относится к числу тех немногих видов, для которых плавание не является естественным состоянием. Можно научить взрослого держаться на воде и делать правильные движения, но он никогда не будет чувствовать себя уверенно на глубине. Это свойственно только тем, кто научился плавать в детстве

Младенчество – не единственное биологическое ограничение, влияющее на формирование. Некоторые поступки для некоторых видов животных являются естественными, а для других – сложными и почти невозможными. Свиньям, к примеру, очень сложно что-то носить во рту, зато они с легкостью учатся толкать предметы пятачком. Большинство пород собак выводили для определенных действий. Нет необходимости учить колли пасти овец, поскольку навыки подобного поведения уже сформированы в процессе выведения породы. А вот заставить выполнять те же действия бассет-хаунда будет крайне сложно, а то и невозможно

щенки, котята, младенцы – не могут повторять желательное поведение более трех-четырех раз. Если вы будете настаивать, то можете утомить или даже напугать их. Но не стоит думать, что незрелые организмы не способны учиться. Они учатся постоянно, но делают это короткими отрывками. Мой знакомый рыбак учил свою четырехлетнюю внучку здороваться. Он говорил ей: «Дай пять!» – и девочка радостно шлепала его по ладони, имитируя приветствие джазовых музыкантов. Окружающие всегда с восторгом воспринимали этот трюк. Но дед демонстрировал его только пару-тройку раз, не больше

Очень часто оказывается, что все, чему субъект научился, заключается в том, чтобы заставить вас прекратить какие-то действия. Собака, которую вы учите приносить поноску, хватает палку лишь для того, чтобы заставить вас замолчать. Но стоит вам успокоиться, как пес мгновенно забывает про усвоенный навык. Малыш, вцепившийся в высокий стульчик, сидит спокойно, пока вы придерживаете его. Но стоит вам убрать руку, и он начинает елозить на месте

Журналистка Джудит Мартин («мисс Мэннерс») предлагает обучать детей хорошим манерам следующим образом. В процессе воспитания, то есть «от рождения до свадьбы», все в доме должны есть культурно, говорить грамотно и спокойно и проявлять хотя бы поверхностный интерес к делам и словам друг друга

А вот собаки не так хорошо умеют учиться путем наблюдения. Когда они повторяют действия других собак, то это, как правило, происходит потому, что они реагируют на те же самые стимулы, а вовсе не подражают друг другу. С другой стороны, большинство кошек, интеллект которых зоопсихологи оценивают гораздо ниже, великолепно владеют подражанием. Если научить какому-то трюку – например, умению звонить в специальный звонок для того, чтобы попасть в дом, – одну кошку в доме, то и другие кошки быстро усвоят тот же навык без всякого обучения с вашей стороны. Кошки часто копируют поведение представителей других видов. Как-то вечером моя дочь целый час учила своего пуделя сидеть в детской качалке и раскачиваться. В качестве подкрепления она пользовалась нарезанной ветчиной. Одна из наших кошек внимательно наблюдала за процессом. Когда урок закончился, кошка сразу же вскочила на качалку и начала раскачиваться, при этом посматривая на нас и явно ожидая своей порции ветчины. Конечно же, она заслужила подкрепление

Обучение путем наблюдения психологи считают признаком разума у животных – у приматов этот навык развит сильнее, чем у других животных. Я считаю, что наличие или отсутствие этого навыка у конкретных видов зависит от естественных условий обитания, а не от разумности как таковой. Некоторые птицы великолепно владеют подражанием. Английские синицы отлично научились вскрывать молочные бутылки, оставленные у дверей домов, и «снимать сливки». Благодаря подражанию этот навык распространился среди синиц так быстро, что пришлось менять дизайн крышек молочных бутылок

То, когда вы прекратите занятие, в принципе неважно. Важно, на чем вы остановитесь. Вы всегда должны заканчивать занятие, оставаясь впереди ученика. Это относится ко всему сеансу, но в то же время и к этапам сеанса – то есть к тем моментам, когда вы перестаете работать над одним поведением и переходите к другому. Вы должны заканчивать занятие на высокой ноте – как только определенный прогресс будет достигнут.
Лучше всего запоминается то, на чем был закончен сеанс. Помните об этом, чтобы быть уверенным в том, что тренировка была успешной. К сожалению, очень часто случается иное.

Среди друзей подростки совершают такие поступки, каких никогда не позволили бы себе в присутствии родителей. Это происходит потому, что субъект прекрасно осознает, что его не постигнет наказание – кот из дома, мыши в пляс. Но в то же время подобное поведение может стать побочным эффектом тренинга с помощью отрицательного подкрепления. Поскольку наказывающий ясно дает понять: «Не делай этого!» – отсутствие отрицательного стимула посылает субъекту сигнал: «Сегодня это допустимо!»
При тренинге же с помощью положительного подкрепления нет необходимости постоянно подкреплять каждую правильную реакцию. Наоборот, для процесса обучения очень важно пропускать некоторые поводы для подкрепления. Почему же?

Тренеры, работающие с дельфинами, называют такое состояние «синдромом нового бассейна». Когда вы переводите дельфина в новый бассейн, то должны понимать, что животное «забудет» все, чему вы его учили, пока не освоится в новой обстановке. Очень важно понимать, что ругать себя или других за ошибки в усвоенной программе, которая осуществляется в новых обстоятельствах, совершенно неправильно. Через короткое время ошибки, как правило, исчезают сами собой

Формирование возможно, потому что поведение живых существ разнообразно. Что бы живое существо ни делало, в некоторые моменты оно делает то же самое с бо́льшим энтузиазмом, чем в другие

Положительное подкрепление можно использовать и по отношению к самому себе. Мы часто пренебрегаем этим ценным средством. Отчасти это объясняется тем, что подобная мысль просто не приходит нам в голову, а отчасти тем, что от себя мы требуем гораздо большего, чем от других. Один мой знакомый священник сказал мне: «Лишь немногие из нас устанавливают для себя такие низкие стандарты, чтобы жить в соответствии с ними было легко». В результате мы часто не даем себе передышки, переключаемся с задачи на задачу, не получая одобрения и благодарности даже от себя самих.
Подкреплять себя необходимо не только за изменение привычки или овладение новым навыком. Определенное подкрепление нужно и в повседневной жизни. Отсутствие подкрепления, по моему мнению, является одной из причин возникновения состояний тревожности и депрессии

При очень длительных интервалах между подкреплениями происходит и еще одно явление, а именно, замедленный старт. В начале процесса цыпленок нажимает на кнопку с одинаковой частотой, поскольку каждое нажатие приближает его к желанному подкреплению. Но исследователи заметили, что по мере увеличения промежутка между подкреплениями цыпленок начинает поведенческую цепочку все позже и позже.
Такое явление называют отсроченным началом поведения с долговременной программой, и оно очень хорошо знакомо всем людям. Когда нам предстоит длительная работа – заполнение налоговой декларации или уборка в гараже, – мы придумываем для себя массу оправданий для того, чтобы не приступать к ней прямо сейчас. Иногда даже написание письма является для нас долговременной программой. Стоит нам начать, и мы справляемся с задачей вполне неплохо. Но, боже мой, до чего же трудно заставить себя сесть к столу и начать писать

Чем более редкими и непредсказуемыми будут такие моменты, тем более сильное воздействие они окажут на вас и тем прочнее укрепится поведение

Неподкрепленное поведение угасает само собой. Но если поведение время от времени подкрепляется, пусть даже спорадически – одна сигарета, одна рюмка, одна уступка капризному ребенку или нудному партнеру, – оно не угаснет, а, напротив, прочно закрепится

Чтобы заученное поведение надежно закрепилось, вовсе не нужно подкреплять его каждый раз. Наоборот, очень важно не подкреплять поведение на регулярной основе, а использовать подкрепление лишь от случая к случаю, случайно и непредсказуемо

Существует распространенное заблуждение, что если вы начали вырабатывать какое-то поведение с помощью положительного подкрепления, то должны продолжать пользоваться этим методом всю жизнь. А если перестать использовать этот метод, желательное поведение прекратится. На самом деле это не так. Постоянное подкрепление необходимо только на этапах обучения

Б. Ф. Скиннер определял отрицательное подкрепление, как лишение чего-то желанного. В этом смысле сигнал «неправильно» является условным отрицательным подкреплением, поскольку он означает недоступность вознаграждения

Необходимо усвоить главное правило – «один клик – одно угощение». Только так можно эффективно сформировать желательное поведение

Выражайте свою любовь и внимание вне связи с конкретным поведением любыми словами. Но выделите определенную фразу, сделав ее условным подкреплением, и свяжите ее с чем-то реальным

Условное подкрепление – это первоначально бессмысленный сигнал (звук, вспышка, движение), который подается перед или во время подкрепления

Почему незаслуженный джекпот оказывает такое резкое и длительное воздействие, я толком не понимаю. Может быть, кто-нибудь когда-нибудь защитит докторскую диссертацию на эту тему и объяснит нам этот феномен. Я помню, что абонемент в школу верховой езды избавил меня от чувств тоски и обиды. Мне кажется, что дельфины чувствовали то же самое

Джекпот – это значительное подкрепление, порой раз в десять больше обычного, которое является для субъекта полным сюрпризом

То же самое происходит с людьми, которых пилят и ругают родители, начальники или учителя. Если отрицательное подкрепление не прекращается при достижении желательного результата, оно не несет в себе никакой информации. Оно становится в буквальном и информационном смысле обычным «шумом».

Подарки, обещания, комплименты и все то, что поощряет еще не произошедшее поведение, ни в коей мере не подкрепляет желательное поведение. Все это подкрепляет то поведение, которое имеет место в данный момент, и в этом отношении его можно считать настоящим подкупом