Текст книги "Краткое содержание «Не рычите на собаку»"

Не рычите на собаку: новое искусство обучения

Что такое подкрепление

Подкрепление – это стимул, который происходит одновременно с определенным действием и вызывает конкретный результат в дальнейшем поведении. Подкрепление бывает положительным и отрицательным. При положительном подкреплении стимулом служит что-либо желанное для субъекта тренировки: например, еда или одобрение. При отрицательном подкреплении используются нежелательные действия: громкие звуки, шлепки, неодобрительное выражение лица.

Положительное подкрепление

Если во время действия использовать положительное подкрепление, с большой вероятностью человек или животное повторит это действие и в дальнейшем будет повторять его чаще и усерднее.

Подкрепление применяется только к поведению, которое происходит как минимум однажды или время от времени. Нельзя подкрепить действия, которые никогда не встречаются. К примеру, вы хотите с помощью положительного подкрепления стимулировать другого человека звонить вам по телефону. Но если он не сделает ни одного звонка, у вас не получится воздействовать на него.

Если человек сделает хотя бы один звонок, вы можете использовать методику подкрепления. Положительным подкреплением в этом случае будет позитивная реакция на звонок: одобрение или похвала.

Отрицательное подкрепление в этом случае не сработает. Если вы пожалуетесь на редкие звонки и потребуете звонить чаще, человек будет раздражен. В следующий раз он не захочет этого делать, чтобы избежать неприятностей. Получается, что отрицательным подкреплением вы обучили его звонить реже.

Еще один пример эффективности положительного подкрепления продемонстрировал юрист, который учился играть в сквош.

Однажды он услышал, как я рассказываю об обучении, и, уходя, заметил, что можно испробовать положительное подкрепление на его игре в сквош. Вместо того чтобы, как обычно, сокрушаться об ошибках, он попробует вознаграждать себя за хорошие удары. Через две недели я снова встретила его. «Как сквош?» – спросила я. На его лице появилось выражение заинтересованности и радости, что нечасто бывает с юристами с Уолл-стрит. «Сначала я чувствовал себя жутким дураком, – ответил он, – говоря: „Хорошо, Пит, молодец!“ при каждом удачном ударе. Черт возьми, когда я тренировался один, я даже поглаживал себя по спине. Но затем моя игра начала улучшаться. И сейчас я на четыре ранга выше в клубной лестнице, чем был когда-либо раньше. Я побеждаю тех, у которых прежде не мог выиграть даже очко. И получаю гораздо больше удовольствия. С тех пор как я не ору на себя все время, я не кончаю игру злым и разочарованным. Если удар не получился, ничего страшного, следующие будут хорошими».

Универсальных реакций для положительного подкрепления не существует: на людей и животных в различных ситуациях действуют разные стимулы. Каждое подкрепление относительно. Если животное сыто, то лакомство на него не подействует. Если человек хочет вас разозлить, то похвала и улыбки не дадут результата. Поэтому нужно выбирать такое подкрепление, в котором субъект нуждается в данный момент. Перед тренировкой или обучением полезно продумать несколько вариантов на всякий случай.

Положительное подкрепление эффективно не только для обучения. Оно используется и во взаимоотношениях между людьми. Традиция дарить подарки основана на положительном подкреплении. Даритель угадывает, что понравится получателю подарка. Если выбор сделан правильно, подарок играет роль положительного подкрепления для обоих.

Отрицательное подкрепление

Отрицательное подкрепление заставляет избегать нежелательного поведения. Неприятные стимулы бывают различной интенсивности: от небольшого сквозняка от кондиционера до удара электрическим током.

Отрицательное подкрепление и наказание – разные вещи. Наказание назначают, когда действие уже закончено и его нельзя исправить. Оно не поможет переписать сочинение, за которое ребенок получил двойку. А отрицательное подкрепление используют в любой период действия. Оно помогает вовремя остановить нежелательное поведение.

Допустим, сидя в гостиной у тетушки, я случайно положила ноги на кофейный столик. Тетушка неодобрительно поднимает брови. Я ставлю ноги на пол. Ее лицо смягчается. Я чувствую облегчение. И поскольку я смогла остановить сигнал нерасположенности, совершившееся поведение было подкреплено. Я усвоила: в тетушкином доме держи ноги подальше от мебели.

Положительное и отрицательное подкрепление работают по одним и тем же правилам. Важно правильно выбирать время подачи и величину подкрепления.

Время подачи

Подкрепление показывает субъекту, какое именно поведение вы одобряете, а какое нет. Эту информацию нужно давать вовремя: не заранее и не поздно, когда уже нет возможности исправить действие.

Например, на тренировке спортсменам важнее во время правильного движения услышать восклицание тренера «Хорошо!», чем после тренировки получить детальный разбор.

Когда родители хотят подбодрить ребенка, который старается сделать что-то сам, они часто хвалят его слишком рано. Если ребенок еще не закончил или допустил ошибку, не успев исправить, не нужно говорить: «Почти все правильно!» или «Молодец, почти закончил». Этим вы подкрепляете не действие, а попытку. В следующий раз ребенок остановится на попытке, не добившись нужного результата.

Величина подкрепления

Подкрепление должно быть маленьким. Лучше использовать много небольших стимулов во время обучения, чем одно большое подкрепление. Это экономит время и дает больший эффект.

Например, при дрессировке животных цыпленку достаточно дать два зернышка, кошке – небольшой кубик мяса, слону – половину яблока.

Большие подкрепления эффективны, если их использовать периодически и неожиданно. Такая награда должна быть в несколько раз больше обычного стимула. Ее можно давать случайно или после особенно крупной победы. Она придает энергии и повышает мотивацию.

Большие подкрепления хорошо действуют, если испуганный или непокорный субъект обучения не проявляет нужного поведения.

Когда мне было пятнадцать лет, самым большим удовольствием для меня были уроки верховой езды. Конюшни, где я занималась, продавали билеты, каждый на десять уроков; по своим деньгам я могла позволить себе один билет в месяц. В то время я жила с отцом, Филиппом, и мачехой, Рики; и хотя они относились ко мне очень хорошо, я вступила в один из тех периодов юности, когда беспрерывно целыми днями бываешь невыносимо грубым и противным. Однажды вечером супруги Уйди, которые были любящими и изобретательными родителями, сказали, что они ужасно устали от моего поведения и поэтому решили меня наградить. И они презентовали мне ослепительно новый, дополнительный бесплатный билет на верховую езду. Один из них не поленился съездить на конюшни, чтобы купить его. Поразительно! Незаслуженный куш. Как мне помнится, я с ходу переменилась, и Рики Уйди подтвердила это много лет спустя, когда я писала эту книгу.

Условное подкрепление

Не всегда подкрепление получается использовать непосредственно во время действия. Когда дрессировщик учит дельфина прыгать, он не может дать животному рыбу в момент правильного или высокого прыжка. Если дать лакомство после прыжка, дельфин не поймет, чем именно он его заслужил – правильным прогибом или высотой. Возможно, он решит прыгать чаще, чтобы каждый раз получать подкрепление.

Чтобы субъект обучения понимал критерии, за которые его поощряют, используется условное подкрепление. Это сигнал, который специально подбирают для связи с действием, например звук, свет или движение.

Дрессировщики дельфинов пользуются полицейским свистком, чтобы руки были свободны, а животное слышало сигнал даже под водой. Собаки и лошади реагируют на похвалу: «хорошая лошадка» или «хорошая собака». Школьные учителя тоже пользуются условным подкреплением, когда говорят «молодец» ученикам, правильно выполняющим задание.

Чтобы условное подкрепление было эффективным, его нужно специально выработать до обучения. Для этого звук или другой сигнал производят одновременно с истинным подкреплением: лакомством или поглаживанием. Когда выработается прочная связь между ними, условное подкрепление становится ценным без истинного. Теперь им можно пользоваться во время тренировки.

Условное подкрепление может быть и отрицательным, что тоже эффективно для воспитания. Например, вы хотите научить кошку реагировать на слово «нет» и знаете, что она боится громких звуков. Уроните на пол тяжелый металлический поднос, одновременно произнося «нет». Кошка запомнит эту связь, и это слово станет отрицательным условным подкреплением.

Режимы подкрепления

Есть три режима подкрепления: постоянный, вариабельный и фиксированный. Постоянное подкрепление необходимо только во время обучения навыку. Когда действие выработано, не нужно его регулярно поддерживать стимулами. Например, когда родитель учит ребенка кататься на велосипеде, он постоянно пользуется подкреплениями: направляет, подсказывает и хвалит. Когда ребенок уже умеет кататься, нет необходимости каждый раз повторять «молодец».

Не подкрепляйте постоянно уже сформированное поведение. Достаточно периодически поддерживать правильные действия. Это называется вариабельное подкрепление.

Если давать дельфину рыбку за каждый прыжок, то скоро прыжки станут невысокими, небрежными, лишь бы отделаться. Если теперь перестать давать рыбу, дельфин тут же перестает прыгать. Но если после того, как животное научилось прыгать за рыбку, начать подкреплять первый прыжок, затем третий и так далее наугад, поведение будет поддерживаться на более высоком уровне: не получив подкрепления, животное станет прыгать чаще, стараясь угадать счастливый номер, и прыжки могут даже усилиться. В свою очередь это позволит подкреплять выборочно наиболее сильные прыжки – то есть посредством вариативного режима совершенствовать деятельность.

Вариабельное подкрепление неэффективно только во время решения тестов, головоломок и задач, у которых есть единственно правильные ответы. При отгадывании кроссвордов подкрепления нужны за правильные слова, а при сложении пазлов – за верные комбинации деталей.

Еще один режим подкрепления – фиксированный. В таком случае вы тоже используете стимулы периодически, но у вас есть определенный график. Например, вы даете подкрепление за каждые пять повторов правильного действия.

У этого режима есть ограничения. Первые действия не подкрепляются, поэтому субъект сразу начинает снижать усилия. Наглядным примером фиксированного подкрепления служит зарплата по пятницам, из-за которой сотрудникам сложно приняться за работу в понедельник.

Если интервал между подкреплениями большой, то возникает еще одна проблема – замедленный старт: когда сложно начать дело. Мы придумываем тысячи отговорок, чтобы не браться за уборку гаража, если решили наградить себя после уборки. Чтобы преодолеть эту трудность, нужно ввести подкрепление за старт.

Случайные подкрепления

Случайное подкрепление – это непродуманное стечение обстоятельств, которое повлияло на поведение человека или животного. Такие подкрепления часто встречаются в жизни.

Один биолог, изучавший ястребов, заметил, что если ястреб поймал под каким-либо кустом мышь, то в течение недели, а иногда и больше, он будет ежедневно проверять этот куст; вероятность его полета именно над этим местом обусловлена силой подкрепления. Попробуйте пройти мимо мусорной корзины, тщательно к ней не приглядываясь, если накануне нашли в ней пять долларов.

Случайные подкрепления далеко не всегда формируют правильное поведение. Иногда человек или животное принимают стечение обстоятельств за закономерность и верят, что в следующий раз такое же действие приведет к подобному результату. Это называется суеверное подкрепление. Часто оно не только не приносит пользы, но и заставляет прикладывать ненужные усилия и даже вредит.

Чтобы во время обучения не сформировались случайные подкрепления, нужно разнообразить все неважные условия: например, заниматься в разных местах или в разное время. Следите, чтобы у обучаемого не образовывались случайные связи, так как они будут мешать формированию правильного поведения.

Самоподкрепление

Некоторые люди относятся к себе строже, чем к остальным. Они работают без выходных, берут на себя много задач, отказываются от отпусков и развлечений. В результате образуются депрессии, неврозы и другие проблемы со здоровьем.

Себя тоже нужно поощрять. Для этого можно использовать положительные подкрепления. Выбирайте подходящий для себя способ: поход в кино, встречу с друзьями, прогулку. Не используйте в качестве подкрепления вредные привычки: фастфуд, алкоголь, сигареты.

Выработка нужного поведения

Если нужное поведение случается изредка, его несложно подкрепить. Но невозможно использовать подкрепление, если человек или животное никогда не выполняли требуемых действий. Не получится научить льва прыгать через горящий обруч, если он не попробует это сделать хотя бы раз.

Сначала нужно выработать нужное поведение. Для этого следует двигаться постепенно, шаг за шагом, чтобы маленькие изменения происходили в нужном направлении и привели к поставленной цели.

Пример выработки нужного поведения – обучение всем физическим навыкам: например, игре в теннис или печати на машинке. Каждый раз, когда человек упражняется в чем-либо, он постепенно, небольшими шагами вырабатывает правильные действия.

Также мы используем выработку поведения, когда меняем привычки: бросаем курить, учимся создавать бюджет или пытаемся изменить пессимистичный характер.

Выработка нужного поведения помогает достигать совершенства в любой сфере. Но это скучно и долго: ради виртуозной игры на фортепиано нужно потратить годы на однообразные тренировки. Люди хотят учиться новому как можно быстрее. Процесс выработки навыка займет меньше времени, если придерживаться нескольких правил.

10 правил выработки поведения

Существует 10 правил выработки навыка. Первые 4 – результат экспериментов в лаборатории, остальные 6 сложились на практике.

1. Медленно повышайте критерий. Если двигаться маленькими шажками, субъект обучения сможет выполнить требуемое действие и получить подкрепление.

Например, вы учите лошадь преодолевать высокие барьеры. Она берет барьер в 60 см. Если резко поднять планку до метра, животное испугается, сломает барьер или остановится перед ним. Поднимайте барьер на 10-15 см, закрепляйте этот результат и двигайтесь дальше.

2. Отрабатывайте один навык за один промежуток времени. Даже два критерия одновременно – это много.

Критерии и навыки можно чередовать во время одного занятия, чтобы оно было интересным. Но для каждого отводится определенное время.

3. Пользуйтесь вариабельным режимом подкрепления для уже выработанных навыков, а затем вводите новые критерии или повышайте планку.

При правильной выработке обучаемый не замечает переходов между постоянным подкреплением навыка, который только формируется, и вариабельным подкреплением, при котором выделяются лучшие действия.

4. Когда вводите новый критерий, ослабляйте старые на время. Новые условия заставляют людей и животных временно регрессировать, поэтому требования для уже сформированных навыков нужно снизить.

Однажды я видела дирижера, который пришел в состояние крайнего раздражения во время генеральной репетиции оперы, потому что певцы хора делали одну ошибку за другой, они как будто забыли всю свою твердо выученную вокальную партию. Причиной было то, что они в первый раз надели тяжелые костюмы, их поставили на подмостки и заставили двигаться во время пения: привыкание к новым условиям временно перекрыло выученное ранее поведение. К концу репетиции их музыкальное мастерство восстановилось без дополнительных репетиций.

5. Заранее планируйте программу выработки и подстраивайтесь под темп обучаемого. Если прогресс будет быстрее ожидаемого, вы будете знать, что подкреплять дальше.

В обычной школе программа рассчитана на среднего ребенка. Медлительные дети пропускают часть материала, а быстрые и способные школьники не получают своевременного подкрепления, и им становится скучно на уроках.

6. Не меняйте тренера на середине пути – в процессе выработки навыка. Это приводит к регрессу.

У одного обучаемого может быть несколько инструкторов, но работать с определенным типом поведения должен только один. Исключение – если обучение зашло в тупик и продолжать дальше с этим учителем нет смысла.

7. Меняйте способы выработки навыка. Если один метод не работает, подберите другой. Каждый тренер придумывает свои методики выработки нужного поведения.

Все тренеры начинают детские занятия по плаванию с того, что учат детей не бояться воды. Но методы у всех разные. Одни просят опустить лицо в воду и пускать пузыри, другие приседать на мелком участке бассейна, пока вода не накроет с головой. Если ребенок не воспринимает определенный метод и по-прежнему боится, хороший тренер предложит другой способ.

8. Не отвлекайтесь и не заканчивайте обучение без положительного подкрепления. Тренер должен уделять внимание обучаемому в процессе всей тренировки. Если он отвлечется и вовремя не даст подкрепление, контакт с учеником прервется. Остановить урок без похвалы в конце приравнивается к наказанию.

9. Если навык ухудшается, сделайте несколько шагов назад. Повторите процесс выработки навыка с небольшими подкреплениями. Пройдите этот путь в других условиях.

Не пытайтесь упрямо преодолеть ухудшение, заставляя обучаемого повторять то, что не получается. Это еще затормозит процесс, так как вам нечего будет подкреплять, и ученик совсем потеряет мотивацию.

10. Заканчивайте тренировку на хорошей ноте. Если вовремя не закончить, обучаемый начнет совершать ошибки из-за усталости.

Заставьте себя остановиться на отличном ответе ученика. Это сложно – хочется продолжить такой успех. Но если вы закончите, в следующий раз обучаемый покажет не только такой же уровень, но и значительно выше.

Не вводите новый материал в конце занятия. Уставшему ученику придется вникать в новую тему, из-за чего он будет совершать ошибки. Конец тренировки должен быть положительным.

Ускорение выработки

Чтобы ускорить процесс выработки навыка, опытные дрессировщики используют несколько приемов. Карен Прайор выбрала из них три метода, которые пригодятся в любой ситуации: введение мишеней, подражание и моделирование.

Введение мишеней. Когда животных готовят к цирковому представлению, им дают мишень, которую нужно толкать носом. Это может быть конец шеста или кулак дрессировщика. Животное толкает мишень и следует за ней, по пути преодолевая препятствия. Так можно научить кошку следовать за дрессировщиком или подниматься по лестнице.

В обычной жизни мы тоже используем мишени – например, когда хлопаем по соседнему сиденью, приглашая сесть рядом.

Подражание. Люди и животные учатся новым навыкам в основном через подражание. Сначала молодые особи наблюдают за старшими, потом копируют это поведение. Демонстрация нужного поведения авторитетным тренером – отличная мотивация в выработке навыка.

Моделирование. Во время этого приема тренер показывает нужное поведение на обучаемом, буквально используя его как марионетку. Например, инструкторы по игре в гольф показывают правильный замах с помощью моделирования: обхватывают ученика сзади, берут клюшку и замахиваются, совершая рукой ученика нужное движение.

Формирование собственного поведения

Существуют программы для выработки собственного поведения: избавления от вредных привычек, снижения веса, обучения игре на музыкальном инструменте.

Такие программы подчиняются общим правилам выработки. Но у них есть один существенный недостаток. Из-за того, что вы даете подкрепление сами себе, в процессе выработки нет важного фактора неожиданности. Это ухудшает прогресс.

Чтобы подобные программы были успешными, Карен Прайор советует воспользоваться эффектным методом самоподкрепления – регистрацией прогресса.

Нужно было вести регистрацию так, чтобы улучшение было видно сразу. Я использовала графики. С их помощью моя виновность за упущения могла уменьшаться при взгляде на график, на котором было видно, что, несмотря ни на что, я сейчас нахожусь на более высоком уровне, чем шесть месяцев тому назад. Еще, может быть, далеко до совершенства, но «кривая» или наклонная линия графика шла в нужном направлении, и это является зримым доказательством улучшения; и хотя это само по себе является слабым, медленно действующим подкреплением, оно создает достаточную мотивацию, чтобы продолжать мои занятия.