Как выбрать подходящее поощрение

Непосредственно перед экспериментами животных не кормили – это было общее правило. Иначе ученые не могли бы проводить сравнения, например, скорости разных видов обучения; всегда можно было бы сказать, что собака учится чему-то лучше, чем крыса, потому что она более голодна и больше стремится получить поощрение. В практической дрессировке совсем не обязательно работать с голодной лошадью. Наоборот, голодная лошадь измучит вас назойливыми требованиями корма, вместо того, чтобы подумать, что вы от нее хотите. Сразу после обеда лошадь тоже совсем не хочет учиться – кровь отливает от ее мозга к органам пищеварения и она, естественно, больше всего хочет постоять и поспать. Если вы собираетесь поощрять лошадь пищей, то проще всего отсыпать часть овса от ее дневной нормы и, подождав час-два после еды, предложить его уже в качестве поощрения.

Овес – удачное поощрение еще и тем, что он легко рассыпается. Если лошадь торопится и почти хватает вас за руку, лишь бы не упустить еду, то вскоре она заметит, что еды от этого становится меньше – овес рассыпается. Большинство лошадей, которых поощряют овсом, быстро научаются брать корм с руки осторожно. Морковь нужно резать длинными ломтиками, иначе лошади будет трудно ее взять с руки и жевать. Сухари не должны быть слишком маленькими. Величина поощрения должна быть на один глоток. Не больше – иначе лошадь быстро насытится, и не меньше – иначе она не захочет из-за него стараться. Сахар – неудачное поощрение. Для часового занятия нужно приготовить около сотни поощрений, а сотня кусочков сахара за день принесет вскоре лошади большие проблемы со здоровьем. Если ваша лошадь – сладкоежка – оставьте 3-4 кусочка для поощрения в исключительных случаях, когда она выполнила что-то действительно великолепно.

Поощрение почесыванием-поглаживанием хорошо в спокойной обстановке, особенно в деннике. Оно хорошо и в поле, когда вам больше нечем поощрить лошадь, но для работы его уже маловато. Поощрение отдыхом тоже может быть очень удобным, особенно когда вы разучиваете сложные элементы, требующие высокой координации движений. Часто люди преувеличивают значение похвалы голосом для лошади. Конечно, животное запоминает интонацию, даже отдельные слова, научается ассоциировать их с лакомством, отдыхом или почесыванием. И все же нужно понимать, что люди – очень разговорчивые существа с точки зрения лошади. Она привыкает к нашему голосу как к постоянному шуму и не всегда различает среди целой фразы одобрительное слово. Чтобы похвала была действительно эффективна, нужно выбрать одно, редко произносимое в остальное время, слово. Произносить его нужно только в тот момент, когда лошадь сделала что-то достойное поощрения. Если вы просто хотите приласкать лошадь, то «золотое слово» произносить не нужно, иначе оно потеряет свое значение для лошади.

Величина поощрения

Мы уже упомянули, что величина пищевого поощрения должна быть на один глоток, но обучение лошади происходит не только на плацу, но и все остальное время, когда вы только можете видеть или слышать друг друга. Общаясь со своим другом, вы высказываете свое одобрение – взглядом, восклицанием, улыбкой, хлопая по плечу или делая подарки, и сопереживание – взглядом, восклицанием и т.д., только с иной интонацией. Точно также происходит и ваше общение с лошадью. Все люди и животные, интуитивно или намеренно, манипулируют поведением друг друга, но некоторые делают это лучше, а некоторые хуже и лошадь не виновата, если не может вас правильно понять. Ошибка большинства людей, работающих с животными – это молчание. Если за минуту общения вы не высказали ничего, вы потеряли эту минуту. Это не значит, что вы должны постоянно «разговаривать», выразить свои мысли можно разными способами.

Несколькими страницами ранее, мы присваивали способам наказания баллы, по их силе воздействия. Подойдите к поощрению с этой же точки зрения. Обратить внимание на лошадь – это 1 балл (животные обычно хорошо замечают куда направлено ваше внимание). Сказать «а-ай!», как часто говорят на российских конюшнях, или «о-о-о», как говорят на Западе – это 2 балла. Похвалить словами «ай, умница!», «ай, браво!» (или «гу-уд бой», низким голосом, без восклицания, произносят западные тренеры) – это 3 балла. Погладить лошадь, сопроводив это теми же словами похвалы, - 4 балла. И, наконец, произнести «золотое слово» и дать поощрение – это 5 баллов.

Представьте себе, что вы чистите лошадь. Она взмахивает хвостом и бьет вас им по руке. «М-м-м», - выражаете вы свое недовольство. Через несколько секунд, когда она спокойно подставила бока под вашу щетку, вы говорите: «а-ай!». «Золотое слово» и поощрение скажут вашей лошади, что вы работаете над чем-то в данной ситуации и это усилит ее внимание. Лошадь не может быть внимательна очень долго, если она усилит внимание сейчас, то несколькими секундами раньше устанет на тренировке. Эффективное обучение занимает два-три периода по 3-5 минут, остальное время уходит на передвижения, поощрения, подготовку к выполнению элемента и так далее. Потерять несколько секунд – это не так мало. Поощрение «а-ай!» вполне достаточно, чтобы высказать одобрение, но не делать из рядовой ситуации тренировку. Вот вы вышли в манеж, лошадь на корде и вы просите ее идти шагом. Молодая лошадь взыграла и мчится галопом. Вы знаете эту лошадь и понимаете, что в данном случае она не сопротивляется, а скачет от избытка энергии. Вы также знаете, что для мышц полезнее постепенная разминка и хотите успокоить лошадь. Вы чуть качаете корду и говорите: «Ша-а-агом!». Лошадь чуть замедляет ход («а-ай!») и переходит на шаг («а-ай, умница!»). Так, вы выразили свое одобрение, не занимаясь обучением. После разминки на корде, вы садитесь в седло. Молодая лошадь раньше переступала при посадке, а теперь стоит спокойно – это уже достойно настоящего поощрения! Мастер-спортсмен может подсказать хорошее упражнение для развития вашей лошади, объяснить над чем вам нужно поработать, но все же главный секрет его успеха – моментальная реакция и одобрение малейшего изменения к лучшему в действиях или движениях лошади.

Вариативный режим

Методика свободного оперантного поведения, разработанная Скиннером, давала ученым большой простор для исследований процесса научения. Интересные данные были получены по разным типам вознаграждений. Оказалось, например, что постоянное поощрение нужно лишь во время обучения. Когда навык установился, то гораздо лучше его поддерживает вариативный режим подкрепления – поощрение поступает эпизодически, случайно и непредсказуемо для животного.

Карен Прайор сравнивает это с увлечением азартными играми. Если бы человек каждый раз получал бы небольшое вознаграждение от игрового автомата, то он быстро бы потерял к нему интерес – игра превратилась бы для него в нудную работу. «Людям нравится играть с автоматом именно потому, что невозможно предугадать заранее, то ли ничего не получишь, то ли какую-то мелочь, то ли сразу кучу денег, и когда будет это подкрепление (это может быть только один самый первый раз). Почему одни люди втягиваются в азартную игру, а другие могут поиграть и бросить, это уже другой вопрос, но для тех, кто попался на крючок, этим крючком стал вариативный режим положительного подкрепления».

Тренер должен быть один

Как-то одна девушка решила, что ее лошадь не подходит для большого спорта и решила ее продать. Известно, что после хорошего тренинга лошадь возрастает в цене в несколько раз, поэтому хозяйка наняла опытного берейтора для «предпродажной подготовки». Берейтор занимался с лошадью три раза в неделю. Еще три раза на нем продолжала ездить его хозяйка. Лошадь выглядела недоуменной, половину занятия берейтора она «вспоминала» предыдущее. «Когда же она будет готова к продаже?», - спрашивала хозяйка, но берейтор называл все еще очень отдаленные сроки. Тогда хозяйка изменила график работы лошади и наняла ей второго берейтора. Теперь лошадь два раза в неделю училась у одного «репетитора», другие два дня – у другого, а еще два на нем продолжала ездить хозяйка. Так она проверяла, чему научилась лошадь у дорогостоящих учителей. Вскоре лошадь уже не слушалась ни одного из них, забыла все, что когда-либо знала, и на морде у нее было написано: «ради Бога, вы все – оставьте меня в покое!!!»

Несколько человек требовали от лошади одно и то же, но бедное животное не в состоянии было что-либо понять. Тренеры, просто в силу своих физических особенностей, дают команду немного иначе, обучают лошадь одной команде каждый немного по-разному. Она не знает, что от нее хотят и не способна научится ни у кого из них. Не зря говорят: «У семи нянек дитя без глазу»!

Работать над чем-то одним

За время урока можно успеть повторить старые, хорошо выученные, навыки, и научить лошадь нескольким новым, если это делать последовательно. Одновременно над двумя навыками работать невозможно. Это утверждение обычно не вызывает сомнений, однако работа над двумя навыками в одно и то же время остается очень распространенной ошибкой в тренинге. Если у вас возникли какие-то сложности при обучении, в первую очередь подумайте, не в этом ли причина проблемы? Многие конкуристы, например, требуют, чтобы лошадь чисто брала высокие препятствия и по их желанию прибавляла или сокращала махи галопа между препятствиями. Во время тренировок имеет смысл сперва работать над высотой прыжка, а потом над количеством махов между низкими препятствиями – кавалетти или даже просто жердями, разложенными на земле. Когда оба навыка будут хорошо усвоены лошадью, можно постепенно соединить их. Всю эту работу можно проделать за одно занятие, но последовательно. Если же вы потребуете от лошади все сразу, она будет в течение множества занятий то сбивать жерди, то натыкаться на препятствия, не сумев уложиться в требуемое число махов. То же можно сказать и о соединении разных элементов в выездке, и о любой другой работе с лошадью.

Подходящее время для урока

Знать и делать – разные вещи. Самостоятельная лошадь может хорошо запомнить трюк или элемент, но при этом не выполнять его тогда, когда вы этого требуете. Причина обычно очевидна: ее внимание занято чем-то другим. Конечно, обучая лошадь, вы ставите себе целью ее стабильное послушание, но позаботиться о нем должны именно вы, а не лошадь. Если внимание животного сфокусировано на чем-то еще, то ваши команды становятся для лошади «шумом», к которому она скоро привыкает и не реагирует. Всегда старайтесь давать команды в такой момент, когда лошадь способна услышать вас и послушаться. Привыкнув слушаться в простых условиях, она отреагирует на вашу команду и в сложных.

Тот же принцип работает и при выборе времени для урока. Сразу после еды или прогулки, непосредственно перед едой или застоявшись в деннике, лошадь не способна учиться. Испытывая недостаток в общении, она будет стремиться вырваться и приблизиться к сородичу, а не к вам. Однако довольная своей жизнью лошадь в подходящее для урока время оставит табун и последует за вами, увлеченная общением и обучением новому.

Карен Прайор и ее книги

Научный язык требует большей четкости и объективности, чем литературный, но читать и слушать его – мучение, особенно для непрофессионала. Это одна из основных причин «запаздывающего» проникновения науки в практику. Когда речь идет о такой близкой к практике области исследований, как теория научения, становится особенно обидно. И, хотя Карен Прайор – известный ученый, ее основная заслуга, на мой взгляд, в способности передать сухие факты живым и увлекательным языком, понятным каждому человеку.

В 1960 году муж Карен Прайор, специалист по морской биологии, тогда еще аспирант гавайского университета, решил построить океанариум для представлений с дельфинами и для научной работы. Сама Карен, мать троих детей, биолог по образованию, опубликовала в 1963 году книгу по грудному вскармливанию. Постройка океанариума ее интересовала, но и только. До открытия оставалось три месяца, когда выяснилось, что «дрессируемые дельфины выдрессировали своих дрессировщиков давать им рыбу даром»! Проблема была все та же – в барьере терминов. Как биолог, Карен Прайор легко разобралась в инструкциях консультанта-психолога (проблемами научения животных в США занимались психологи) и поразилась изящности и увлекательности системы «оперантного научения». Так получилось, что с 1963 по 1971 год Карен Прайор занималась в основном дрессировкой дельфинов.

В 1972 году она покинула океанариум и не собиралась больше возвращаться к дрессировке. В 1975 году она закончила работу над книгой «Несущие ветер», а затем и «Не рычите на собаку!», в которых изложила суть метода простым и понятным языком. Написанные с большим чувством юмора, книги принесли ей широкую известность, и ее стали приглашать с лекциями по дрессировке. В 1992 году она вернулась в дрессировку и занялась обучением собак. Названные книги были переведены на русский язык в 1995 году, и наши читатели знают об описанном в них способе обучения как об «оперантном научении» или «обучении с положительным подкреплением». Вы вероятно знаете, что в качестве условного подкрепления (похвалы, за которой следует поощрение), дрессировщики дельфинов используют свисток. Собакам, как и лошадям, многие команды принято давать голосом и занимать рот свистком при их дрессировке неудобно. Для собак, в качестве условного положительного подкрепления, были разработаны небольшие, очень простые устройства, издающие громкий щелчок, по-английски «клик» (“click”). Благодаря этому устройству метод Карен Прайор стал называться «кликер-дрессировка» (“clicker-training”). В 1999 году вышло первое издание книги «Clicker training for dogs», которая была переведена на русский язык в 2005 году. Сегодня Карен Прайор автор семи книг, успешный предприниматель, основатель компании Sunshine Books, Inc. (издание книг по поведению), а также сайта и Интернет-магазина, создатель Фонда Прайор, бабушка семи внуков и владелец двух собак и кошки.

В конном мире, пожалуй самым авторитетным специалистом по «кликер-дрессировке» лошадей является Александра Курланд, автор обучающих книг и видео. К сожалению, ее книги пока не переведены на русский язык, однако тем читателям, которые заинтересуются методом и не имеют проблем с английским языком, я особенно рекомендую почитать ее книгу “The Click That Teaches: A Step-By-Step Guide In Pictures”.

Метод «кликер-дрессировка» основан на научных исследованиях, поэтому он универсален. Большинство людей использует его интуитивно – если вы, говоря лошади «Браво!», даете ей лакомство, вы уже работаете этим методом. Как вы увидите суть метода очень проста и он может применяться в совмещении со многими другими методами.

Метод кликера

Принцип метода очень простой – вместо того, чтобы наказывать неправильное поведение, нужно поощрять правильное. Необходимо дождаться (или создать удобную для этого ситуацию), когда правильное поведение проявится, и сразу его поощрить. При этом неправильное поведение просто игнорируется. Вскоре животное, чтобы получить поощрение самым простым и быстрым способом, начинает вести себя правильно – счастлив хозяин и счастлива лошадь, зная, что поступает хорошо, и зная, как заслужить похвалу. Похвала должна быть моментальной, поэтому если ваш «клик» - это слово, то очень короткое, которое можно произнести точно в момент движения или в самом начале хорошего поступка.

Эта книга посвящена поведению лошади и взаимоотношению ее с человеком, поэтому методам обучения я могу посвятить лишь небольшую ее часть. Здесь я привожу лишь основные положения «кликер-дрессировки» Карен Прайор, необходимые для того, чтобы понять, о чем будет идти речь в следующей главе о лечении проблем поведения.

1. Всегда сперва «клик», затем поощрение. Нет необходимости держать поощрение перед лошадью, приманивая или привлекая ее. Неважно, что делает животное в тот момент, когда вы даете поощрение, лошадь запомнит, что она делала в тот момент, когда услышала «клик». После «клика» позвольте ей прекратить нужное вам поведение, поощрите, а затем снова вернитесь к обучению.

2. «Клик» всегда раздается во время нужного поведения. «Клик» как стрела, он попадает в сознание лошади как сообщение: «То, что твое тело делает в этот момент будет вознаграждено». Если вы поощряете лошадь за прыжок, нужно «кликнуть» в тот момент, когда она будет в воздухе. Помните, что правильный заход на препятствие или приземление – это отдельные задачи, над которыми вы и работать будете отдельно.

3. «Клик» всегда одиночный. Как бы ни было хорошо исполнение команды, «кликать» нужно лишь один раз. «Клик» говорит животному, что его поведение в данную секунду вам нравиться. Если вы издаете несколько «кликов», то животное не понимает, какой из них выражает ваше одобрение, так как его поведение за это время не улучшилось. В дальнейшем, лошадь начинает думать, что лишь несколько «кликов» означают «правильно».

4. Не используйте кликер, чтобы привлечь внимание животного, или чтобы заставить его приблизиться. Сперва это может ухудшить поведение животного. Представьте, лошадь начинает разгоняться, вы пугаетесь и говорите ей: «На!» (универсальный «кликер» на российских конюшнях!). Лошадь останавливается и получает поощрение. «На!» прозвучало в момент разгона, следовательно, - думает лошадь, - если я разгонюсь еще раз, то снова получу поощрение. Всадник хочет, чтобы я увеличивала скорость». Позже, окончательно запутавшись в ваших пожеланиях, лошадь перестает реагировать, а «клик» больше не несет для нее ни какой информации.

5. Не используйте «кликер», чтобы подбодрить лошадь или в качестве стартового сигнала. Следует всегда думать: «Что именно я поощряю?» Если лошадь неотзывчива и вы издаете «клик», чтобы побудить ее к активности, на деле вы поощряете ее неотзывчивость. «Клик» должен раздаваться только в момент желательного поведения.

6. Подберите правильную величину пищевого поощрения и тип. Короткое первое занятие имеет смысл начинать за пять минут до еды. Кормите животное регулярно, тогда легче будет выбрать время, когда оно слегка проголодалось. Поощрение должно быть частью дневного рациона, а не добавкой к нему. Возьмите то, что ваша лошадь действительно любит. Тренинг всегда должен быть веселым. Разбавляйте работу над сложной задачей легкими заданиями.

7. Меняйте сложность задания. Нельзя с каждым заданием увеличивать сложность – животное лишь возненавидит работу. Если вы учите лошадь стоять на развязках в проходе конюшни, или не выдергивать копыто из рук коваля, поощрите ее за 10 секунд неподвижности, потом за 25, потом за 15 – интервал будет то больше, то меньше. Пусть она не знает, сколько ей придется терпеть в каждый последующий раз и надеется освободиться и получить поощрение поскорее. Всегда заканчивайте урок чем-то простым и приятным, чтобы животное обязательно получило награду.

8. Тренировки должны быть короткими и разнообразными, не стоит повторять одно и то же без конца. Три пятиминутных занятия принесут больше пользы, чем три получасовых, за которые вы оба успеете устать. Лошадь может месяцами помнить то, что запомнила за одно занятие с хорошим тренером. Качество занятий важнее, чем количество.

9. Прогресс будет приходить небольшими шагами. В традиционном тренинге мы требуем выполнения всего действия целиком, и поправляем любое отклонение от этого поведения. При формировании поведения с помощью «кликер-дрессировки», мы строим полное движение из маленьких частиц. Животное учится зарабатывать поощрение с каждым новым шагом. Это требует больше внимания и вдумчивости тренера, но зато уровень прогресса может быть невероятным.

10. Если хорошо выученный навык вдруг пропадает, «вернитесь в детский сад». Обычно это случается, когда изменяются окружающие условия. Приезжая на соревнования не стоит удивляться, что лошадь забыла все, что знала. Нужно «вернуться в детский сад», то есть нужно вкратце повторить процедуры обучения нескольких элементов, не требуя сразу многого. Как только лошадь пройдет по цепочке от самого легкого движения до более сложного, даже не обязательно всех элементов, она снова вернется к прежнему уровню подготовки, который с большой вероятностью уже не пропадет на следующих соревнованиях. Важно понимать, что это – временный провал в памяти и здесь не за что наказывать.

11. Не думайте, что вы читаете мысли животного. Вы можете лишь предполагать, но никогда не сможете узнать точно, что произошло в голове лошади. Вам может показаться, что причина в испуге, упрямстве или стремлении к лидерству. В любом случае, если она что-то делала хорошо, а теперь не делает – не забивайте себе голову, гадая в чем причина – просто вернитесь к «детскому саду», повторите всю процедуру выработки небольшими шагами, пока нужный навык не восстановится – этот путь всегда занимает меньше всего сил и времени.

12. Ведите ученика за собой. Всегда, когда что-то получилось хорошо, есть искушение повторять это снова и снова. Но, рано или поздно, лошадь сделает ошибку и все испортится. Остановитесь, когда вы получили хороший результат – пусть животное запомнит успех. Если сегодня вы не продвинулись ни на шаг и хотите закончить тренировку, потребуйте что-нибудь совсем легкое, чтобы потом вы точно смогли наградить лошадь. Закончить занятие без поощрения – равносильно наказанию.

13. Получайте удовольствие! Если вы рассердились или устали – остановитесь. Подождите и продолжите снова позже или в другой раз. Нельзя показывать свое раздражение животному, иначе оно станет считать вас непредсказуемым человеком и ваши отношения испортятся.