Я публикую большую и довольно серьёзную статью. Если вывесить её целиком, она займёт много места и её будет тяжело читать. Может быть, как делал с прежними большими статьями, объединю части позже – когда всё будет заведомо прочитано всеми желающими.
Часть 1: Концепция подкрепления в бихевиоризме
Часть 2: Подкрепление в теории и практике дрессировки
Часть 3.1: Положительное подкрепление в интеллектуальной дрессировке
Часть 3.2: Отрицательное подкрепление в интеллектуальной дрессировке
Хоть статья и написана в стиле научного доклада, она может оказаться интересна очень многим – и профессиональным кинологам (предвижу их шипение после прочтения второй части!), и собаководам-любителям.
Следует оговориться: большинство примеров и рассуждений в статье касаются собак, поскольку подкрепления обычно рассматриваются как средство дрессировки. На самом же деле, вся теория в равной мере касается и кошек, и любых других животных.
1. Положительное подкрепление
Вспомним главный тезис бихевиоризма, касающийся #подкрепления :
НАИБОЛЕЕ НАДЕЖНО ЗАКРЕПЛЯЕТСЯ САМОПОДКРЕПЛЯЕМОЕ ПОВЕДЕНИЕ. ПОЭТОМУ ЗАЛОГОМ УСПЕШНОГО ОБУЧЕНИЯ СОБАКИ СТАНОВИТСЯ ПЕРЕХОД ЖЕЛАТЕЛЬНОГО ПОВЕДЕНИЯ В КАТЕГОРИЮ САМОПОДКРЕПЛЯЕМОГО.
Приходится констатировать, что эта цель не достигается ни одним из методов, применяемых в дрессировке. Зато нежелательное поведение, удовлетворяющее собственные потребности собаки, именно поэтому преодолевается и угашается с большим трудом.
Интеллектуальная дрессировка впервые ставит перед собой именно эту задачу.
Как же добиться того, чтобы желательное поведение стало самоподкрепляемым? Ответ на этот принципиально важный вопрос дает биологический смысл поведения в природе.
Все живое преследует одну главнейшую цель – это #приспособление к реальным условиям жизни ради повышения вероятности выживания. Все прочие потребности в этом смысле вторичны – они лишь поддерживают выживание. Поэтому основным критерием "хорошего" поведения становится повышение вероятности выживания.
Назовем эту цель любого живого существа потребностью в приспособлении. Это единственная глобальная и универсальная потребность, действующая в любой момент времени. Приспособление обеспечивает удовлетворение любой другой потребности, которая актуализируется сиюминутной информацией (внешней или внутренней). Поэтому все остальные потребности обладают локальным характером и непосредственно зависят от ситуации.
Кроме того, в силу биологических законов животные стремятся к экономии энергии, расходуемой на любую активность. Этим определяется эффективность поведения. Если возможно минимизировать затраты всех видов ресурсов, то запоминается наиболее экономичный вариант поведения.
Поэтому наиболее надежным способом формирования поведения становится результативность и эффективность приспособления к реальным условиям.
Законы выживания для домашней собаки отличны от законов выживания диких сородичей. Собака (и кошка), живущая в среде, созданной человеком, вынуждена бороться за #выживание по правилам, диктуемым человеком. Для динамичной, информационно насыщенной антропогенной среды естественных приспособлений, существующих в природе, оказывается совершенно недостаточно.
Человек определяет все реальные условия жизни домашних животных, тем самым задавая критерии выживания. Собаке остается лишь оптимальным образом приспосабливаться к этим условиям, используя: (1) врожденные задатки; (2) поведение, целенаправленно сформированное человеком; (3) результаты самостоятельного научения.
Управляя процессами приспособления собаки к условиям существования, созданным человеком, хозяин может сделать самоподкрепляемым любое желательное поведение собаки. Важно только то, чтобы с точки зрения собаки это поведение повышало вероятность выживания – то есть, удовлетворения любых локальных ситуативных потребностей.
Способы достижения этой цели предоставляются естественными стайными отношениями, существующими у собак в природе.
Стая в природе существует именно ради совместного выживания. Поэтому старшие члены стаи, более приспособленные к жизни, чем младшие и недостаточно опытные, получают право определять желательное, нежелательное и допустимое поведение младших. Критерии желательности – это максимальное совместное приспособление к реальным условиям. Следовательно, такое доминирование со стороны более приспособленных полностью отвечает интересам младших.
Таким образом, хозяин домашней собаки, заведомо лучше приспособленный к жизни в человеческой среде, получает естественное право диктовать нормы поведения. Это естественное доминирование человека воспринимается животным без протеста, а значит, может быть реализовано без малейшего конфликта. Единственным условием для этого становится доверие собаки к человеку – то есть, уверенность в том, что распоряжения хозяина направлены на удовлетворение жизненно важных потребностей.
Следует особо обратить внимание на слова "жизненно важные потребности". Это не удовольствия и не потребности малого приоритета, а то, что диктуется обстоятельствами в данный момент.
Возможность определения истинных потребностей предоставляет нам мотивационный анализ. Этот инструмент, основанный на биологических законах вида, достаточно прост, им могут владеть и пользоваться все хозяева собак.
Приведем простой пример использования локальных потребностей собаки для создания отношений доверия и естественного доминирования.
Известно, какие трудности возникают с выполнением команды "Рядом" в естественной обстановке. Даже если эта команда хорошо выполняется на дрессировочной площадке, на улице она оказывается не под силу собаке из-за того, что у нее возникают другие интересы. Предположим, что собака тянет к другой собаке, чтобы с ней пообщаться. Хозяин пытается "отвлечь" собаку той же игрушкой или вкусняшкой, но социальные #потребности собаки оказываются намного сильнее тех, на которые рассчитано подкрепление.
Есть простой способ превратить выполнение команды в #самоподкрепляемое поведение . Хозяин не наказывает, не запрещает, не уводит в сторону и даже не останавливает. Он ставит желанный результат в зависимость от выполнения команды. До тех пор, пока собака слышит и выполняет команду, идет спокойно и не натягивая поводок, они вместе движутся в ту сторону, куда хочется собаке. Но как только собака начинает торопиться и натягивает поводок, хозяин либо останавливается и спокойно пережидает до момента успокоения собаки, либо даже поворачивает в противоположном направлении и добивается того, чтобы команда выполнялась, как в упражнении. Собаке, конечно же, не хочется идти в другую сторону, она перестает тянуть вперед. Когда собака идет так, как желательно хозяину, они снова поворачивают туда, куда хочет идти собака. Тем самым хозяина как бы сообщает собаке: "Я не против твоих интересов, я готов им способствовать, но ты будешь добиваться результата тем поведением, которое нужно мне".
Таким образом желательное поведение становится самоподкрепляемым – собака добивается не вкусняшки и не игрушки, которые не имеют отношения к ее сиюминутной потребности, а удовлетворения этой самой потребности! Мы иногда образно называем этот прием "превращением своей проблемы в проблему собаки". Пусть собака сама ищет тот вариант приспособления, который угоден хозяину!
Использование собственных потребностей, как показала практика, позволяет довольно быстро (менее, чем за десять повторов) достичь надежного закрепления желательного поведения.
Нежелательное поведение так же быстро угашается – ведь оно оказывается нерезультативным и неэффективным. Пустая трата сил противоречит критерию выживания и, в конечном счете, угрожает самосохранению. Кроме того, любое поведение, не дающее результата, может привести к непредвиденному риску. Поэтому отсутствие результата очень часто оказывается самым лучшим способом борьбы с нежелательным поведением (конечно, если оно не стало симптомом какой-либо проблемы #психики ).
Нетрудно видеть, что подобные приемы не только не заставляют собаку протестовать против распоряжений хозяина, но и повышают уровень доверия и существенно укрепляют отношения.
Таким образом мы приходим к идее оценочного подкрепления, которое выражается символически любыми действиями хозяина, влияющими на достижение собакой нужного ей результата поведения. Эти действия мы называем символами оценки. Эти представления теснейшим образом смыкаются с условным подкреплением, принятым в бихевиоризме.
В процессе такого обучения #собаки желательному поведению достигаются еще два результата, субъективно очень важных для собаки. Их можно назвать внутренними подкреплениями. Они далеко не очевидны, но вполне понятны с точки зрения психологии.
Первое – это повышение самооценки (т.е., субъективной оценки своей приспособленности к жизни и своих возможностей). Оценка поведения хозяином, авторитетным именно в части выживания, непосредственно влияет на уверенность собаки в себе. Следовательно, повышается и устойчивость к стрессам – ведь собака владеет секретами результативного и эффективного поведения для самых разнообразных ситуаций.
Второе важное следствие сказывается на состоянии нервной системы. При выполнении осмысленных действий снижается неопределенность ситуации, а значит (в силу психологического закона, выраженного формулой П.В.Симонова), снижается и эмоциональное напряжение, сопутствующее данной ситуации. Состояние успокоения субъективно оценивается как гораздо более комфортное, чем нервозность и напряжение, а поэтому такое внутреннее подкрепление также оказывается весьма эффективным для запоминания и использования соответствующего поведения.
Итак, мы приходим к тому, что при правильной организации взаимодействий хозяина и собаки при выработке желательного поведения работает комплексное подкрепление, которое можно назвать естественным подкреплением.
Это подкрепление обладает всеми признаками идеального подкрепления, отвечающего всем идеям бихевиоризма:
- Поведение становится самоподкрепляемым с точки зрения глобальной потребности в приспособлении
- Поведение самоподкрепляемо с точки зрения локальной сиюминутной потребности
- Естественные подкрепления многозначны:
- Могут затрагивать не одну, а несколько потребностей в один и тот же момент времени
- Могут различаться по характеру
- Могут различаться по интенсивности
- Могут отражать предпочтительность той или иной формы поведения в его связи с реальной ситуацией.
Дополнительными "бонусами" становятся внутренние подкрепления, положительно влияющие на субъективное состояние собаки.
#желательное поведение #кошки #нежелательное поведение
