Метод 3. Отрицательное подкрепление

Отрицательным подкреплением является любое неприятное событие или стимул, пусть даже весьма слабый, действие которого можно прекратить или избежать, изменив поведение. Когда на поле с электрическим ограждением корова касается ограды носом, то получает удар электрического тока, но как только она отпрянет назад, действие тока прекращается. Они научается избегать ударов тока с помощью того, что не подходит к ограде. Избегание загородки было подкреплено, но подкрепление было не положительным, а отрицательным.

Жизнь изобилует отрицательными подкреплениями. Мы изменяем положение тела, когда становится неудобно сидеть на стуле. Мы стремимся скорее войти в дом, когда идет дождь. Некоторые люди считают, что запах чеснока возбуждает аппетит, другие же находят его отвратительным. Стимул становится отрицательным подкреплением только в том случае, если он воспринимается субъектом как неприятный и если изменение поведения направлено на уменьшение неприятных ощущений.

Отличие отрицательного подкрепления от наказания заключается в том, что отрицательное подкрепление, подобно положительному, происходит во время поведения, а не после него, и может быть "включено" изменением поведения. Как вы видели в первой главе, почти все традиционные методы дрессировки животных строились на применении отрицательного подкрепления. Лошадь обучается поворачивать налево, когда тянут за левую вожжу, потому что этим она может ослабить давление мундштука на левый угол рта. Слоны, волы, верблюды и другие вьючные животные обучаются двигаться вперед, останавливаться, поднимать тяжести и т.д. чтобы избежать натяжения повода, тычка или удара стека, стрекала или кнута. Отрицательное подкрепление очень подходящий метод формирования поведения и может применяться столь же эффективно, как положительное, поскольку его применение одномоментно с поведением и стимулы "шпыняния" прекращаются дрессировщиком, когда реакция правильна.

По отношению друг к другу люди постоянно применяют отрицательное подкрепление: строгий взгляд, нахмуренные брови, неодобрительное замечание. Некоторые применяют отрицательное подкрепление слишком часто. Жизнь некоторых детей, супругов и даже родителей представляет собой постоянное ежедневное усилие вести себя так, чтобы избежать отрицательных подкреплений от тех, кого они любят. Слишком частое применение отрицательного подкрепления, не скомпенсированное возможностью положительного подкрепления, может привести к появлению нежелательных черт личности, не обязательно страха и ярости, создаваемых наказанием, но робости, неуверенности в себе, тревожности. Если вы не хотите, чтобы ребенок, который очень старается не вызывать ваше неудовольствие не стал эмоционально неполноценным, он должен иметь успешный опыт в доставлении вам удовольствия.

Даже среди взрослых тот руководитель, офицер или тренер, которые хотят усовершенствования от подчиненных и при этом в основном высказывают неудовольствие, могли бы добиться лучших результатов, если бы наряду с этим существовала также возможность положительного подкрепления. Умудренные опытом взрослые могут вытерпеть большое количество отрицательных подкреплений, но даже и они становятся мрачными, если, кроме этого, они ничего не получают. Сочетание положительного и отрицательного подкреплений гораздо более эффективно.

Тренер баскетбольной команды, выступавшей с огромным успехом, стал знаменит своей жесткостью и даже грубостью. Некоторые из игроков не смогли вынести такого режима и ушли из команды. Однажды вечером я видела этого человека по телевизору. Хотя на первый взгляд он казался чрезвычайно грозным, в его взаимодействии с командой то и дело встречались очень отчетливые положительные подкрепления -- одобрительный взгляд, дружеский шлепок, -- а отрицательное подкрепление прекращалось тотчас же как выполнение действия улучшалось. В моральном отношении команда выглядела великолепно.

Единственный случай, когда отрицательное подкрепление предпочтительнее любого позитивного подхода, это когда мы имеем дело с сознательным и преднамеренным отклонением поведения. Если вы совершенно уверены в том, что субъект знает, что должно быть сделано, а делает вместо этого что-либо другое, чтоб, скажем, просто посмотреть, что из этого выйдет, тогда знак вашего неодобрения -- нахмуренный лоб, замечание, натяжение поводка или вожжи, прекращение занятий, выговор -- должны последовать незамедлительно и быть четкими. Это единственный случай, когда сильное отрицательное подкрепление, возможно, и не вызовет чувства обиды. Даже животные знают, когда они пытаются вывести вас из себя, и получают удовлетворение от того, что им дают понять, что это нельзя. В особенности это касается детей, которые чувствуют себя увереннее, если знают границы дозволенного. Если ребенок нарочно преступает эти пределы, то отрицательное подкрепление дает ему нужную информацию о положении границ дозволенного.

Секрет применения отрицательного подкрепления состоит в том, чтоб научиться прекращать его, когда поведение субъекта улучшилось хоть немножко. Некоторые матери и учителя делают это интуитивно правильно. Четырехлетний малыш в ярости выкрикивает: "Я тебя ненавижу, я тебя ненавижу" и лупит кулаками по ногам матери. Негативное подкрепление со стороны матери состоит в том, что она перестает обращать на ребенка внимание и начинает заниматься своими делами. Когда ярость сменяется сопением и потерянным видом, мать сейчас же снова обращает свое внимание на ребенка, обнимает, прижимает к себе, меняет тему разговора.

Психолог может сказать, что на самом деле в приведенном выше примере сработал метод 4 -- затухание, что поведение сошло на нет, так как не приводило ни к какому результату. Но мне кажется, что когда на маленького ребенка перестают обращать внимание, это для него результат; это сильный отрицательный стимул, который может быть применен наравне с любым другим отрицательным подкреплением.

Другой секрет применения отрицательного подкрепления состоит в уверенности в том, что субъект воспринимает его как следствие собственных действий, а не ваше произвольное действие. Предположим, у вас есть большая лохматая собака, которая любит спать в комнате на диване. Если вы ей убедительно показываете, что вам это не безразлично, собака может быстро научиться соскакивать с дивана, заслышав ваше приближение, потому что боится наказания, но отлупить ее, застав на диване, еще не значит управлять ее поведением в ваше отсутствие. Есть один старый прием, который иногда помогает в этом случае: поставьте на диван несколько маленьких мышеловок. Когда собака вспрыгнет на диван, мышеловки сработают, испугают, а может, и ударят собаку. Собственное действие собаки привело к отрицательному подкреплению, и эта первая неудача может оказаться достаточной, чтобы отучить украдкой забираться на диван. (Я спешу добавить, что это скорее всего подействует только на глупых собак. Хотя я не могу позволить себе предположить любителям собак список пород, на которых этот прием подействует, я скажу лишь, что для некоторых пород он может оказаться совсем не эффективным. Хозяин одного боксера, применивший этот прием, рассказывал, что его собака, увидев мышеловки, стащила покрывало со спинки дивана, накрыла им ммшеловки, разрядила их, а затем легла на диван поверх покрывала.)

Существуют такие категории субъектов, на которых отрицательное подкрепление не действует и совершенно не подходит для них, например младенцы. Каждая мать знает, что практически невозможно изменить активное поведение малыша с помощью отрицательного подкрепления -- сделать так, чтобы малыш, начавший ходить, не хватал побрякушки с кофейного столика бабушки, постоянно повторяя: "Нельзя!" или шлепая его по ручонке каждый раз, когда он это делает. Гораздо лучше применить метод 8 (смена мотивации) поместив эти предметы вне досягаемости, или метод 5 переключение на несовместимую деятельность), дав ему какую-нибудь другую игрушку Маленьким детям просто несвойственно легкое приобретение неприятного опыта, но они могут с легкостью обучаться с помощью положительного подкрепления Можно сказать, что дети рождаются для того, чтобы радоваться, а не повиноваться.

Щенки тоже имеют склонность к более легкому научению с помощью положительного подкрепления, а отрицательное подкрепление сбивает их с толку и пугает. Вот почему большинство дрессировщиков не начинает обучение выполнению формальных команд, раньше чем собака достигнет шестимесячного возраста. С помощью лакомства и ласки вы можете обучить щенка ходить в ошейнике и на поводке следовать за вами на прогулке, но наденьте на него затягивающуюся цепочку и начните настаивать на том, чтоб он научился ходить рядом, сидеть, стоять, и прежде чем вы успеете его чему-нибудь научить, у вас будет затерроризированный и запуганный щенок. Нужно время, чтобы научиться реагировать на отрицательное подкрепление, а младенчество слишком быстротечно.

Есть и другая категория субъектов, которые не поддаются воздействию отрицательного подкрепления: это дикие животные. Каждый, кто когда-либо имел дело с питомцем из диких животных -- оцелотом, волком, енотом и т.д., -- знают что они не воспринимают команды. Чрезвычайно трудно например, научить волка ходить на поводке, даже если вырастите его с очень раннего возраста и он совершенно ручной Если вы натягиваете поводок, он автоматически начинает тянуть вперед, а если вы очень настаиваете и натягиваете поводок слишком сильно, волк, несмотря на то, что он обычно спокоен и контактен, впадает в панику и старается удрать.

Возьмите на поводок ручную выдру, и либо вы будете идти туда, куда хочет выдра, либо она будет бороться с поводком изо всех сил. Создается впечатление, что нельзя найти ту золотую середину, когда легкий рывок можно использовать для выработки послушания.

То же самое относится и к дельфинам. При всей своей хваленой способности к обучению они всему либо сопротивляются, либо всеми силами стараются улизнуть. Толкните дельфина, и он толкнет вас. Попытайтесь перегнать дельфинов из одного бассейна в другой с помощью сети; если они почувствовали, что пространство вокруг них сужается, смелые бросаются в атаку на сеть, а робкие в бессильном страхе кидаются на дно бассейна. Нужно с помощью положительного подкрепления обучать дельфинов спокойно плыть перед сетью; но даже если вы это сделали, почти при любой манипуляции с сетью один человек должен стоять наготове, чтобы в случае надобности броситься в воду и освободить животное, которое запуталось в сети, прежде чем оно утонет.

Психолог Гарри Фрэнк предполагает, что это сопротивление отрицательному подкреплению составляет принципиальное различие между дикими и одомашненными животными. Все одомашненные животные восприимчивы к отрицательному подкреплению -- их можно погонять, заставлять, выгонять вон, и вообще оказывать разное давление. Мы, люди, преднамеренно или случайно с помощью направленного отбора выработали у них эту особенность. В конце концов, корова, которую нельзя пасти и гнать, которая, подобно волку или дельфину, либо сопротивляется неприятным воздействиям, либо впадает в панику и спасается бегством, эта корова кончит тем, что останется на ночь вне загона и будет съедена львом; или же поскольку она всем досаждает, то скорее всего она будет зарезана и съедена людьми. Ее гены не сохранятся в генофонде популяции.

Послушание, выражающееся либо в готовности получать удары, либо в отсутствии моментальной реакции "сопротивляйся или убегай", при котором отрицательное подкрепление умеренной силы может быть использовано для корреляции обучения, заложено в наших домашних животных. За одним исключением -- кошка. Научить, например, кошку ходить на поводке поистине очень трудно; сходите на представление, в котором участвуют кошки, и вы увидите, что даже профессиональные дрессировщики с этим не связываются -- кошек носят на руках, их сажают в клетку, но они не ходят на поводке.

Гарри Фрэнк предполагает, что это потому, что кошка не является истинно домашним животным и поэтому у нее отсутствует восприимчивость к отрицательному подкреплению. Может быть также, что кошка является комменсалом, животным, которое, подобно крысе и таракану, разделяет с нами жилище, извлекая из этого выгоду. Но скорее кошка является симбионтом -- животным, общение которого с нами приносит взаимную выгоду -- от нас она получает пищу, кров, ласку, кошка же ловит у нас мышей, забавляет нас, мурлычет. Однако работы и послушания нет. Это может объяснить нелюбовь некоторых людей к кошкам: их страшит неуправляемость.

Для всех кошконенавистников скажу, существует одно отрицательное подкрепление, которое на кошку действует: брызнуть водой ей в мордочку. Однажды на обеде, на который я надела свое новое черное шерстяное платье, белая ангорская кошка хозяйки дома без конца вспрыгивала мне на колени. Хозяйка находила это очень милым, но мне совсем не хотелось, чтобы мое платье было в белых кошачьих волосах. Когда она на меня не глядела, я окунула пальцы в бокал с вином и брызнула кошке в мордочку. Она тотчас же исчезла и больше не возвращалась: тонкое и полезное отрицательное подкрепление.

Отрицательным подкреплением является любое неприятное событие или стимул, пусть даже весьма слабый, действие которого можно прекратить или избежать, изменив поведение. Когда на поле с электрическим ограждением корова касается ограды носом, то получает удар электрического тока, но как только она отпрянет назад, действие тока прекращается. Они научается избегать ударов тока с помощью того, что не подходит к ограде. Избегание загородки было подкреплено, но подкрепление было не положительным, а отрицательным.

Жизнь изобилует отрицательными подкреплениями. Мы изменяем положение тела, когда становится неудобно сидеть на стуле. Мы стремимся скорее войти в дом, когда идет дождь. Некоторые люди считают, что запах чеснока возбуждает аппетит, другие же находят его отвратительным. Стимул становится отрицательным подкреплением только в том случае, если он воспринимается субъектом как неприятный и если изменение поведения направлено на уменьшение неприятных ощущений.

Отличие отрицательного подкрепления от наказания заключается в том, что отрицательное подкрепление, подобно положительному, происходит во время поведения, а не после него, и может быть "включено" изменением поведения. Как вы видели в первой главе, почти все традиционные методы дрессировки животных строились на применении отрицательного подкрепления. Лошадь обучается поворачивать налево, когда тянут за левую вожжу, потому что этим она может ослабить давление мундштука на левый угол рта. Слоны, волы, верблюды и другие вьючные животные обучаются двигаться вперед, останавливаться, поднимать тяжести и т.д. чтобы избежать натяжения повода, тычка или удара стека, стрекала или кнута. Отрицательное подкрепление очень подходящий метод формирования поведения и может применяться столь же эффективно, как положительное, поскольку его применение одномоментно с поведением и стимулы "шпыняния" прекращаются дрессировщиком, когда реакция правильна.

По отношению друг к другу люди постоянно применяют отрицательное подкрепление: строгий взгляд, нахмуренные брови, неодобрительное замечание. Некоторые применяют отрицательное подкрепление слишком часто. Жизнь некоторых детей, супругов и даже родителей представляет собой постоянное ежедневное усилие вести себя так, чтобы избежать отрицательных подкреплений от тех, кого они любят. Слишком частое применение отрицательного подкрепления, не скомпенсированное возможностью положительного подкрепления, может привести к появлению нежелательных черт личности, не обязательно страха и ярости, создаваемых наказанием, но робости, неуверенности в себе, тревожности. Если вы не хотите, чтобы ребенок, который очень старается не вызывать ваше неудовольствие не стал эмоционально неполноценным, он должен иметь успешный опыт в доставлении вам удовольствия.

Даже среди взрослых тот руководитель, офицер или тренер, которые хотят усовершенствования от подчиненных и при этом в основном высказывают неудовольствие, могли бы добиться лучших результатов, если бы наряду с этим существовала также возможность положительного подкрепления. Умудренные опытом взрослые могут вытерпеть большое количество отрицательных подкреплений, но даже и они становятся мрачными, если, кроме этого, они ничего не получают. Сочетание положительного и отрицательного подкреплений гораздо более эффективно.

Тренер баскетбольной команды, выступавшей с огромным успехом, стал знаменит своей жесткостью и даже грубостью. Некоторые из игроков не смогли вынести такого режима и ушли из команды. Однажды вечером я видела этого человека по телевизору. Хотя на первый взгляд он казался чрезвычайно грозным, в его взаимодействии с командой то и дело встречались очень отчетливые положительные подкрепления -- одобрительный взгляд, дружеский шлепок, -- а отрицательное подкрепление прекращалось тотчас же как выполнение действия улучшалось. В моральном отношении команда выглядела великолепно.

Единственный случай, когда отрицательное подкрепление предпочтительнее любого позитивного подхода, это когда мы имеем дело с сознательным и преднамеренным отклонением поведения. Если вы совершенно уверены в том, что субъект знает, что должно быть сделано, а делает вместо этого что-либо другое, чтоб, скажем, просто посмотреть, что из этого выйдет, тогда знак вашего неодобрения -- нахмуренный лоб, замечание, натяжение поводка или вожжи, прекращение занятий, выговор -- должны последовать незамедлительно и быть четкими. Это единственный случай, когда сильное отрицательное подкрепление, возможно, и не вызовет чувства обиды. Даже животные знают, когда они пытаются вывести вас из себя, и получают удовлетворение от того, что им дают понять, что это нельзя. В особенности это касается детей, которые чувствуют себя увереннее, если знают границы дозволенного. Если ребенок нарочно преступает эти пределы, то отрицательное подкрепление дает ему нужную информацию о положении границ дозволенного.

Секрет применения отрицательного подкрепления состоит в том, чтоб научиться прекращать его, когда поведение субъекта улучшилось хоть немножко. Некоторые матери и учителя делают это интуитивно правильно. Четырехлетний малыш в ярости выкрикивает: "Я тебя ненавижу, я тебя ненавижу" и лупит кулаками по ногам матери. Негативное подкрепление со стороны матери состоит в том, что она перестает обращать на ребенка внимание и начинает заниматься своими делами. Когда ярость сменяется сопением и потерянным видом, мать сейчас же снова обращает свое внимание на ребенка, обнимает, прижимает к себе, меняет тему разговора.

Психолог может сказать, что на самом деле в приведенном выше примере сработал метод 4 -- затухание, что поведение сошло на нет, так как не приводило ни к какому результату. Но мне кажется, что когда на маленького ребенка перестают обращать внимание, это для него результат; это сильный отрицательный стимул, который может быть применен наравне с любым другим отрицательным подкреплением.

Другой секрет применения отрицательного подкрепления состоит в уверенности в том, что субъект воспринимает его как следствие собственных действий, а не ваше произвольное действие. Предположим, у вас есть большая лохматая собака, которая любит спать в комнате на диване. Если вы ей убедительно показываете, что вам это не безразлично, собака может быстро научиться соскакивать с дивана, заслышав ваше приближение, потому что боится наказания, но отлупить ее, застав на диване, еще не значит управлять ее поведением в ваше отсутствие. Есть один старый прием, который иногда помогает в этом случае: поставьте на диван несколько маленьких мышеловок. Когда собака вспрыгнет на диван, мышеловки сработают, испугают, а может, и ударят собаку. Собственное действие собаки привело к отрицательному подкреплению, и эта первая неудача может оказаться достаточной, чтобы отучить украдкой забираться на диван. (Я спешу добавить, что это скорее всего подействует только на глупых собак. Хотя я не могу позволить себе предположить любителям собак список пород, на которых этот прием подействует, я скажу лишь, что для некоторых пород он может оказаться совсем не эффективным. Хозяин одного боксера, применивший этот прием, рассказывал, что его собака, увидев мышеловки, стащила покрывало со спинки дивана, накрыла им ммшеловки, разрядила их, а затем легла на диван поверх покрывала.)

Существуют такие категории субъектов, на которых отрицательное подкрепление не действует и совершенно не подходит для них, например младенцы. Каждая мать знает, что практически невозможно изменить активное поведение малыша с помощью отрицательного подкрепления -- сделать так, чтобы малыш, начавший ходить, не хватал побрякушки с кофейного столика бабушки, постоянно повторяя: "Нельзя!" или шлепая его по ручонке каждый раз, когда он это делает. Гораздо лучше применить метод 8 (смена мотивации) поместив эти предметы вне досягаемости, или метод 5 переключение на несовместимую деятельность), дав ему какую-нибудь другую игрушку Маленьким детям просто несвойственно легкое приобретение неприятного опыта, но они могут с легкостью обучаться с помощью положительного подкрепления Можно сказать, что дети рождаются для того, чтобы радоваться, а не повиноваться.

Щенки тоже имеют склонность к более легкому научению с помощью положительного подкрепления, а отрицательное подкрепление сбивает их с толку и пугает. Вот почему большинство дрессировщиков не начинает обучение выполнению формальных команд, раньше чем собака достигнет шестимесячного возраста. С помощью лакомства и ласки вы можете обучить щенка ходить в ошейнике и на поводке следовать за вами на прогулке, но наденьте на него затягивающуюся цепочку и начните настаивать на том, чтоб он научился ходить рядом, сидеть, стоять, и прежде чем вы успеете его чему-нибудь научить, у вас будет затерроризированный и запуганный щенок. Нужно время, чтобы научиться реагировать на отрицательное подкрепление, а младенчество слишком быстротечно.

Есть и другая категория субъектов, которые не поддаются воздействию отрицательного подкрепления: это дикие животные. Каждый, кто когда-либо имел дело с питомцем из диких животных -- оцелотом, волком, енотом и т.д., -- знают что они не воспринимают команды. Чрезвычайно трудно например, научить волка ходить на поводке, даже если вырастите его с очень раннего возраста и он совершенно ручной Если вы натягиваете поводок, он автоматически начинает тянуть вперед, а если вы очень настаиваете и натягиваете поводок слишком сильно, волк, несмотря на то, что он обычно спокоен и контактен, впадает в панику и старается удрать.

Возьмите на поводок ручную выдру, и либо вы будете идти туда, куда хочет выдра, либо она будет бороться с поводком изо всех сил. Создается впечатление, что нельзя найти ту золотую середину, когда легкий рывок можно использовать для выработки послушания.

То же самое относится и к дельфинам. При всей своей хваленой способности к обучению они всему либо сопротивляются, либо всеми силами стараются улизнуть. Толкните дельфина, и он толкнет вас. Попытайтесь перегнать дельфинов из одного бассейна в другой с помощью сети; если они почувствовали, что пространство вокруг них сужается, смелые бросаются в атаку на сеть, а робкие в бессильном страхе кидаются на дно бассейна. Нужно с помощью положительного подкрепления обучать дельфинов спокойно плыть перед сетью; но даже если вы это сделали, почти при любой манипуляции с сетью один человек должен стоять наготове, чтобы в случае надобности броситься в воду и освободить животное, которое запуталось в сети, прежде чем оно утонет.

Психолог Гарри Фрэнк предполагает, что это сопротивление отрицательному подкреплению составляет принципиальное различие между дикими и одомашненными животными. Все одомашненные животные восприимчивы к отрицательному подкреплению -- их можно погонять, заставлять, выгонять вон, и вообще оказывать разное давление. Мы, люди, преднамеренно или случайно с помощью направленного отбора выработали у них эту особенность. В конце концов, корова, которую нельзя пасти и гнать, которая, подобно волку или дельфину, либо сопротивляется неприятным воздействиям, либо впадает в панику и спасается бегством, эта корова кончит тем, что останется на ночь вне загона и будет съедена львом; или же поскольку она всем досаждает, то скорее всего она будет зарезана и съедена людьми. Ее гены не сохранятся в генофонде популяции.

Послушание, выражающееся либо в готовности получать удары, либо в отсутствии моментальной реакции "сопротивляйся или убегай", при котором отрицательное подкрепление умеренной силы может быть использовано для корреляции обучения, заложено в наших домашних животных. За одним исключением -- кошка. Научить, например, кошку ходить на поводке поистине очень трудно; сходите на представление, в котором участвуют кошки, и вы увидите, что даже профессиональные дрессировщики с этим не связываются -- кошек носят на руках, их сажают в клетку, но они не ходят на поводке.

Гарри Фрэнк предполагает, что это потому, что кошка не является истинно домашним животным и поэтому у нее отсутствует восприимчивость к отрицательному подкреплению. Может быть также, что кошка является комменсалом, животным, которое, подобно крысе и таракану, разделяет с нами жилище, извлекая из этого выгоду. Но скорее кошка является симбионтом -- животным, общение которого с нами приносит взаимную выгоду -- от нас она получает пищу, кров, ласку, кошка же ловит у нас мышей, забавляет нас, мурлычет. Однако работы и послушания нет. Это может объяснить нелюбовь некоторых людей к кошкам: их страшит неуправляемость.

Для всех кошконенавистников скажу, существует одно отрицательное подкрепление, которое на кошку действует: брызнуть водой ей в мордочку. Однажды на обеде, на который я надела свое новое черное шерстяное платье, белая ангорская кошка хозяйки дома без конца вспрыгивала мне на колени. Хозяйка находила это очень милым, но мне совсем не хотелось, чтобы мое платье было в белых кошачьих волосах. Когда она на меня не глядела, я окунула пальцы в бокал с вином и брызнула кошке в мордочку. Она тотчас же исчезла и больше не возвращалась: тонкое и полезное отрицательное подкрепление.