... ↑
metanymous в посте Metapractice (оригинал в ЖЖ)
Мы выберем относительно простой кусочек поведения, который может быть быстро повторен и свободно наблюдаем. Если наш объект наблюдений - это голубь, то поднятие головы выше определенной высоты вполне для этого подходит. Это можно наблюдать с помощью шкалы расположенной на дальней стенке ящика (за головой голубя). Сначала мы определяем высоту, на которой обычно держится голова, и выбираем такую высоту, которая достигает нечасто. Затем, держа во внимании шкалу мы начинаем открывать лоток с едой сразу же, как только голова голубя поднимается выше выбранной нами черты. Если эксперимент проводит в соответствии описанным условиям, то результат неизменен: мы наблюдаем немедленное изменение частоты, с которой голова голубя пересекает выбранную нами линию. Мы также наблюдаем, что и более высокие линии пересекаются. И мы можем постепенно увеличивать высоту линии, которая определяет выдачу еды. Через минуту или две поза голубя изменится таким образом, что голова голубя будет редко опускаться ниже той линии, которую мы выбрали изначально.
Реакцией, которая уже произошла, управлять нельзя и предсказать ту реакцию, которая уже произошла, мы конечно же тоже не можем. Мы можем предсказать только проявление похожей реакции в будущем. В таком случае удобнее использовать не саму реакцию, а класс реакций. В дальнейшем, для описания класса реакций будем использовать слово _оперант_. Этот термин подчеркивает тот факт, что поведение оперирует с окружения для создания последствий. Эти последствия определяют характеристики, по отношению к которым реакции называются похожими. Для примера: конкретный случай, когда голубь поднимает голову - это реакция. Поведение, которое называется _поднятие головы_, не зависимо от того, когда конкретные действия происходят - это оперант. Он также может быть определен не как законченное действие, а набор действий определенных высотой на которую поднимается голова голубя. То есть оперант определяется в физических терминах.
Павлов называл все события, которые усиливают поведение _подкреплением_ и все результирующие поведения _обуславливанием_. Однако в экспериментах Павлова подкрепляющий элемент образует пару со стимулов, в то время как при оперантном поведении подкрепляющий элемент зависит от реакции. Таким образом оперантное обуславливание требует отдельного анализа. При оперантном обуславливании мы _усиливаем_ оперант, то есть увеличиваем вероятность проявления реакции или делаем ее проявление более частым. А при Павловском обуславливании мы просто увлеличиваем величину реакцию вызываемую стимулом и сокращаем время между стимулом и реакцией.
В эксперименте с голубем, еда - это подкрепляющий элемент, предоставление еды при проявлении реакции - это подкрепление. Оперант определен качеством, от которого зависит подкрепление - высота на которую должна быть поднята голова. Изменение частоты поднятия головы на заданную частоту - это оперантное обуславливание.
5 комментариев
сначала старые сначала новые
Поскольку в дальнейшем будут рассматриваться очень важные темы, то я буду делать почти дословный перевод. Желающие могут обратиться к оригиналу "Science and Human Behavior", B.F. Skinner [там очень простой английский, понятный даже пятикласснику из захудалой школы рабочего пригорода Лондона.]
Контроль оперантного поведения. Угасание операнта.
Экспериментальная процедура по оперантному обуславливанию очень проста: мы устанавливаем условия подкрепления и проводим его в течении некоторого времени с организмом. Увеличившуюся частоту проявления реакции мы объясняем указывая на историю такого подкрепления. Но что собственно это дает нам в плане предсказания и контроля поведения? Какие переменные позволяют на предсказать среагирует организм или нет? Какие переменные нам нужно контролировать, чтобы вызвать реакцию?
В примере с голубем, мы проводили эксперимент с _голодным_ голубем. Голодный означает то, что мы имели дело с голубем, который был лишен пищи определенное время или до того момента, пока его обычный вес тела слегка уменьшился. В противоположность ожиданиям некоторых личностей, экспериментальные данные показали, что величина подкрепляющего эффекта еды не зависит от уровня такой депривации(лишения). Однако частота реакции в результате подкрепления зависит от уровня депривации в тот момент, когда реакция наблюдается. То есть чем голоднее голуб, тем больше он делает действий, которые раньше приводили к тому что он получал пищу. Так что то не смотря на то, что мы и обусловили вытягивание голубем шеи, он не будет этого делать, если он не голоден. Получается, что мы получили новый вид контроля над поведением голубя: для того чтобы сделать голубя вытягивающим шею нам нужно сделать его голодным. Выбранный нами оперант был добавлен ко всем тем вещам, которые делает голодный голубь. И наш контроль над реакцией был объеденен с контролем над пищевой депривацией голубя. В дальнейшем мы увидим, что оперант также может быть помещен и под контроль внешнего стимула, который является ещё одной переменной используемой для предсказания и контроля поведения. Однако, стоит отметить что обе эти переменные (депривация и внешний стимул) должны рассматриваться отдельно от самого оперантного подкрепления.
Когда подкрепление больше не происходит, реакция проявляется все реже и реже - это называется _угасание операнта_. Если еда не выдается голубю, он перестает поднимать голову. В общем случае, когда мы вовлечены в поведение, которое больше не _окупается_, мы обнаруживаем меньшую склоность к такому поведению в будущем. Например, если гитара быстро растраивается, то мы все реже и реже играем на ней. Если телевизор плохо показывает картинку, мы перстаем смотреть его.
Поскольку угасание операнта происходит намного медленнее оперантного обуславливания, мы можем намного легче его проследить. При подходящих условиях могут быть получены очень плавные кривые, в которых количество проявлений реакции медленно уменьшается, возможно, в течение многих часов. Эти кривые открывают характеристики, которые невозможно обнаружить при бессистемном наблюдении. Мы можем _получить впечатление_, что организм реагирует все реже и реже, но последовательность изменений может быт получена только при записи поведения. Эти кривые позволяют предположить существование вполне постоянного процесса, который определяет результат поведения в период угасания.
Контроль оперантного поведения. Угасание операнта.
Экспериментальная процедура по оперантному обуславливанию очень проста: мы устанавливаем условия подкрепления и проводим его в течении некоторого времени с организмом. Увеличившуюся частоту проявления реакции мы объясняем указывая на историю такого подкрепления. Но что собственно это дает нам в плане предсказания и контроля поведения? Какие переменные позволяют на предсказать среагирует организм или нет? Какие переменные нам нужно контролировать, чтобы вызвать реакцию?
В примере с голубем, мы проводили эксперимент с _голодным_ голубем. Голодный означает то, что мы имели дело с голубем, который был лишен пищи определенное время или до того момента, пока его обычный вес тела слегка уменьшился. В противоположность ожиданиям некоторых личностей, экспериментальные данные показали, что величина подкрепляющего эффекта еды не зависит от уровня такой депривации(лишения). Однако частота реакции в результате подкрепления зависит от уровня депривации в тот момент, когда реакция наблюдается. То есть чем голоднее голуб, тем больше он делает действий, которые раньше приводили к тому что он получал пищу. Так что то не смотря на то, что мы и обусловили вытягивание голубем шеи, он не будет этого делать, если он не голоден. Получается, что мы получили новый вид контроля над поведением голубя: для того чтобы сделать голубя вытягивающим шею нам нужно сделать его голодным. Выбранный нами оперант был добавлен ко всем тем вещам, которые делает голодный голубь. И наш контроль над реакцией был объеденен с контролем над пищевой депривацией голубя. В дальнейшем мы увидим, что оперант также может быть помещен и под контроль внешнего стимула, который является ещё одной переменной используемой для предсказания и контроля поведения. Однако, стоит отметить что обе эти переменные (депривация и внешний стимул) должны рассматриваться отдельно от самого оперантного подкрепления.
Когда подкрепление больше не происходит, реакция проявляется все реже и реже - это называется _угасание операнта_. Если еда не выдается голубю, он перестает поднимать голову. В общем случае, когда мы вовлечены в поведение, которое больше не _окупается_, мы обнаруживаем меньшую склоность к такому поведению в будущем. Например, если гитара быстро растраивается, то мы все реже и реже играем на ней. Если телевизор плохо показывает картинку, мы перстаем смотреть его.
Поскольку угасание операнта происходит намного медленнее оперантного обуславливания, мы можем намного легче его проследить. При подходящих условиях могут быть получены очень плавные кривые, в которых количество проявлений реакции медленно уменьшается, возможно, в течение многих часов. Эти кривые открывают характеристики, которые невозможно обнаружить при бессистемном наблюдении. Мы можем _получить впечатление_, что организм реагирует все реже и реже, но последовательность изменений может быт получена только при записи поведения. Эти кривые позволяют предположить существование вполне постоянного процесса, который определяет результат поведения в период угасания.
При некоторых условиях, кривая угасания нарушается эмоциональными эффектами. Отсутствие подкрепления поведения ведет не только к угасанию операнта, но и к реакции чаще всего описываемой как ярость или фрустрация. Голубь, который не получает подкрепления отварачивается от кнопки, воркует, хлопает крыльями и вовлекается в другие виды эмоционального поведения. Человеческие организмы показывают похожие двойные эффекты. Ребенок, у которого велосипед перестает ехать от вращения педалей не только перестает крутить педали, но вовлекается в возможно неистовую эмоциональную реакцию. Взрослый, у которого курсор на мониторе перестает реагировать на нажатия клавиш не только перестает нажимать клавиши, но может и с возгласами "да ёкарны бабай!" смачно ударить по клавиатуре или каким-либо другим способом продемонстрировать ярость. Точно также как ребенок возвращается к своему велосипеду, и взрослый к клавиатуре, также и голубь возвращается к кнопке, как только эмоциональная реакция затухает. И если последующие действия не получают подкрепления, может возникнуть еще одна эмоциональная реакция. При таких условиях кривые угасания начинают циклически осциллировать, поскольку эмоциональная реакция нарастает, исчезает, снова нарастает. Если мы убераем эмоцию повторяющимся подверганию угасанию, или другим способом, кривая принимает более простую форму.
Поведение, которое подвергается угасанию, является результатом предыдущего обуславливания и в этом смысле кривая угасания задает еще одну меру эффекта подкрепления. Если были подкреплены лишь несколько проявлений реакции, то и угасание реакции происходит очень быстро. За долгой историей подкрепления следует длительное угасание. Однако, стоит отметить, что сопротивление к угасанию не может быть предсказана на основании вероятности наблюдаемой реакции в конкретный момент времени. Нам нужно знать историю подкрепления. Например, несмотря на то, что нас очень вкусно накормили в новом кафе один раз, отвратительная еда при следующем посещении этого кафе может снизить до нуля вероятность того, что мы появимся в этом кафе когда-либо еще. И напротив, если нас очень долго радовали в кафе, потребуется несколько случаев плохо приготовленной еды, чтобы окончательно отбить нам охоту ходить в это кафе.
Поведение, которое подвергается угасанию, является результатом предыдущего обуславливания и в этом смысле кривая угасания задает еще одну меру эффекта подкрепления. Если были подкреплены лишь несколько проявлений реакции, то и угасание реакции происходит очень быстро. За долгой историей подкрепления следует длительное угасание. Однако, стоит отметить, что сопротивление к угасанию не может быть предсказана на основании вероятности наблюдаемой реакции в конкретный момент времени. Нам нужно знать историю подкрепления. Например, несмотря на то, что нас очень вкусно накормили в новом кафе один раз, отвратительная еда при следующем посещении этого кафе может снизить до нуля вероятность того, что мы появимся в этом кафе когда-либо еще. И напротив, если нас очень долго радовали в кафе, потребуется несколько случаев плохо приготовленной еды, чтобы окончательно отбить нам охоту ходить в это кафе.
Между тем не существует простой связи между количеством подкреплений и количеством неподкрепленных реакций при угасании. Как мы увидим при дальнейших рассмотрениях сопротивление к угасанию созданное прерывистым подкреплением может быть намного сильнее, чем тоже самое количество подкреплений осуществлялось следующие друг за другом реакции (консекутивно). Так, например, если мы только от случая к случаю подкрепляем ребенка за хорошее поведение, такое поведение ребенка в отсутсвии подкрепления продолжается намного дольше, чем в случае подкрепления каждого случая хорошего поведения, при одинаковом количестве подкреплений в обоих случаях. И это очень важно с практической точки зрения, особенно в тех областях где доступные подкрепляющие элементы ограничены. Подобные проблемы возникают в образовании, производстве, религии и других областях. При определенных схемах прерывистого подкрепления удается достигать вплоть до 10 000 проявлений реакции у голубей до того как реакция полностью угаснет.
Угасание является эффективным способом убрать оперант из репертуара поведения организма. И не нужно его путать с другими процедурами разработаными для получения такого же эффекта. На данный момент самая популярная техника - это наказание, которая как мы рассмотрим позже вовлекает другие процессы, и обладает сомнительной эффективностью. Также часто с угасанием путают забывание. При забывании эффект обуславливания теряется с течением времени, когда как для угасания нужно чтобы реакция проявлялась без подкрепления. Обычно забывание не происходит быстро, например, в экспериментах реакции получались от голубей по прошествии шести лет (шест лет - это примерно половина жизни голубя). Похожие случаи наблюдаются и у людей, когда сложные навыки выживают после длительного неиспользования ["помнять руки лабуха"]. Большинство случаев забывания вовлекают оперантное поведение под контролем специфического стимула, поэтому мы не можем исследовать забывание до тех пор пока по-нормальному не разберем этот тип контроля (специфическим стимулом).
ЭФФЕКТЫ УГАСАНИЯ.
Условие, при котором угасание более или менее закончено, знакомо и в то же время часто понимается не правильно. Крайний случай угасания иногда называют _абулия_ или _слабоволие_, однако определять это через _отсутствие воли_ мало чем помогает, поскольку присутствие или отсутствие воли выводится из присутствия или отсутствия поведения, то есть зависимой переменной. Однако, наша задача выяснить переменные, от которых зависит поведение. Условие, появляющееся в результате длительного угасания (абулия), внешне напоминает бездействие по другим причинам. Разница же заключается в истории организма. Начинающий писатель, посылающий одну за другой рукописи издателям и получающий лишь одни отказы, может заявить: "да я даже слова написать не могу". И в тоже время он может попрежнему настаивать, что он хочет писать. В данном случае как раз наблюдается низкая вероятность реакции в результате угасания. При этом другие переменные факторы все ещё действуют, и, если для них угасания не произошло, могут привести к высокой вероятности реакции.
Получается, что мы не даем человеку чувство достижения, а подкрепляем конкретное действие. Быть удрученным значит просто не выдать реакцию из-за того, что подкрепление не предвиделось.
Таким образом наша задача сводится к тому, чтобы оценивать вероятность реакции в терминах истории подкрепления и угасания.
[В следующих сериях: Какие же события являются подкрепляющими? Что такое обусловленные подкрепляющие элементы? Почему подкрепляющие элементы подкрепляют? Что такое случайные зависимости и суеверия?]
Угасание является эффективным способом убрать оперант из репертуара поведения организма. И не нужно его путать с другими процедурами разработаными для получения такого же эффекта. На данный момент самая популярная техника - это наказание, которая как мы рассмотрим позже вовлекает другие процессы, и обладает сомнительной эффективностью. Также часто с угасанием путают забывание. При забывании эффект обуславливания теряется с течением времени, когда как для угасания нужно чтобы реакция проявлялась без подкрепления. Обычно забывание не происходит быстро, например, в экспериментах реакции получались от голубей по прошествии шести лет (шест лет - это примерно половина жизни голубя). Похожие случаи наблюдаются и у людей, когда сложные навыки выживают после длительного неиспользования ["помнять руки лабуха"]. Большинство случаев забывания вовлекают оперантное поведение под контролем специфического стимула, поэтому мы не можем исследовать забывание до тех пор пока по-нормальному не разберем этот тип контроля (специфическим стимулом).
ЭФФЕКТЫ УГАСАНИЯ.
Условие, при котором угасание более или менее закончено, знакомо и в то же время часто понимается не правильно. Крайний случай угасания иногда называют _абулия_ или _слабоволие_, однако определять это через _отсутствие воли_ мало чем помогает, поскольку присутствие или отсутствие воли выводится из присутствия или отсутствия поведения, то есть зависимой переменной. Однако, наша задача выяснить переменные, от которых зависит поведение. Условие, появляющееся в результате длительного угасания (абулия), внешне напоминает бездействие по другим причинам. Разница же заключается в истории организма. Начинающий писатель, посылающий одну за другой рукописи издателям и получающий лишь одни отказы, может заявить: "да я даже слова написать не могу". И в тоже время он может попрежнему настаивать, что он хочет писать. В данном случае как раз наблюдается низкая вероятность реакции в результате угасания. При этом другие переменные факторы все ещё действуют, и, если для них угасания не произошло, могут привести к высокой вероятности реакции.
Получается, что мы не даем человеку чувство достижения, а подкрепляем конкретное действие. Быть удрученным значит просто не выдать реакцию из-за того, что подкрепление не предвиделось.
Таким образом наша задача сводится к тому, чтобы оценивать вероятность реакции в терминах истории подкрепления и угасания.
[В следующих сериях: Какие же события являются подкрепляющими? Что такое обусловленные подкрепляющие элементы? Почему подкрепляющие элементы подкрепляют? Что такое случайные зависимости и суеверия?]
Какие события являются подкрепляющими?
Имея дело с обычными людьми в повседневной жизни и в клинических или лабораторных условиях нам может понадобиться узнать, насколько подкрепляющим является определенное событие. Часто мы начинаем обращать внимание на величину подкрепления, которое оказывает это событие на наше собственное поведение. И такое измерение редко оказывается удачным; все же бытует мнение, что подкрепляющие события могут быть определены отдельно от эффектов, которые они оказывают на конкретный организм. Однако единственной характеристикой подкрепляющего стимула является только то, что он подкрепляет.
Единственным способом определить, является событие для конкретного организма подкрепляющим или нет при определенных условиях, это сделать прямую проверку. Мы наблюдаем частоту выбранной реакции, затем делаем события зависящим от этой реакции и наблюдаем изменение в частоте. Если частота увеличивается, то мы считаем это событие подкрепляющим при существющих условиях. Стоит заметить, что нет ничего порочного в классификации событий в терминах эффектов; данный критерий эмперический и объективный. Однако, будет порочным считать, что данное событие усиливает оперант, _потому что_ оно является подкрепляющим. Успешно догадаться о подкрепляющей силе можно только после измерения; например, мы измеряем подкрепляющий эффект события на наше поведение и предполагаем, что такой же эффект будет оказываться этим событием и на поведение других людей. Причем успех в угадывании будет зависеть от того, насколько мы схожи с наблюдаемым организмом и насколько точно мы провели исследовние собственного поведения.
Имея дело с обычными людьми в повседневной жизни и в клинических или лабораторных условиях нам может понадобиться узнать, насколько подкрепляющим является определенное событие. Часто мы начинаем обращать внимание на величину подкрепления, которое оказывает это событие на наше собственное поведение. И такое измерение редко оказывается удачным; все же бытует мнение, что подкрепляющие события могут быть определены отдельно от эффектов, которые они оказывают на конкретный организм. Однако единственной характеристикой подкрепляющего стимула является только то, что он подкрепляет.
Единственным способом определить, является событие для конкретного организма подкрепляющим или нет при определенных условиях, это сделать прямую проверку. Мы наблюдаем частоту выбранной реакции, затем делаем события зависящим от этой реакции и наблюдаем изменение в частоте. Если частота увеличивается, то мы считаем это событие подкрепляющим при существющих условиях. Стоит заметить, что нет ничего порочного в классификации событий в терминах эффектов; данный критерий эмперический и объективный. Однако, будет порочным считать, что данное событие усиливает оперант, _потому что_ оно является подкрепляющим. Успешно догадаться о подкрепляющей силе можно только после измерения; например, мы измеряем подкрепляющий эффект события на наше поведение и предполагаем, что такой же эффект будет оказываться этим событием и на поведение других людей. Причем успех в угадывании будет зависеть от того, насколько мы схожи с наблюдаемым организмом и насколько точно мы провели исследовние собственного поведения.
События, которые являются подкрепляющими делятся на два сорта. Некоторые подкрепления состоят из _представления_ стимула, то есть добавления чего-то - например, еды, воды или сексуального контакта - к ситуации. Такие подкрепления мы называем _позитивными_. Другой тип подкрепляющих событий состоит из удаления чего-то - например, громкого шума, яркого света, сильного холода или жара, или электрического шока - из ситуации. Такие подкрепления мы называем негативными. В обоих случаях эффект подкрепления одинаковый - вероятность реакции увеличивается. Стоит особенно отметить, что в случае негативного подкрепления, подкрепляющим является _отсутствие_ яркого света, громкого шума и тому подобное. Таким образом именно отсутствие после присутствия события явлется эффективным. Разница между двумя типами подкрепления будет ясна лучше после того, как мы рассмотрим представление негативного подкрепляющего элемента или убирание позитвного подкрепляющего элемента. Эти события мы называем наказанием.
В практическом применении оперантного обуславливания часто требуется выяснить события, которые подкрепляют конкретного человека. Например, предприниматель, котороый хочет чтобы сотрудники работали постоянно и эффективно, должен сделать так, чтобы их поведение подкреплялось подходящим способом. Девушка, которая хочет чтобы следующее свидание состоялось, должна быть уверена что поведение ее друга, который приглашает ее и приходит на свидание, подходящим образом подкрепляется. Для того, чтобы научить ребенка читать, петь или играть в игру эффективно, мы должны выработать программу образовательно подкрепления, в которой подходящие реакции часто "окупаются".
Литература, искусство и шоу-бизнес являются неестественными подкрепляющими элементами. Будет ли народ покупать книги, билеты на представления и работы художников зависит от того явлются ли книги, спектакли, концерты или картины подкрепляющими. Часто художник посвящает себя исследованию того, что является подкрепляющим для него самого. Таким образом его работа "отражает его индивидуальность", и затем по случайности или в зависимости от его универсальности, его книга, музыка или картина является подкрепляющей для других людей. И поскольку коммерческий успех может быть важным, он может провести прямое исследование поведения других людей [привет попсе:)].
Мы не можем провести исследование просто спрашивая человека, что подкрепляет его. Его ответы могут нести какую-то ценность, но не являются надежными. Подкрепляющая связь не должна быть очевидной для человека, и он даже может никогда ее и не заметить, при том что для других людей это связь будет очевидной.
Стоит особенно отметить, что события, которые приобрели силу подкреплять, не будут помечены каки-либо специальным способом. Однако такие события являются очень важным видом подкрепления. [так что завтра напишу про обусловенные подкрепляющие элементы.]
В практическом применении оперантного обуславливания часто требуется выяснить события, которые подкрепляют конкретного человека. Например, предприниматель, котороый хочет чтобы сотрудники работали постоянно и эффективно, должен сделать так, чтобы их поведение подкреплялось подходящим способом. Девушка, которая хочет чтобы следующее свидание состоялось, должна быть уверена что поведение ее друга, который приглашает ее и приходит на свидание, подходящим образом подкрепляется. Для того, чтобы научить ребенка читать, петь или играть в игру эффективно, мы должны выработать программу образовательно подкрепления, в которой подходящие реакции часто "окупаются".
Литература, искусство и шоу-бизнес являются неестественными подкрепляющими элементами. Будет ли народ покупать книги, билеты на представления и работы художников зависит от того явлются ли книги, спектакли, концерты или картины подкрепляющими. Часто художник посвящает себя исследованию того, что является подкрепляющим для него самого. Таким образом его работа "отражает его индивидуальность", и затем по случайности или в зависимости от его универсальности, его книга, музыка или картина является подкрепляющей для других людей. И поскольку коммерческий успех может быть важным, он может провести прямое исследование поведения других людей [привет попсе:)].
Мы не можем провести исследование просто спрашивая человека, что подкрепляет его. Его ответы могут нести какую-то ценность, но не являются надежными. Подкрепляющая связь не должна быть очевидной для человека, и он даже может никогда ее и не заметить, при том что для других людей это связь будет очевидной.
Стоит особенно отметить, что события, которые приобрели силу подкреплять, не будут помечены каки-либо специальным способом. Однако такие события являются очень важным видом подкрепления. [так что завтра напишу про обусловенные подкрепляющие элементы.]