[userpic]

... 

metanymous в посте Openmeta (оригинал в ЖЖ)

В случае если выполняются 2 желаемых действия, а потом одно - заканчивается, а другое продолжается, надо ли оператору прекращать подавать подкрепляющий сигнал?
Ну, фактически вам надо сформировать генерализацию из трех компонентов. Выше мы описали порядок в котором есть шанс получить такую генерализацию. Но реальный процесс может сильно отличаться. Предположим:
--нужное положение достигнуто - подкрепили - оно сохраняется
--махать рукой - подкрепили - рукой продолжает махать
--но сошел с нужного места, а рукой махает
Фактически, с момента совпадения места-махания вы должны подкреплять только это сочетание. Здесь заранее не угадаешь:
--время от времени сочетание места-махания повторяется - подкрепляем - оно становится устойчивым
--сочетание места-махания не повторяется - тогда надо отступать назад (там у К. Прайор есть понятие - "детский сад") и заново подводить к этому сочетанию.
Для таких заданий надо уметь уверенно формировать "спонтанно повторяющееся/продолжающееся действие", например, хождение по кругу. Стратегия простая:
--добиться правильной траектории движения
--и сразу же переходить к все более редкому подкреплению движения по траектории а) пара шагов б) несколько шагов в) весь круг на одном подкреплении (!!!) г) больше круга на одном подкреплении и т.д.