Вложенные системы подкреплений ↑
eugzol в посте Metapractice (оригинал в ЖЖ)
| Революция кликера | |||||
| 10. Karen Pryor «Don't shoot the dog!» | metatheo | ||||
| Re: Масштаб действия и время подкрепления | eugzol | ||||
| Re: Масштаб действия и время подкрепления | metatheo | ||||
Но может поставленная тобой задача уже решена типа в компьютерных играх за рамками описываемой Карен модели ОФ. Там используются вложенные циклы активности-и-подкреплений. Шаги подкрепляются одним стимулом, а завершение всего действия другим.
[(1* 2* 3*)* (4* 5* 6*)* (7* 8* 9*)*]*
Цифрами обозначены отдельные шаги, разным цветом звёздочек — разные стимулы подкрепления.
3 комментария
сначала старые сначала новые
хорошо нейронная сеть реагировала бы следующим образом.
1. она научалась, что есть некий желатеьный исход для каждого из шагов
2. научалось понимать, что некий блок окончен
но 2 не значит, что оно как-то связано с 1 (по заданным условиям) это просто некоторое деление. если по 1 задания лесенкой увеличивают сложность, а по 2 сложность очередного шага будет чуть падать, то 2 будет связан с тем, что следующий шаг будет проще. но по данным условиям 2 никак не определяет подкрепление цепочки шагов 1.
1. она научалась, что есть некий желатеьный исход для каждого из шагов
2. научалось понимать, что некий блок окончен
но 2 не значит, что оно как-то связано с 1 (по заданным условиям) это просто некоторое деление. если по 1 задания лесенкой увеличивают сложность, а по 2 сложность очередного шага будет чуть падать, то 2 будет связан с тем, что следующий шаг будет проще. но по данным условиям 2 никак не определяет подкрепление цепочки шагов 1.
хорошо нейронная сеть реагировала бы следующим образом
реальные люди реагируют абсолютным вовлечением в такие цепочки. от компьютерных игр до армии.
реальные люди реагируют абсолютным вовлечением в такие цепочки. от компьютерных игр до армии.
хорошо, некие реальные люди отреагировали таким образом, а теперь представьте то подкрепление, которе мы обсуждаем. вопрос в том , что мы конкретно подкрепляем.