"Однако в 1997 году было показано, что дофамин играет более тонкую роль. В эксперименте Шульца у обезьяны создавали условный рефлекс по классической схеме Павлова: после светового сигнала в рот обезьяне впрыскивали сок. Было установлено, что:
1. Когда сок впрыскивали неожиданно (не предваряя его сигналом), активность дофаминовых нейронов увеличивалась.
2 .На этапе обучения активность дофаминовых нейронов увеличивалась по-прежнему в ответ на впрыскивание сока.
3. Когда условный рефлекс был сформирован, активность дофаминовых нейронов увеличивалась после подачи сигнала (до впрыскивания сока). Само впрыскивание сока на активности этих нейронов больше не отражалось (что противоречит гипотезе, согласно которой дофамин связан просто с получением удовольствия).
4. Если в момент, когда ожидалось получение сока, сок не впрыскивали, активность дофаминовых нейронов снижалась.
Это позволило предположить, что дофамин участвует в формировании и закреплении условных рефлексов при положительном подкреплении и в гашении их, если подкрепление прекращается. Другими словами, если наше ожидание награды оправдывается, мозг сообщает нам об этом выработкой дофамина. Если же награда не последовала, снижение уровня дофамина сигнализирует, что модель разошлась с реальностью. В дальнейших работах показано, что активность дофаминовых нейронов хорошо описывается известной моделью обучения автоматов: действиям, быстрее приводящим к получению награды, приписывается большая ценность. Таким образом происходит обучение методом проб и ошибок[30]."
https://ru.wikipedia.org/wiki/Дофамин