ГИПОТЕЗА ДВУХСТУПЕНЧАТОГО МЕХАНИЗМА ПОЛОЖИТЕЛЬНОГО ПОДКРЕПЛЕНИЯ

2.
Delbro D. Hexametonium-resistant, atropin-sensitive vagal 

excitation of the feline stomach activation of an unknown fibre 

system / Delbro D., Fandriks L., Lisander B. // Аста Physiol.Scand. 1981. -Vol.112. № 4. -P.493-494.
DOI:10.12737/12273

ГИПОТЕЗА ДВУХСТУПЕНЧАТОГО МЕХАНИЗМА ПОЛОЖИТЕЛЬНОГО 

ПОДКРЕПЛЕНИЯ

Судаков С.К.

НИИ нормальной физиологии имени П.К. Анохина

s-sudakov@nphys.ru

Ключевые слова:
подкрепление, акцептор результатов действия, 

мезокортиколимбическая 
дофаминовая 
система, 
эндогенная 
опиоидная 

система.

Положительное подкрепление можно рассматривать, как процесс 

возникновения положительного эмоционального состояния при достижении 
биологически или социально значимого результата. Удовлетворение любой 
потребности 
ведет 
к 
возникновению 
положительного 
подкрепления. 

Существует 
эндогенная 
система 
подкрепления, 
включающая 
в 
себя 

определенные мозговые структуры и их взаимодействия с помощью нервных 
связей и нейромедиаторных процессов [3,4]. В механизмах положительного 
подкрепления центральную роль играет взаимодействие нейромедиаторов с 
рецепторами дофаминовыми, серотониновыми, никотиновыми, опиоидными 

и каннабиноидными. При этом считается, что мезокортиколимбическая 
дофаминовая 
система 
имеет 
наиважнейшее 
значение 
[2]. 

Дофаминсинтезирующие нейроны, тела которых расположены в области 
вентральной покрышки, постоянно находятся под тормозным влиянием ГАМКсодержащих 
нейронов. 
Во 
время 
естественного 
физиологического 

подкрепления ГАМК-содержащие нейроны тормозятся при действии на них 
опиоидных 
пептидов, 
в 
результате 
чего 
активируются 
дофамин
синтезирующие нейроны и происходит выделение дофамина из их нервных 
окончаний, расположенных во многих отделах мозга, в частности в 
прилежащем ядре и коре. В этих же отделах располагаются другие 
нейрохимические системы, которые способны модулировать дофаминовую 
нейромедиацию во время подкрепления.

Суть гипотезы двухступенчатого механизма подкрепления состоит в 

том, 
что 
описанный 
механизм 
активации 
мезокортиколимбической 

дофаминовой системы не является механизмом реального подкрепления. Мы 
полагаем, 
что 
эти 
процессы 
сопровождают 
формирование 
акцептора 

результата действия в центральной архитектонике функциональной системы 
целенаправленного поведения [1]. При этом оцениваются не только 
параметры будущего результата, но и вероятность его достижения. Чем 
более важен результат и чем выше оцениваемая субъектом вероятность его 
достижения, тем больше дофамина выделяется и тем сильнее приятные 
ощущения, возникающие при этом. Тем не менее, результат еще не 
достигнут и реального подкрепления еще нет. Можно считать это первой 

ступенью 
подкрепления 
или 
«виртуальным» 
подкреплением. 
Выделение 

дофамина в прилежащем ядре и в коре мозга приводит к психостимуляции и 
мобилизации 
ресурсов 
организма 
для 
достижения 
результата 
[5]. 

«Реальное» подкрепление происходит при достижении результата. Повидимому, «реальное» подкрепление
связано с действием тормозных 

нейромедиаторов и активацией эндогенной опиоидной системы, что приводит 
к расслабляющему, транквилизирующему эффекту.  Механизмы «реального» 
подкрепления изучены мало. Возможно, что «виртуальное» подкрепление 
может быть настолько сильным, что «реальное» подкрепление не оказывает 
выраженного воздействия на организм. Примером может служить игровое 
поведение, когда предвкушение выигрыша намного сильнее полученного 
результата. На механизмах «виртуального» подкрепления основано действие 
практически всех психоактивных веществ.  

Исследование механизмов «виртуального» и «реального» подкрепления 

может обосновать новые возможности коррекции поведения человека и 
животных.

Литература: 
1.
Анохин П.К. // Глава 4 из книги «Биология и нейрофизиология 

условного рефлекса», М. Медицина, 1968, с.194-262. 

2.
Fibiger HC, Phillips AG.// Ann. N Y Acad. Sci. 1988, Vol. 

537, P.206-215.

3.
Jacques S. // Neurosurgery. 1979, Vol. 5, P.277-283.

4.
Olds ME, Fobes JL. // Annu. Rev. Psychol. 1981, Vol.32, 

P.523-574.

5.
Phillips AG, Mogenson GJ.// Can. J. Psychol. 1978, Vol. 32, 

P.124-128.

THE HYPOTHESIS OF A TWO-STEP MECHANISM FOR POSITIVE 

REINFORCEMENT

Sudakov S.K.

P.K. Anokhin Institute of Normal Physiology

s-sudakov@nphys.ru

Key words:
reinforcement, acceptor of action results, mesocortical
limbic dopamine system, endogenous opioid system.

Positive reinforcement can be seen as a process of positive 

emotional state biologically or socially significant result is 
achieved. Satisfying any needs leads to positive reinforcement. It was 
shown the endogenous system of reinforcement, which includes certain 
brain structures and their interaction with the nerve pathways and 
neurotransmitter processes [3.4]. The central role of the mechanisms of 
positive reinforcements plays the ligands of neurotransmitter’s 
receptors -dopamine, serotonin, nicotinic, opioid and cannabinoid. It 
is believed that mesocortical-limbic dopamine system has greatest value 
[2]. Dopamin neurons, whose bodies are located in the area of ventral 
tegmentum anterior, are constantly under braking influence of GABAcontaining neurons. During the natural physiological reinforcement 

GABA-containing neurons is inhibited by the action of opioid peptides. 
As a result dopamine neurons are activating and dopamine is releasing 
from their nerve endings located in many divisions of the brain, 
particularly in the nucleus accumbens and cortex. There are other 
neurochemical systems that can also modulate dopamine neurotransmission 
during the reinforcements.

The essence of the hypothesis of two-step mechanism of positive 

reinforcement underpin that the described mechanism of activation of 
dopamine system is not a real mechanism for reinforcements. We believe 
that dopamine release accompany the formation of acceptor of action 
result in the central architectonics of functional systems of goaldirected behavior [1]. During this stage of functional system, subject 
is estimating not only the parameters of the future result, but also 
the probability of it achieving. Then more important the result, and 
the higher the probability of it achieving, the more dopamine is 
secreted and the more pleasant sensations is occurring. However, the 
result has not yet been achieved and real reinforcements is not format 
yet. 
We 
propose 
this 
first 
step 
reinforcement 
as 
"virtual" 

reinforcement. Releasing of dopamine in the nucleus accumbens and 
cortex leads to psychostimulation and mobilization of brain and body 
resources to achieve the useful result [5]. "Real" reinforcement occurs 
when the result is achieved. Apparently, the "real" reinforcement due 
to the action of inhibitory neurotransmitter and activating the 
endogenous opioid system results a relaxing, tranquilizing effect.  
Mechanisms of the "real" reinforcement studied a little. It is possible 
that "virtual" reinforcement can be so strong that "real" reinforcement 
does not induce some significant effect. An example would be the 
playing behavior when anticipation of winning much stronger then impact 
of real achieved results. On the mechanisms of "virtual" reinforcements 
based action almost all psychoactive substances.

Study of mechanisms of "virtual" and "real" reinforcements can 

justify new possibilities of correction of human and animal behavior.

Refferences:
1.
Anokhin P.K. // Chapter 4 from “Biology and Neurophysiology 

of Conditional Reflex” , Moscow, Medicina, 1968, P.194-262. 

2.
Fibiger HC, Phillips AG.// Ann. N Y Acad. Sci. 1988, Vol. 

537, P.206-215.

3.
Jacques S. // Neurosurgery. 1979, Vol. 5, P.277-283.

4.
Olds ME, Fobes JL. // Annu. Rev. Psychol. 1981, Vol.32, 

P.523-574.

5.
Phillips AG, Mogenson GJ.// Can. J. Psychol. 1978, Vol. 32, 

P.124-128.
DOI:10.12737/12275