Circuit de récompense

Système de récompense

Neurosciences

Niveaux d'analyse

Moléculaire • Synaptique • Neuronal • Réseau neuronal • Organique • Systémique

Méthodes

Imagerie cérébrale • Électrophysiologie • Lésion cérébrale • Intelligence artificielle

Branches d'études

Neuroanatomie • Neurophysiologie • Neuroendocrinologie • Psychophysiologie • Neurosciences cognitives •

Concepts majeurs

Neurone • Potentiel d'action • Synapse et transmission synaptique • Réseau neuronal • Neuromédiateur • Plasticité neuronale • Plasticité synaptique • Précablage • Réflexe • Récompense • Cognition • Modularité de l'esprit

Chercheurs

Ramón y Cajal • C.S. Sherrington • P. Broca • J. Olds • J. LeDoux • D.H. Hubel • T. Wiesel • E. Candel • J.P. Changeux

Champs d'application

Neurologie • Neurochirurgie • Neuropsychologie • Psychiatrie • Neuropharmacologie • Chronobiologie •

Voir aussi

Catégorie Neurosciences

Le système de récompense / renforcement est un système fonctionnel fondamental des mammifères, situé le long du faisceau médian du télencéphale. Ce système des récompenses est indispensable à la survie, car il fournit la motivation nécessaire à la réalisation d'actions ou de comportements adaptés, permettant de préserver l'individu et l'espèce (recherche de nourriture, reproduction, évitement des dangers ...).

Le système de renforcement est constitué par trois composantes : 1) affective, correspondant au plaisir provoqué par les “récompenses”, ou au déplaisir provoqué par les “punitions”, 2) motivationnelle, correspondant à la motivation à obtenir la “récompense” ou à éviter la “punition”, et 3) la composante cognitive, correspondant aux apprentissages généralement réalisés par conditionnement. Certains psychotropes, comme les opioïdes, agissent directement sur ce système. Le dysfonctionnement du système de renforcement serait à l'origine de la dépendance (aux psychotropes, à la sexualité, aux jeux …).

Ce système de renforcement existe dans de nombreuses espèces : des expériences ont montré son existence chez le poisson rouge, le marsouin, le pigeon, le rat, le chat, le singe et l'être humain. Ce qui suggère qu'il existe dans toutes les grandes classes d'animaux, tels les poissons, les oiseaux et les mammifères.

Définition

Utiliser la nourriture comme récompense est une technique habituelle pour dresser un animal.

Les médailles sont des récompenses symboliques utilisées pour favoriser les comportements socialement désirables.

Il existe plusieurs mots ou expressions pour désigner le phénomène de la “récompense” : “renforcement”, “conditionnement opérant”, “conditionnement instrumental”, “loi de l'effet”, “système de récompense”, “récompense”, ou “processus de renforcement”. Les définitions de ces termes sont données ci-dessous^[1] :

Récompense. Le terme “récompense” désigne deux choses :

• La situation d'apprentissage, où un comportement devient plus fréquent car il a reçu un stimulus positif (par exemple, un chien saute plus souvent au-dessus d'une barrière si, à chaque fois, il reçoit un morceau de sucre).
• Le stimulus positif lui-même (le morceau de sucre).

Les mots “récompense” et “punition” sont souvent utilisés car ils sont simples à comprendre. Mais comme ils ont un sens culturel et moral, on utilise également le terme “renforcement”, qui a une signification plus neutre, mais aussi plus générale et plus technique.

Renforcement. Les “renforcements” concernent l'apprentissage de réactions motrices (conditionnement skinnérien ou opérant ou instrumental) et l'apprentissage de réactions autonomes (salivation, vomissement, piloérection … qui sont apprises par conditionnement pavlovien ou classique). Le terme “renforcement” désigne deux phénomènes :

• L'augmentation du comportement ou de la réaction qui a été renforcée (la salivation du chien de Pavlov quand il entend sonner la cloche).
• Par extension, certains auteurs appelle également “renforcement” la procédure d'apprentissage qui permet l'apparition ou l'augmentation de la réaction (l'association entre la nourriture (stimulus inconditionnel) et le son de la cloche (stimulus conditionnel) ).

On distingue des renforcements positifs et des renforcement négatifs :

• Les renforcements positifs (ou appétitifs), provoquent la répétition de l'activité qui a déclenché ces renforcements appétitifs. Les renforcement positifs sont, en général, perçus consciemment comme des sensations de plaisir (récompense).
• Les renforcements négatifs (ou aversifs), provoquent la fuite ou l'évitement de l'activité qui a déclenché ces renforcements aversifs. Les renforcements négatifs sont, en général, perçus consciemment comme des sensations de déplaisir (punition).

Renforcateur. Un renforçateur est le stimulus qui provoque le renforcement. Dans le conditionnement pavlovien, le renforçateur est le stimulus inconditionnel (par exemple la nourriture). Dans le conditionnement instrumental, ou opérant, le renforçateur est un stimulus (par exemple une médaille) qui suit le comportement et produit une modification de celui-ci.

Processus de renforcement. L'expression “processus de renforcement” désigne les processus neurobiologiques à l'origine de l'apparition ou de l'augmentation de la réaction qui a été renforcée (par exemple, les processus neurobiologiques qui provoquent l'association entre le son de la cloche et la salivation du chien de Pavlov)^[2].

Système de récompense. Le “système de récompense” correspond au regroupement fonctionnel de toutes les structures cérébrales qui participent aux renforcements (aire tegmentale ventrale, noyau accumbens, pallidum ventral, septum latéral, cortex préfrontal …).

Comme l'anglais est la langue scientifique, il est possible de rencontrer ces termes techniques en anglais dans des textes français. Voici la correspondance des principaux termes : récompense = reward ; punition = punishment ; renforcement = reinforcement ; renforçateur = reinforcer ; renforcement primaire / secondaire = primary / secondary reinforcement ; renforçateur positif / négatif = positive / negative reinforcer.

Niveau psychologique

Ivan Pavlov, pionnier des études sur les conditionnements et les renforcements.

Un des chiens de Pavlov, au Pavlov Museum.

Les recherches en neurosciences ont montré que les récompenses / renforcements correspondent à trois composantes psychologiques, les composantes affective, motivationnelle et cognitive^[3] :

• La composante affective correspond au plaisir ou au déplaisir provoqué par la “consommation” du renforçateur (par exemple, la consommation de la nourriture par le chien de Pavlov). Les principales “récompenses” sont les plaisirs gustatif, sexuel ou somatosensoriel, les principales “punitions” sont la douleur et la peur.
• La composante motivationnelle correspond à la motivation qui est déclenchée par le renforçateur (la vue et l'odeur de la nourriture pour le chien de Pavlov). La perception du renforçateur (nourriture, boisson, partenaire sexuel …) provoque la motivation ou le désir d'obtenir et de “consommer” la récompense (ou de fuir la punition) :
  • Si le renforçateur est inconditionnel (goût sucré, chaleur, phéromone sexuelle, caresse des zones érogènes …), il s'agit alors d'un stimulus qui active des circuits innés provoquant une motivation également innée.
  • Si le renforçateur est conditionnel (une médaille, un son, un objet, un lieu …), il s'agit dans ce cas d'un stimulus qui réactive l'expérience déjà vécue avec ce renforçateur, ce qui provoque une motivation acquise (ou désir) à “consommer” ou fuir le renforçateur.
• La composante cognitive correspond aux apprentissages qui permettent l'association entre le renforçateur et la réaction émotionnelle ou comportementale (l'association entre la salivation du chien de Pavlov et le son de la cloche).

Ces trois composantes psychologiques sont distinguées les unes des autres, car elles dépendent de systèmes cérébraux relativement distincts^[3].

À noter par ailleurs que les renforcements ne sont pas toujours des phénomènes conscients.

Niveau neurobiologique

Organisation cérébrale

Les différentes structures du circuit des récompenses sont distribuées le long du faisceau médian du télencéphale (MFB) : aire tegmentale ventrale (ATV), amygdale, noyau accumbens, septum et cortex préfrontal.

Au niveau neurobiologique, les recherches menées avant les années 2000 ont permis d'identifier un réseau de structures cérébrales qui sont à l'origine des renforcements :

• Pour les renforcements positifs (récompenses), les structures neurales sont situées en position latérale, le long du faisceau médian du télencéphale (voir figure ci-contre). Ces structures sont : l'aire tegmentale ventrale, le noyau accumbens, l'hypothalamus latéral, le septum et le cortex préfrontal.
• Pour les renforcements négatifs (punitions), les structures sont situées en position médiane et sont périventriculaires : la substance grise périaqueducale et l'hypothalamus médian.

Depuis les années 2000, de nouvelles recherches ont permis d'identifier deux importantes caractéristiques de ces structures cérébrales des renforcements :

1. La composante affective des renforcements dépend d'un nombre limité de petites structures, appelées “hotspots” ou “points chauds”, d'un volume d'environ 1 cm³, et localisées dans le noyau parabrachial, le noyau accumbens et le pallidum ventral^[2]. Ces trois structures ou “hotspots” sont interconnectées entre-elles et intégrées dans le système des “récompenses / renforcements” (voir figure ci-dessous).

Situation et interconnexions des “hotspots” ou “points chauds” à l'origine des récompenses, chez le rat. Ces “hotspots” sont localisés dans le pallidum ventral, et dans les noyaux accumbens et parabrachial.

1. Le système des “renforcements / récompenses” est similaire chez tous les mammifères, tant au niveau structurel que fonctionnel. Les structures, les connections entre les structures, les entrées sensorielles et les sorties motrices ont été conservées au cours de l'évolution (voir figure ci-dessous).

Similitude du système cérébral des “renforcements / récompense” chez les différentes espèces de mammifères. La comparaison des structures neurales des renforcements entre le rat et le singe (monkey) met en évidence la conservation de l'organisation du système des récompense. Voir les explications dans le texte ci-dessous.
Légende : Amygdala = Amygdale (en orange) ; Ald = Insula agranulaire dorsale ; Alv = Insula agranulaire ventrale ; c = Central ; CD = Caudal ; LO = Orbital latéral ; m = Médial ; MD = Thalamus médiodorsal (en vert) ; Motor output = Sorties motrices ; Nac = Cœur du noyau accumbens ; OFC = Cortex frontal orbital (en violet) ; rABL = Amygdale basolatérale rostrale ; Sensory information = Entrée des informations sensorielles ; Striatum = Striatum (en rose) ; VO = Orbital ventral ; VP = Pallidum ventral.

En synthèse de toutes ces données, neurobiologiques et psychologiques, le système des “récompenses / renforcements” est organisé de la manière suivante^[3],[2] :

• La composante motivationnelle : c'est la motivation pour obtenir une récompense. Cette composante comprend 2 niveaux :
  • Les processus motivationnels des renforcements, constitués principalement par le système dopaminergique de l'aire tegmentale ventrale. L'activité de ces processus n'est pas toujours conscient.
  • Le désir conscient d'obtenir des récompenses.
• La composante affective : c'est le plaisir provoqué par la récompense / renforcement. Cette composante comprend également 2 niveaux :
  • Le “cœur” ou le “noyau” fonctionnel des processus hédoniques des renforcements, constitué par le réseau des “points chauds” (ou “hotspots”). L'activité de ces processus n'est également pas toujours conscient.
  • L'expérience consciente du plaisir de la récompense, qui serait en partie élaborée par les processus cognitifs responsables de la conscience.
• La composante cognitive : ce sont, basé sur les expériences de récompenses déjà vécues, les associations, les représentations et les prédictions concernant les récompenses. Avec également 2 niveaux :
  • Les conditionnements associatifs, qui dépendent principalement de l'amygdale et du cortex préfrontal.
  • Les prédictions conscientes et explicites concernant les futures récompenses.

Hormones & Neuromédiateurs

La dopamine est le principal neuromédiateur de la composante motivationnelle des renforcements

Les opioïdes endogènes (avec les cannabinoïdes endogènes) sont les principaux neuromédiateurs de la composante affective des renforcements

Les cannabinoïdes endogènes (avec les opioïdes endogènes) sont les principaux neuromédiateurs de la composante affective des renforcements

Les principaux neuromédiateurs impliqués dans les renforcements sont :

• La dopamine, pour la composante motivationelle.
• Les opioïdes endogènes et les cannabinoïdes endogènes, pour la composante affective.

La principale différence du système de renforcement / récompense entre les différentes espèces de mammifère et le contrôle hormonal. On observe que les hormones qui contrôlent le comportement sexuel perdent de leur influence au cours de l'évolution, des rongeurs aux primates. En particulier pour le comportement sexuel^[4], les renforcements sexuels sont actifs durant toute l'année : il n'existe plus de contrôle saisonnier.

Rôle fonctionnel

Le système des récompenses / renforcements est actif dès la fin de la gestation. Il permet l'apprentissage de réactions et de comportements indispensables à la survie de l'individu et de l'espèce :

• Permet l'apprentissage d'actions motrices et de comportements permettant le maintien de l'homéostasie (
• Permet l'apprentissage d'actions et de réactions permettant l'adaptation à l'environnement (mémorisation des emplacements de nourriture ou d'eau, .

Base du conditionnement et de certains apprentissages.

Les renforcements ont un rôle majeur dans l'apprentissage des comportements fondamentaux, comme l'allaitement^[5],[6],[7] ou le comportement sexuel^[8],[9].

Articles connexes : Comportement érotique et Allaitement.

Récompenses :

• Sexualité
• Allaitement
• Réussite de l'action

Punitions :

• Douleur
• Hyperactivation d'un système sensoriel (bruit intense, lumière aveuglante …)
• Émotions négatives

Pathologie & Psychopathologie

• Toxicomanie / Dépendance
• Dépendance à la sexualité
• Boulimie / Anorexie

Histoire : découverte des récompenses / renforcements

L'étude des renforcements / récompenses a débuté dans les années 1950, par la découverte accidentelle que la stimulation électrique de certaines régions du cerveau provoquait la répétition de l'activité qui déclenchait cette stimulation électrique^[10].

En variant l'implantation des électrodes, il est apparu que toutes les structures situées le long du faisceau médian du télencéphale provoquaient des autostimulations, dont la fréquence était de 10 à 100 par minutes.

En conclusion de ces premières études, les structures provoquant l'autostimulation ont été considérées comme des “centres du plaisir” et ont été regroupées dans un “système de récompense”. La mise en jeu de ce système devait produire une “récompense” qui incitait l'individu à répéter l'action à l'origine de cette “récompense” cérébrale.

Méthodes d'étude

• Stimulation intracérébrale (électricité, neuromédiateurs, psychostimulants)
• Le protocole de préférence de place (place preference)
• …

Problèmes et controverses

Renforcement dans MPOA.

Notes et références

1. ↑ LE NY Jean-François, in BLOCH Henriette & coll. (Dir.), Grand dictionnaire de la psychologie, Larousse 1994.
2. ↑ ^{a , b  et c} BERRIDGE KC, KRINGELBACH ML. Affective neuroscience of pleasure: reward in humans and animals, Psychopharmacology (Berl), 199(3):457-480, 2008.
3. ↑ ^{a , b  et c} BERRIDGE KC, ROBINSON TE, ALDRIDGE JW. Dissecting components of reward: 'liking', 'wanting', and learning, Curr. Opin. Pharmacol., 9(1):65-73, 2009.
4. ↑ SIGNORET Jean-Pierre, Sexuel (Comportement), Encyclopædia Universalis. Version électronique 11.0, 2006.
5. ↑ FERRIS C. F. , KULKARNI P. , SULLIVAN J. M., Jr. , HARDER J. A. , MESSENGER T. L. , FEBO M. Pup suckling is more rewarding than cocaine: evidence from functional magnetic resonance imaging and three-dimensional computational analysis, The Journal of Neuroscience, 25(1):149-156, 2005
6. ↑ STERN J. M. , DIX L. , BELLOMO C. , THRAMANN C. Ventral trunk somatosensory determinants of nursing behavior in Norway rats: 2. Role of nipple and surrounding sensations, Psychobiology, 20(1):71-80, 1992
7. ↑ STERN J. M. , JOHNSON S. K. Ventral somatosensory determinants of nursing behavior in Norway rats. I. Effects of variations in the quality and quantity of pup stimuli, Physiology & Behavior, 47(5):993-1011, 1990
8. ↑ (en) AGMO Anders Functional and dysfunctional sexual behavior Elsevier 2007.
9. ↑ (fr) WUNSCH Serge, Thèse de doctorat sur le comportement sexuel [pdf] EPHE-Sorbonne, Paris, 2007.
10. ↑ OLDS J, MILNER P. Positive reinforcement produced by electrical stimulation of septal area and other areas of the brain. J Comp Physiol Psychol 47:419-427, 1954.

Bibliographie

• (en) Jaak Panksepp, Affective Neuroscience: The Foundations of Human and Animal Emotions, New York: Oxford University Press, 1998.
• (en) Marc Breedlove, Mark Rosenzweig, Neil Watson, Biological Psychology, an introduction to behavioral, cognitive, and clinical neuroscience, 5e edition, Sinauer Associates, 2007.
• (en) Anders Agmo Functional and dysfunctional sexual behavior Elsevier 2007
• (fr) Serge Wunsch, Thèse de doctorat sur le comportement sexuel [pdf] EPHE-Sorbonne, Paris, 2007.

Annexes

Articles connexes

• Conditionnement
• Apprentissage
• Motivation
• Comportement érotique

Liens externes

• Le système de récompense sur le site Le cerveau à tous les niveaux

Ce document provient de « Syst%C3%A8me de r%C3%A9compense ».