Virginie Fresno, Alain Marchand et al dans Scientific Reports

L’exploration est un élément essentiel de l’apprentissage par essai et erreur. Il ne suffit pas de répéter des choix qui se sont révélés payants dans le passé (exploiter), il convient également de vérifier de temps en temps qu’une autre option n’est pas plus avantageuse (explorer). À chaque fois que les options que nous exploitons deviennent moins rentables, il devient particulièrement utile d’en explorer de nouvelles. Ce principe heuristique simple suggère que l’exploration ne devrait pas rester constante dans le temps.

Les mécanismes d’apprentissage dans le cerveau sont connus pour impliquer la dopamine, un neuromodulateur émis à chaque fois qu’une récompense inattendue est obtenue. Ce signal peut servir à faire ressortir les actions les plus rentables dans une situation donnée. Mais le rôle de la dopamine ne s’arrête pas là, et de nouveaux travaux réalisés en collaboration entre une équipe de neurosciences expérimentales à Bordeaux (Institut de neurosciences cognitives et intégratives d’Aquitaine (INCIA – CNRS/Université de Bordeaux), et une équipe de modélisation mathématique à Paris (Institut des systèmes intelligents et de robotique (ISIR – CNRS/Sorbonne Université)) montrent que la dopamine peut également réguler l’exploration au cours de l’apprentissage.