Dynamic reservoir for developmental reinforcement learning - Inria - Institut national de recherche en sciences et technologies du numérique Accéder directement au contenu
Communication Dans Un Congrès Année : 2011

Dynamic reservoir for developmental reinforcement learning

Alain Dutech

Résumé

We present in this paper an original neural architecture based on a Dynamic Self-Organizing Map (DSOM). In a reservoir computing paradigm, this architecture is used as a function approximation in a reinforcement learning setting where the state x action space is difficult to handle. The life-long online learning property of the DSOM allows us to take a developmental approach to learning a robotic task: the perception and motor skills of the robot can grow in richness and complexity during learning. As this work is largely in progress, valid and sound results are not yet available.
Dans cet article, nous présentons une architecture neuronale qui s'appuie sur une Carte Dynamique Auto-Organisée (Dynamic Self-Organizing Map DSOM). Dans un cadre de réservoir de calcul (reservoir computing), cette architecture est utilisé comme un approximateur de fonction dans un contexte d'apprentissage par renforcement où l'espace d'état-action est difficile à gérer. Les DSOM exhibant de bonne propriétés d'apprentissage continu, cette architecture nous permet de proposer une approche dévelopementale de l'apprentissage de tâches robotiques : les capacités motrices et perceptives du robot s'enrichissent au fur et à mesure que l'apprentissage progresse. Comme ce travail est en cours, des résultats valides et vérifiés ne sont pas encore disponibles.
Fichier principal
Vignette du fichier
dutech11_reservoirDevRL.pdf (535.55 Ko) Télécharger le fichier
Origine : Fichiers produits par l'(les) auteur(s)
Loading...

Dates et versions

inria-00633433 , version 1 (18-10-2011)

Identifiants

  • HAL Id : inria-00633433 , version 1

Citer

Alain Dutech. Dynamic reservoir for developmental reinforcement learning. Workshop on Development and Learning in Artificial Neural Networks (DevLeaNN), Oct 2011, Paris, France. pp.37-40. ⟨inria-00633433⟩
160 Consultations
83 Téléchargements

Partager

Gmail Facebook X LinkedIn More