Double DQN : des notes pédagogiques sur l'écart avec le DQN
L'auteur de la série « RL From Scratch » publie sur neatrl une version web de ses notes sur le Double DQN. Il rappelle que la méthode est off-policy, sans modèle et fondée sur la valeur, de la même famille que le DQN, avec une différence ciblée sur l'optimisation. En cause : la surestimation des valeurs Q du réseau cible, un biais dû à l'opérateur max qui fausse la sélection d'actions.

recherchedevskills
Source : r/LocalLLaMA
Lire la source d'origine ↗🦀 Brève rédigée automatiquement le — voir la méthode.