Skip to content

Latest commit

 

History

History
45 lines (31 loc) · 2.03 KB

File metadata and controls

45 lines (31 loc) · 2.03 KB

🎒 Ficha de estudio — P26 · Control a nivel humano mediante aprendizaje por refuerzo profundo

Generado por python scripts/generate_papers.py. Tu bitácora personal va en BITACORA.md.

Paper: Human-level control through deep reinforcement learning (2015) Nivel: L3 · Notebook: P26_dqn.ipynb

En una frase

El primer agente que aprende a actuar directamente desde píxeles, con la misma arquitectura y los mismos hiperparámetros en decenas de juegos.

Ruta de trabajo (en este orden)

  1. Lee la pasada 1 de la ficha: título, resumen, figuras. 10 minutos, sin fórmulas.
  2. Responde por escrito: ¿qué problema resolvía? Compáralo con: «Combinar aprendizaje por refuerzo con aproximación de función no lineal era notoriamente inestable: las muestras consecutivas están correlacionadas y el objetivo se mueve mientras se aprende.»
  3. Abre el notebook y escribe tu predicción (sección 7) antes de ejecutar nada.
  4. Ejecuta y contrasta. Si acertaste, explica por qué; si fallaste, explica qué supusiste mal.
  5. Haz el anti-patrón (sección 11) y su corrección. Es la parte que más se evalúa.
  6. Escribe una limitación de la miniatura y una del paper. No las copies de la ficha.

Checklist de «lo entendí»

  • Sé qué se hacía antes de este paper y por qué no bastaba.
  • Puedo dibujar el mecanismo sin mirar.
  • Ejecuté la miniatura e interpreté su salida sin repetir el texto de la ficha.
  • Sé nombrar una cosa que el paper no demostró.
  • Sé qué idea de las que suelen atribuírsele llegó en realidad después.
  • Puedo conectar este hito con el siguiente en una frase.

Conceptos que debes poder definir

  • DQN
  • Q-learning
  • repetición de experiencia
  • red objetivo
  • Atari
  • refuerzo profundo

Fuentes primarias


⬅️ Fichas de estudio · Ficha completa del paper