Cómo desarrollar suficiente conocimiento de aprendizaje automático para comprender a fondo los trabajos de investigación que se publican en DeepMind

Por favor, por favor, si quieres aprender sobre el aprendizaje por refuerzo, aprende directamente de la boca del caballo leyendo ” Aprendizaje por refuerzo: una introducción ” de Sutton & Barto. Tome el libro, léalo atentamente, haga los ejercicios lo mejor que pueda. Lave, enjuague, repita, hasta que se sienta cómodo y comprenda todo el concepto y sepa cómo aplicarlo. Tragar pedazos del tamaño de un bocado, alimentados con cuchara, de video-cursos o sitios en línea simplemente no lo hará.

El aprendizaje de refuerzo, ya sea “profundo” o “superficial”, o “amplio”, o “asíncrono” o lo que sea, es un concepto muy importante que no juega el (por ahora bastante popular y conocido) “descenso de gradiente” reglas (enseñadas en tantos cursos en línea y oh, tantos libros como el de Bengio y Courville) pero por las reglas menos conocidas de “Estadísticas Bayesianas”.

El libro de Sutton & Barto no le enseñará todo lo que necesita saber sobre los métodos bayesianos, pero le permitirá notar (e incluso decirle) cuando le faltan conocimientos. Entonces, cuando descubres que estás “perdido en el bosque”, por así decirlo, mientras sigues a Sutton & Barto, es hora de detenerte y aprender (o, al menos, repasar) la teoría y los métodos bayesianos. Hay varios libros e incluso cursos en línea para elegir, pero particularmente me gusta ” Un primer curso en métodos estadísticos bayesianos ” de Hoff.

Entonces, y solo entonces, puedes abordar el resto de la investigación y los métodos de Deep Mind.

Le recomendaría que lea el Curso de David Silver sobre DRL, las diapositivas y conferencias de Pieter Abbeel y John Schulman sobre el aprendizaje de refuerzo profundo. CS294 en DRL de UC Berkeley (que está disponible en línea) también será útil. Además, asegúrese de leer sus referencias y hacer preguntas a la comunidad de ML sobre qué partes no comprende.

Además, podría ayudarlo aquí, ¿qué parte exactamente no comprende?

También recomendaría encarecidamente CS231n y The Deep Learning Book antes de acercarse a los cursos de Silver (o incluso CS294).

De la misma manera que comes un elefante. Un bocado a la vez. Empieza a leer el primer y más interesante documento de mente profunda para ti. Mientras lee si encuentra un término desconocido, por ejemplo, “redes neuronales”, busque ese término en Wikipedia y léalo para comprender lo que significa. Entonces tómate un pequeño descanso. Luego, reanude su lectura comenzando nuevamente desde el principio del documento de DeepMind y pasando el término que acaba de investigar. Repita el proceso para el próximo término desconocido, hasta llegar al final del artículo. Luego lee el siguiente artículo. Eso es practicamente todo.

La mejor de las suertes.