¿Hubo algo nuevo en el tutorial de aprendizaje profundo en NIPS 2015 de Hinton, Bengio y LeCunn?

No es demasiado nuevo, pero hay muchas explicaciones de varias intuiciones y nociones que los profesionales usan en estos días.

Los puntos principales que escribí:

  • La normalización de lotes y otros trucos hacen una gran diferencia para el entrenamiento
  • Las personas están tratando de ir más allá de la clasificación mediante la construcción de arquitecturas generativas (generación de sillas y caras, etc.)
  • El habla y la visión han tenido ‘revoluciones’ pero la revolución en la PNL todavía está comenzando
  • Los mecanismos de atención han sido muy importantes para que los RNN funcionen
  • Los RNN con memoria aumentada son una nueva tendencia, desarrollos prometedores
  • Fuerte tendencia hacia el uso de principios de aprendizaje profundo en el aprendizaje por refuerzo
  • El aprendizaje semi-supervisado y no supervisado son las nuevas fronteras

More Interesting

¿Cuál es la mejor tecnología ahora para el desarrollo de backend?

¿Qué software es el más popular para la conversión de voz a texto para poder escribir correos electrónicos y documentos de Word en mi computadora con Windows 10? ¿La tecnología es tan avanzada o resultará más frustrante que escribir?

¿Cuáles son los efectos potencialmente peligrosos de una singularidad tecnológica?

¿Qué tan serio es el gobierno indonesio en investigación tecnológica y autosuficiencia (independencia tecnológica) en la era de Soeharto?

Si la idea de electricidad gratuita de Nikola Tesla hubiera prevalecido, ¿la tecnología estaría mucho más avanzada hoy en día?

¿Qué se subestima sobre la tecnología?

¿Hay alguna posibilidad de que los teléfonos móviles se usen dentro de cinco décadas?

¿Cuál es la tecnología más genial por menos de $ 50?

¿Qué ve mi proveedor de Internet cuando descargo torrents?

¿Es bueno el MacBook Air para programar? ¿Es bueno para la multitarea y la programación de Matlab, Visual Studio, Scala y C ++? Tengo un Dell Inspiron 14R con 4GB de RAM e i3 (2da generación). ¿Qué haría una mejor actualización: MBA o MBP (sin retina)?

¿Cómo la realidad virtual cambiará la publicidad?

¿Cuáles son algunas de las mejores innovaciones tecnológicas en automóviles nuevos o futuros?

¿Cuáles son los impactos sociales, económicos y ambientales de la tecnología de energía de las olas?

¿Quién es el fundador de World Wide Technology Inc?

¿A qué distancia en el espacio podrían percibirse nuestras transmisiones de televisión y radio, etc., utilizando una tecnología similar a la que usan los astrónomos actualmente?