¿Es el aprendizaje profundo una buena herramienta para resolver problemas de lenguaje natural?

Cuando te refieres a ‘ bueno ‘, supongo que estás hablando de la actuación .

Me gusta inspirarme en la comunidad de la visión. Como ya sabe, Deep Learning ha mejorado el rendimiento del modelo de vanguardia para muchos de los problemas de visión más difíciles, como la clasificación de imágenes, la generación de subtítulos por puntos increíbles. Empresas como Google, Facebook pueden replicar el éxito académico para mejorar sus productos basados ​​en la visión que todos usamos.

¿Cómo es el escenario para la PNL? ¿Es tan bueno como lo que los medios quieren que sea?

Muy diferente.

Un miembro de Google Brain (olvidó el nombre) sucintamente lo pone en perspectiva:

‘Los resultados de Deep learning for Vision están al menos 5 años por delante de los de PNL’

Sí, estamos lejos (probablemente demasiado lejos de 5 años) de hacer que DL funcione (o identificar alguna otra tecnología) para resolver los problemas más difíciles de PNL, como construir sistemas de diálogo que puedan interactuar con el resumen humano y automático de un texto largo.

Sin embargo, tenemos algunas historias positivas que vale la pena mencionar. La traducción automática neuronal de Google ha reducido la tasa de error de palabras en números locos al vencer a un modelo SMT de una década.

Solo espero que en el futuro vengan historias de éxito similares para que otros problemas de PNL aclaren la “bondad” de DL para PNL.

¡Estén atentos a arxiv!

Hay un artículo popular de Ronan Collobert y Jason Weston – “Procesamiento del lenguaje natural (casi) desde cero” en el que los autores han descrito algunas técnicas de aprendizaje profundo para PNL. Los videos tutoriales de los autores de la escuela de verano Deep Learning, UCLA y NIPS 2009 están disponibles aquí https://www.ipam.ucla.edu/schedu … y aquí
http://videolectures.net/nips09_

RIchard Socher y Chris Manning tienen un tutorial popular llamado Deep Learning para PNL (sin magia) … videos y materiales disponibles en esta página http://nlp.stanford.edu/courses/

El video del Prof. Yoshua Bengio sobre Deep Learning of Representations :: http://techtalks.tv/talks/deep-l
http://techtalks.tv/talks/deep-l