¿Qué piensa sobre los procesos gaussianos profundos?

Bueno, estoy muy entusiasmado con estos modelos y su potencial para resolver algunos de los principales desafíos que enfrentan los investigadores en la IA de hoy. No son el único enfoque, pero creo que son extremadamente prometedores.

Sin embargo, para adjuntar su pregunta desde una dirección más general, otra forma de interpretarla es “¿Cómo puede beneficiarse el aprendizaje profundo al manejar la incertidumbre de una manera matemáticamente basada en principios?”.

Habrá beneficios masivos en regímenes donde los datos son escasos en relación con la complejidad del problema. Casi todo el éxito que vemos en el aprendizaje profundo se basa en conjuntos de datos masivos que permiten que las funciones muy complejas que sustentan el aprendizaje estén bien determinadas en una amplia gama de entradas.

Como he escrito en publicaciones de blog recientes, el cálculo de la incertidumbre debería permitirnos hacer que funciones tan complejas sean robustas para la variación en la entrada que no está codificada directamente en los datos. Esto abre dominios importantes como datos médicos y problemas biológicos.

Curiosamente, una vez que lo ha hecho, también hace que el aprendizaje sin supervisión sea trivial. Los GPs profundos no tienen dificultad con el aprendizaje no supervisado. Sin embargo, soy un poco escéptico acerca de la idea de que el aprendizaje no supervisado es una especie de panacea global que resolverá todos los desafíos que enfrentamos. Viene con sus propios problemas (en realidad simpatizo más con el aprendizaje de refuerzo como una panacea global … pero tampoco le doy mucha credibilidad a esa idea, las panacea globales son notoriamente raras … afortunadamente, el aprendizaje de refuerzo eficiente también depende de manera crítica de la incertidumbre) .

Sin embargo, la propagación de probabilidad basada en principios sí conlleva una sobrecarga computacional significativa. Resolver estos gastos generales es un desafío muy importante. En mi opinión, es * el * desafío más importante en este momento. A este respecto, he puesto mi dinero donde está mi boca, porque he realizado una inversión personal significativa en una pequeña empresa que está tratando de abordar estos problemas.

More Interesting

¿Cuál es la posibilidad de hacer una máquina de pensamiento real?

¿Por qué TF (frecuencia de término) a veces da mejores puntuaciones F que TF-IDF para la clasificación de texto?

¿Cuál es la forma completa de AUC en el estado de AUC de los resultados del examen AKTU?

¿Qué tan complejo debe hacer un corrector ortográfico básico a través del procesamiento del lenguaje natural para verificar los nombres de los hoteles?

¿Cómo calcular la precisión y recuperación generales? ¿Obtengo la precisión y la recuperación de cada clase y obtengo el promedio

¿Cuál es la mejor manera de aprender Python si mi objetivo es usarlo específicamente para el aprendizaje automático?

¿Alguien consiguió un trabajo en Machine Learning después de completar un Nanodegree de Machine Learning?

¿Cuál es la diferencia entre ML y NLP?

¿Cuáles son los mejores cursos o referencias para la probabilidad de aprendizaje y las estadísticas para el aprendizaje automático?

¿Qué tipo de problemas han funcionado bien con Bayesian Networks?

Tengo un conjunto de puntos 3D y cada uno tiene una puntuación. ¿Cómo encuentro / busco un grupo denso de puntos de alta puntuación?

Máquinas de factorización: ¿cómo hacen los FM para hacer predicciones y aprender?

¿Es posible comenzar la investigación académica en matemáticas / aprendizaje automático sin la ayuda de un asesor? Está ocupado con su propuesta de subvención.

¿Qué debo leer para desarrollar un rastreador web que raspe un subconjunto de Internet y me brinde los enlaces de los sitios web que son tiendas de abarrotes?

¿Por qué el algoritmo de agrupación k-means se considera un algoritmo de aprendizaje no supervisado? ¿Qué es "aprender"? ¿No es solo otro algoritmo codicioso?