¿Hay alguna prueba de que no hay una solución algebraica para ajustar las redes neuronales con una (o más) capa (s) oculta (s)?

Es una muy buena pregunta. No, no hay tal prueba, al menos no que yo sepa. Estoy casi seguro de que existe una solución analítica para ajustar de manera óptima los parámetros en una red neuronal, pero la derivación es demasiado compleja para que los humanos la encontremos pronto.

De hecho, los parámetros de ajuste para una red neuronal es una gran generalización de otros problemas de ajuste para los cuales conocemos fórmulas cerradas: ajuste de hiperplanos u orientación absoluta (ver el método de Horn).

Eso parece todo verde, ¿verdad? Ahora, la mala noticia es que si uno mira el método Horn para una orientación absoluta y sigue todos los pasos en la derivación matemática, entonces debe admitir que incluso una cosa simple requiere bastante más matemática de lo que esperaría.

Así que mi instinto me dice que nuestra mejor oportunidad para encontrar una fórmula cerrada para la adaptación de la red neuronal es programar computadoras para realizar la búsqueda. Al igual que en las historias de Isaac Asimov, las matemáticas, incluso si son simbólicas, serán una cuestión de crear software para encontrar conocimiento.

Mientras tanto seguiremos usando métodos numéricos.

More Interesting

¿Son el aprendizaje automático / aprendizaje profundo / ciencia de datos, realmente ciencia espacial para que un tipo promedio entienda e implemente?

¿Puedo usar el aprendizaje profundo o ANN para un problema de agrupación como KNN?

¿Qué se usa en autos sin conductor, aprendizaje automático o aprendizaje profundo?

¿Cuánto tiempo lleva convertirse en experto en aprendizaje automático?

¿Cómo aprende IBM Watson de los libros y documentos médicos?

¿Quiénes son algunos de los principales profesores que enseñan Machine Learning en Europa?

Cómo pasar del desarrollo de pila completa al aprendizaje automático en el trabajo independiente

Cómo comenzar mi investigación sobre el aprendizaje por refuerzo si no soy bueno en Python

¿Existe algún informe publicado que haya aplicado con éxito el aprendizaje profundo para un sistema de recomendación basado en contenido de texto?

¿Por qué están recibiendo tanta atención Machine Learning + Big Data?

¿Cuáles son los problemas menos resueltos o no resueltos que se pueden resolver con el aprendizaje automático y el aprendizaje profundo?

¿Qué significa la afluencia de IA y Machine Learning en productos tecnológicos para los diseñadores de UX?

Usando TensorFlow, ¿cómo construiría una IA que pueda reconocer patrones en secuencias numéricas y luego transmitir el patrón al usuario? Está destinado a aprender los patrones que le doy de comer.

¿Qué programa de maestría de aprendizaje automático en UCL debería elegir?

Durante la limpieza de datos cuando tiene un número decimal que representa el número de personas, ¿debe redondear hacia arriba o hacia abajo? Además, ¿qué sucede si el número total de todos los números redondeados no coincide con el número total de personas, es un error?