¿Cuáles son las ventajas y desventajas de usar una gran red neuronal para realizar una regresión multivariada en comparación con los OLS normales?

Los profesionales de ANN – ANNs pueden, al menos en teoría [1], ” representar una amplia variedad de funciones interesantes cuando se les dan parámetros apropiados” utilizando una sola capa oculta. Esto significa que, en principio, las ANN pueden modelar no linealidades.

Contras de ANN: los ANN pueden representar una amplia variedad de funciones interesantes cuando se les dan parámetros apropiados utilizando solo una capa oculta, incluidas las no linealidades.

Seriamente.

Su modelo ANN puede funcionar tan bien para el problema que está tratando de resolver, que puede ser prácticamente inútil fuera del contexto estrecho dentro del cual lo está aplicando (vea sobreajuste [2]). No sugiere que OLS no sufra problemas de sobreajuste. Solo eso, los modelos ANN son más una caja negra , y la tentación de sobreajustar es mayor. (¿realmente sabes cómo se ven tus funciones de activación?).

En resumen, muéstrame tu problema y te sugeriré un método.

Notas al pie

[1] Teorema de aproximación universal – Wikipedia

[2] Sobreajuste – Wikipedia

More Interesting

¿Puede la IA en su etapa de desarrollo actual tener la capacidad de reducir la complejidad mediante el desarrollo de abstracciones?

¿Por qué entraste en el campo de la IA?

¿Cómo funciona el marco de aprendizaje automático SmartASS de Google y qué tan revolucionario es? ¿Qué modelos de ML aprovecha, quién lo creó, cuántas personas trabajan en él, cuántos servidores están dedicados a él?

¿Cuáles son algunas de las charlas TED imperdibles sobre temas de tecnología, especialmente Internet, IA, robótica y SMR?

¿Cuál de estos maestros ofrece más oportunidades laborales en Europa, ciencia de datos, inteligencia artificial o informática en general?

¿Cuáles son los mejores programas de maestría relacionados con la inteligencia artificial?

¿Cómo puede ser útil la IA para responder al problema "difícil" de la conciencia?

¿Cuál es un buen libro para comenzar a aprender sobre el desarrollo de un sistema de aprendizaje automático / IA?

¿Cuál es la mejor manera de aprender IA y aprendizaje automático con muchas manos en 2-3 meses (a tiempo completo)?

¿La IA será una amenaza para la humanidad mucho antes de lo previsto?

Inteligencia artificial: ¿Qué es 'barrido prioritario en el aprendizaje de refuerzo'?

¿Las iniciativas de investigación de IA de código abierto acelerarán la interrupción de los empleos y la economía a un ritmo inmanejable?

¿Cuáles son los idiomas más importantes para un ingeniero de aprendizaje automático?

¿Qué piensan los contadores del libro 'El futuro de las profesiones'?

¿Cuál es el mejor método para el reconocimiento facial, PCA, modelo o redes neuronales?