Teorema sin almuerzo gratis (NFL Theorem) [Wol96] [WM + 95]: Para cualquier algoritmo de aprendizaje La y Lb, si La es mejor que Lb para algunos problemas, entonces debe haber algunos problemas Lb es mejor que La. En otras palabras, La y Lb tienen el mismo rendimiento en expectativa.
Ningún teorema del almuerzo gratis nos dice que no tiene sentido hablar de “qué algoritmo de aprendizaje es mejor” a partir de un problema concreto, porque si se consideran todos los problemas potenciales, todos los algoritmos de aprendizaje son igualmente buenos. Para hablar sobre la relativa superioridad de los diferentes algoritmos de aprendizaje, debemos abordar problemas de aprendizaje específicos. Una vez que se dan las características, y una vez que se da la distribución de datos, se ha resuelto un “problema”.
El aprendizaje automático no es un conjunto de algoritmos. Los algoritmos son límite, pero las tareas del mundo real varían. Debe haber algunas tareas que no puede resolver si solo usa estos algoritmos existentes sin cambios. Por lo tanto, no solo debemos centrarnos en la derivación de algoritmos y sus implementaciones de programación. Las ideas detrás de los algoritmos son las claves para modificar los algoritmos para que se ajusten a las tareas de la realidad.
- ¿Cómo haría alguien para crear 'The Machine' a partir de una persona de interés?
- ¿Cuáles son algunos ejemplos de productos o servicios a partir de los cuales podemos generar ingresos después de la inminente adquisición de robot / ai?
- ¿Hay algún programa que pueda transformar texto escrito en LaTeX básico?
- ¿Por qué razón las personas afirman que las entidades humanoides artificiales sintientes se rebelarán contra sus creadores?
- ¿Cómo será la progresión natural del aprendizaje automático? ¿Qué industrias tendrá más aplicaciones?
[Wol96] David H Wolpert. La falta de distinciones a priori entre los algoritmos de aprendizaje. Cálculo neuronal, 8 (7): 1341-1390, 1996.
[WM + 95] David H Wolpert, William G Macready, et al. No hay teoremas de almuerzo gratis para la búsqueda. Informe técnico, Informe técnico SFI-TR-95-02-010, Instituto Santa Fe, 1995.