Cómo discriminar una señal del ruido en la última investigación y desarrollo de AI / ML

La relación S / N depende de la escala de tiempo que vea la investigación y el desarrollo de AI / ML.

Se están publicando muchos documentos, y puede parecer que hay mucho “ruido”. Sin embargo, solo es ruido si siente la presión de leer cada papel con la prensa.

Un solo artículo, como cualquier estudio en cualquier otro campo científico, no tiene mucho peso. Especialmente si es nuevo. Es solo después de que una técnica se verifica de forma independiente, se vuelve a aplicar en una variedad de configuraciones de problemas, que sabemos si una idea es buena.

Una forma mucho menos estresante de ingerir nuevas investigaciones en IA es simplemente cotillear con otros investigadores de IA, preguntarles qué piensan de un artículo determinado y tal vez esperar 1 año para ver qué pasa con el trabajo y si hay algún seguimiento publicaciones.

En una escala de tiempo de año a año, la relación S / N es realmente bastante alta, porque las ideas que son buenas y realmente funcionan se mantendrán, se reproducirán con código de código abierto o se refinarán. Ni siquiera necesita leer el periódico para ver esto.

Un buen artículo puede ser una buena lectura, incluso si resulta que no funciona bien. Por ejemplo, a veces uno puede inspirarse con sus propias ideas leyendo un periódico, o encontrar alguna justificación para un resultado muy convincente y perspicaz.

Si usted es un investigador activo en el campo, es una historia ligeramente diferente, ya que es más difícil encontrar contribuciones novedosas si tiene un retraso de 1 año en la lectura en papel. O tal vez es más fácil? A menudo siento que los investigadores de IA persiguen constantemente el trabajo de seguimiento a nuevas ideas de hace 1 año, pero no nuevas ideas de hace 2 años.

Cuando un campo se considera “candente”, hay varios investigadores que publican artículos que solo tienen un impacto delta pero que realmente no se suman al grupo de ideas.

Lo que buscaría en la investigación es si la investigación trae alguna idea nueva. Si es solo una repetición de viejas ideas aplicadas a algún área de nicho, simplemente lo ignoraría. Por ejemplo, si alguien dice “detectar leopardos de las nieves usando algoritmos de aprendizaje profundo”, eso es algo que ignoraría como puro ruido. Pero si alguien dice “Usar la arquitectura en columnas para reducir la velocidad del aprendizaje RNN”, me llama la atención de inmediato.

More Interesting

¿Por qué se usa tanto el aumento de gradiente con los árboles de decisión, en lugar de con otros clasificadores?

¿Cómo funciona la extracción de características en el procesamiento de imágenes?

¿Es el sesgo entre las mejores universidades frente a otras universidades en los Estados Unidos tan malo como el sesgo de IIT frente al resto de la India?

¿Qué tan buenos son los conjuntos de datos SIG en India (por ejemplo, red de carreteras / calles, parcelas municipales, etc.)? ¿Cuáles son las fuentes para este tipo de conjuntos de datos?

¿Qué libros o recursos de probabilidad y estadística debo consultar antes de sumergirme en Machine Learning, PNL, minería de datos, etc.? Soy un completo principiante.

Cuando la gente dice que la inteligencia artificial destruirá a la raza humana, ¿es que alguien los programará para que estén predispuestos a no gustarle la vida orgánica, o que de alguna manera adquirirán naturalmente las mismas emociones o algoritmos que lo llevan a uno a matar?

Procesamiento del lenguaje natural: ¿Hay alguna manera de medir la "informatividad" de una oración en un documento?

¿Cuáles son algunos usos prácticos o aplicaciones del conjunto de datos de YouTube 8M?

¿Cuáles son las ventajas y desventajas de la traducción automática estadística y basada en reglas?

¿Por qué no utilizamos la regresión logística para grandes conjuntos de datos de características?

¿Qué profesores / grupos / laboratorios están trabajando en el aprendizaje profundo en el MIT?

Procesamiento del lenguaje natural: ¿Cuáles son algunas ideas de problemas / proyectos sobre la clasificación jerárquica de textos?

¿Cómo debo aprender el aprendizaje automático? ¿Puede proporcionar una hoja de ruta específica desde un principiante hasta un experto?

¿Cuándo se utilizarían los bosques aleatorios sobre las máquinas potenciadas por gradiente (GBM)?

¿Cómo funciona un mecanismo de atención en el aprendizaje profundo?