¿Cuál es la definición de ‘conjunto de desarrollo’ en el aprendizaje automático?

El conjunto de desarrollo es solo otro nombre para el conjunto de validación, que se utiliza para ajustar los parámetros de su algoritmo de entrenamiento y, de alguna manera, guiarlo para evitar un ajuste excesivo. Para obtener más detalles, consulte: la respuesta de Shehroz Khan a ¿Qué es un conjunto de datos de entrenamiento y un conjunto de datos de prueba en aprendizaje automático? ¿Cuáles son las reglas para seleccionarlos?

No hay una diferencia fundamental, como usted dice: son solo datos. Por lo general, sin embargo, divide sus datos en dos partes: utiliza su conjunto de desarrollo como conjunto de evaluación mientras se desarrolla bien. No desea utilizar el conjunto de evaluación para esto porque a medida que construye su sistema y ajusta sus parámetros, terminaría esencialmente mirando el conjunto de evaluación haciendo experimentos repetidos, tal vez incluso haciendo una búsqueda automática del espacio de parámetros, y tal vez al mirarlo realmente para descubrir cuáles son los errores. Si lo hace en el conjunto de desarrollo, es perfectamente kosher, y cuando tiene listo el sistema final, lo ejecuta en el conjunto de evaluación real.

En mi opinión, el “conjunto de desarrollo” es una parte integral de los procesos de aprendizaje automático donde los resultados de ciertos protocolos de prueba se comparan y evalúan para su validez. Un proceso de validación basado o derivado de conjuntos estadísticos recopilados de datos de tendencias …

Un proceso de validación de datos resultante o que conducirá a la creación de un nuevo conjunto de pruebas o series de rutinas. Se necesitaba un conjunto más avanzado de protocolos de prueba para ajustar los resultados de los anteriores …

Un proceso iterativo de ajuste fino que forma parte del conjunto de desarrollo. Donde la serie de resultados ahora se compara con los resultados reales reunidos … hasta que se cumplan y satisfagan todas las expectativas.