¿Cuál es la mejor manera de combinar datos clínicos y de imagen en un enfoque de aprendizaje profundo?

Las imágenes también son datos clínicos, a menos que la imagen se recopile del escaneo de un fantasma. Supongo que querías decir metadatos clínicos y datos de imágenes clínicas Usar metadatos para ayudar a un problema de predicción en imágenes es una buena idea. En el dominio médico, un objeto DICOM se define para incluir ambos. Pero en realidad, los metadatos a menudo se pierden en el encabezado DICOM. Tienes suerte de tener ambos datos.

El uso más popular es aumentar su conjunto de características a partir de metadatos. Por ejemplo, si los pacientes mayores tienen mayores posibilidades de contraer esta enfermedad, puede usar la edad del paciente como una característica. Si la enfermedad está en el pulmón, el historial de fumar puede ser otra característica. Si el objetivo es la detección / diagnóstico de cáncer de mama o de próstata, el sexo puede ser una característica. Entonces, combinando estas características “meta” con las características extraídas de las imágenes, su clasificador será mejor que solo usar imágenes solo.

Otro uso de los metadatos es entrenar dos clasificadores separados, uno usa las características meta y el otro usa las características de la imagen. La ventaja es que puede usar diferentes algoritmos de aprendizaje automático para diferentes clasificadores (por ejemplo, usar SVM para metadatos para reducir la posibilidad de sobreajuste, y ANN para datos de imagen para diseñar una red más compleja o palabra de aprendizaje “aprendizaje profundo”). Luego puede combinar dos salidas en un número para la clasificación final. La desventaja puede ser que puede mejorar su rendimiento de detección (mayor sensibilidad) pero al mismo tiempo aumentar la tasa de falsos positivos (menor especificidad). Por lo tanto, necesitaría comprender la correlación entre las meta características y las características de la imagen.

Espero que mi respuesta ayude.

Claro, puede extraer características de sus capas convolucionales y concatenar los otros datos clínicos a esos vectores. Sin embargo, dependiendo del clasificador que uses, ¡asegúrate de normalizarlo correctamente antes de hacerlo!

More Interesting

Cómo encontrar la correlación más fuerte entre los vectores de colores a continuación en MATLAB o Python

¿Es posible asegurar trabajos solo en base a la experiencia en aprendizaje automático sin ser un ingeniero de software adecuado?

¿La correlación entre dos variables cuenta como evidencia débil de un vínculo causal entre ellas?

¿Cómo funciona el CAPTCHA 'No soy un robot'?

¿Qué método de reducción de dimensionalidad puede mantener las relaciones de traslación entre puntos?

Cómo poner un programa de IA en un dispositivo

¿Cuáles son algunos proyectos interesantes del último año relacionados con el aprendizaje automático?

¿Cómo entrenamos redes neuronales en datos numéricos?

¿Cómo debo representar las características para la clasificación de texto?

Un perceptrón multicapa tiene parámetros como el tamaño de un lote, épocas, neuronas, velocidad de aprendizaje, etc. ¿Cuáles son algunas experiencias prácticas de sintonización?

¿Cómo se hace el cambio de C ++ a Python? Me siento más cómodo con C ++ y lo he estado usando para hacer la mayor parte de mi programación; Me parece que lleva mucho tiempo y Python hace las cosas rápidamente. ¿Cuál es la mejor manera de hacer el cambio?

¿Los científicos de datos y el ingeniero de aprendizaje automático necesitan saber implementar algoritmos ML / DL desde cero o simplemente usar las bibliotecas existentes en producción?

¿Cuál es la ventaja de utilizar la función de probabilidad logarítmica frente a la función de probabilidad para la estimación de máxima probabilidad?

¿Cuál es la diferencia entre un enfoque de bandido multi-armado y el control estocástico?

¿Cómo se pueden extender los codificadores automáticos a tamaños de imagen realistas como 640 x 480 o más?