¿Qué papel deberían jugar los estadísticos en la ciencia de datos?

Los estadísticos son las mejores personas para hablar cuando desea comprender cuáles son las limitaciones de sus datos. Ninguno de los otros especialistas en el campo de la ciencia de datos realmente parece preocuparse demasiado por esto.

Creo que los estadísticos y graduados centrados en la investigación de operaciones tienen una mejor perspectiva y comprensión de la ciencia de datos y sus algoritmos en lugar de los ingenieros informáticos.

Aprendemos el quid de los algoritmos,

P.ej . Algoritmos de descenso de gradiente, árboles de decisión, pronósticos y programación lineal.

Si bien les puede resultar más fácil aprender los paquetes de ciencia de datos en sus respectivos lenguajes de programación.

Pero al final del día, creo firmemente que un estadístico que aprende la codificación es mucho mejor que un informático que trata de aprender el esquema de algoritmos para su trabajo.

Para hacer eco del punto de Justin Rising, me he encontrado con algunas situaciones en las que los estadísticos han señalado errores significativos a los científicos entusiastas de los datos. Obtuve esto a través de la investigación con estadísticos y experiencia personal. El sinónimo es “académico”, como en “eso es solo académico: necesitamos respuestas y esta es una respuesta” (incluso si es totalmente erróneo / engañoso).

Estos son algunos conceptos de los que los estadísticos tienen una mejor conciencia: relación ruido / señal, sesgo, muestreo e inferencia, hacer y verificar supuestos sobre un modelo o datos, por ejemplo, multicolinealidad, comparaciones múltiples y pruebas a priori vs. post hoc, experimentos y causalidad .

la razón por la cual surgieron las estadísticas es por la limitación de datos. es decir, queremos hacer una declaración de una población con un tamaño de muestra seleccionado.
Sin embargo, con conjuntos de datos que son tan grandes y con una tecnología en crecimiento, es posible que no necesitemos estadísticas cuando podamos analizar a toda la población real. Por lo tanto, creo que las técnicas de los estadísticos podrían no ser realmente relevantes.