¿Cuál es el problema más desafiante resuelto por un ingeniero en escalabilidad y sistema distribuido, analítica en tiempo real?

“El más desafiante” es subjetivo para sus expectativas. Big data es un espacio muy complejo y en constante evolución con la velocidad y el volumen de los datos. La mayoría de los problemas los resuelve un equipo o una serie de experimentos. Algunos desafíos tienen un impacto directo en el hombre y otros son indirectos. Algunas investigaciones han alterado las industrias y otras han estimulado la innovación. Aquí hay algunos ejemplos bien conocidos de mi memoria reciente.

Jeffrey Dean y Sanjay Ghemawat’s Map-reduce posiblemente tenga un impacto muy significativo en el espacio de big data en todas las industrias. Http: //static.googleusercontent….

Michael Stonebraker definió la arquitectura Shared Nothing: http://db.cs.berkeley.edu/papers…

Nathan Marz para Storm the stream procesador y también ideó el término Lambda Architecture (LA) para una arquitectura de procesamiento de datos genérica, escalable y tolerante a fallas, basada en su experiencia trabajando en sistemas de procesamiento de datos distribuidos en Backtype y Twitter.

Teorema CAP , también conocido como teorema de Brewer

Dryad – Microsoft Research