¿Flink es compatible con Hadoop? Si es así, ¿cómo?

Sí, Flink es compatible con Hadoop. Puede procesar datos almacenados en hadoop y admite todos los formatos de archivo / formatos de entrada. Hay soporte de autenticación de usuario en Flink a través de la infraestructura Hadoop / Kerberos. Si ejecuta Flink en YARN, debería funcionar a la perfección, Flink adquiere los tokens Kerberos del usuario que envía programas y se autentica en YARN, HDFS y HBase con eso.

Flink también es un motor de cómputo que puede usar hdfs y Yarn de Hadoop para el almacenamiento y la gestión de recursos, respectivamente. Hay muchas características principales de Flink que diferencian Flink vs Spark vs Hadoop. Las API de Flink proporcionan interfaces para las funciones Mapper y Reducer, junto con muchos operadores como Input Formats y OutputFormats. “Aunque Hadoop MapReduce y Flink son conceptualmente equivalentes, las interfaces MapReduce y Flink de Hadoop para estas funciones no son compatibles con la fuente.

Para leer más haga clic aquí.