¿Me puede dar algún ejemplo de proyectos de big data?

Si está buscando explorar la transmisión en tiempo real, pruebe el siguiente caso de uso:

Intenta descubrir los hashtags populares que las personas usan mientras tuitean en un evento / persona.

Si desea jugar con chispa, tormenta y kafka, he escrito algunos blogs que pueden serle útiles.

  • Spark Streaming parte 1: análisis de sentimientos de Twitter en tiempo real
  • Spark streaming parte 2: análisis de sentimientos de Twitter en tiempo real usando Flume
  • Spark streaming parte 3: análisis de sentimientos de twitter en tiempo real usando kafka
  • Garantías de datos en Spark Streaming con integración Kafka

Usando Storm para analizar datos de Twitter e integración con kafka:

  • Procesamiento de flujo en tiempo real usando Apache Storm – Parte 1
  • Procesamiento de flujo en tiempo real usando Apache Storm y Kafka – Parte 2

También revise mis repositorios de github para el código:

  • stdatalabs / SparkTwitterStreamAnalysis
  • stdatalabs / StormTwitterStreamAnalysis

Como desarrollador profesional de Big Data, puedo entender que los videos de YouTube y los sitios de tutoriales pueden proporcionar conceptos básicos básicos y no más que eso. Hoy en día, la competencia es muy alta, por lo que el conocimiento y el proyecto de profundidad es obligatorio para asistir a una entrevista de desarrollador de Hadoop / Spark.

Tengo 5 proyectos profesionales en tiempo real de Apache Spark, y 37 proyectos en Apache Hadoop con Apache Kafka Corporate Training también impartidos por separado con la integración de Spark-Kafka. Usando los cuatro módulos de Spark y uno de estos proyectos, cualquiera puede elegir mostrar para la entrevista de Big Data. También lo que será equivalente a un candidato de experiencia.

4 Los proyectos se describen de manera práctica, de principio a fin, con conferencias en videos separados y documentaciones en pdf, presentaciones ppt, códigos, copias en papel, etc., que también se ofrecen con cada video. Enormes datos en bruto también se dan con este paquete para procesar. Proyecto Scala también incluido.

Los cuatro módulos de Spark: SparkSQL, Spark Streaming, GraphX ​​y Spark Machine Learning Library Los módulos y las lecciones prácticas sobre los videos de las conferencias se dan con documentaciones en pdf. Cloudera preinstalada también incluida.

5to proyecto E-Commerce El proyecto Yahoo Finance que usa Spark Streaming-SparkSQL-Kafka-Elastic Search también se incluye en este paquete.

También obtendrá acceso de por vida al clúster utilizando masilla y winscp para obtener experiencia a nivel de la industria.

Si alguien realmente está interesado en ser un maestro de Apache Spark y realmente quiere comenzar desde el nivel de principiante hasta el nivel avanzado , puede enviarme un mensaje a WhatsApp +91 8927788800 para obtener este paquete completo con soporte técnico de por vida.

Los mejores deseos !!

Los proyectos de Big Data se pueden clasificar en las siguientes categorías en todo el dominio de la industria. Sin embargo, la clave es ejecutar paralíticos sobre los big data recopilados. Y Analytics enviará información a las ventas de primera línea, al auditor profesional o al gerente de operaciones. Agregar el aprendizaje automático a Big Data puede continuar ajustando los modelos analíticos.

  • Aumento de ingresos al expandir el pastel: algunos de los casos de uso son, por ejemplo, la generación de leads de las redes sociales, la microsegmentación de la base de clientes basada en el comportamiento, Next Best Offer o Next Best Action.
  • Optimización de procesos y ahorro de costos : el análisis cognitivo y la coincidencia de patrones ayudarán a optimizar las operaciones. Algunos ejemplos son la fuga de ingresos en telecomunicaciones, identificando cuellos de botella en funcionamiento, como en qué momento el cliente llamó al centro de llamadas, etc.
  • Cumplimiento y auditoría: todos los archivos de registro y todos los clics pueden almacenarse y auditarse en cualquier momento.

Una ciudad en el norte de España se está volviendo grande en “big data” y “ciudad inteligente”: Santander, la primera “ciudad inteligente” en Europa

Tienen sensores en todas partes para recopilar datos: tráfico y lugares de estacionamiento, nivel de cada bote de basura, transporte público, calidad del agua, … Y hacen públicos todos los datos …

Aquí el enlace, si te conviene http://www.smartsantander.eu/

o google para más información 🙂