¿Cuál es la diferencia entre big data y meta data?

Big Data significa extracción de significado, patrones y relaciones en conjuntos de datos muy grandes.

Un problema de big data de ejemplo es el análisis que rodea los registros detallados de llamadas telefónicas, CDR. Cada vez que alguien en el planeta hace una llamada telefónica o envía un mensaje de texto, se genera un CDR. ¿Así que cuál es el problema?

Primero, esta es una gran cantidad de datos generados a alta velocidad. El análisis de manera oportuna requiere una técnica diferente de las que solían funcionar para pequeños conjuntos de datos. Simplemente, la cantidad tiene una calidad propia.

En segundo lugar, el CDR son metadatos . Tiene información sobre la llamada: los números de teléfono de origen y destino, la duración de la llamada, la hora de la llamada, etc. Lo que el CDR no transporta es el contenido de la llamada en sí.

Entonces, cuando la NSA promete no monitorear las llamadas telefónicas de los ciudadanos de estos Estados Unidos, solo significa que en realidad no escucharon la conversación entre usted y su amante. Sin embargo, dado que el CDR “no” es parte de la llamada y, por lo tanto, cae dentro del alcance de la red de pesca Big Data.

De acuerdo, el CDR muestra que llamaste a la amante. Los CDR muestran que ha llamado a la amante a menudo en los últimos meses. Los CDR de la amante a su vez muestran llamadas telefónicas regulares a conocidos maestros espías del Dr. Evil. Como usted es el científico jefe en el súper secreto ProjectX, el análisis de los CDR (los metadatos) muestra que es probable que el honeypot Dr. Evil lo comprometa.

Esto es Big Data. Es la capacidad de encontrar la aguja en el pajar examinando literalmente cada gota.

Big data : datos que exceden los límites de memoria en una sola computadora.

Metadatos: datos que describen algo sobre los datos, por ejemplo, de dónde provienen, cuándo se tomaron, etc.

Big data es una palabra de moda. Los metadatos son datos adicionales que no están indexados y generalmente están asociados con un determinado dato que es más importante. En el mundo de la palabra de moda, Big Data puede usar metadatos, pero no es obligatorio.