¿Big Data llegó para quedarse?

Casi todos pueden estar de acuerdo en que BigData ha tomado el mundo de los negocios por sorpresa, pero ¿qué sigue? ¿Los datos continuarán creciendo? ¿Qué tecnologías se desarrollarán a su alrededor? ¿O los grandes datos se convertirán en una reliquia tan rápido como la próxima tendencia: la tecnología cognitiva? datos rápidos? – Aparece en el horizonte.

Echemos un vistazo a algunas de las predicciones de los principales expertos en el campo y qué tan probable es que se cumplan.

  • Los volúmenes de datos continuarán creciendo. No hay absolutamente ninguna duda de que continuaremos generando volúmenes de datos cada vez más grandes, especialmente teniendo en cuenta que se espera que la cantidad de dispositivos portátiles y dispositivos conectados a Internet crezca exponencialmente.
  • Las formas de analizar datos mejorarán. Si bien SQL sigue siendo el estándar, Spark está emergiendo como una herramienta complementaria para el análisis y continuará creciendo, según Ovum.
  • Surgirán más herramientas para el análisis (sin el analista). Microsoft y Salesforce anunciaron recientemente características para permitir que los no codificadores creen aplicaciones para ver datos comerciales.
  • El análisis prescriptivo se incorporará al software de análisis empresarial. IDC predice que la mitad de todo el software de análisis empresarial incluirá la inteligencia donde sea necesaria para 2020.
  • Además, según los informes de Forrester , las estadísticas de transmisión de datos en tiempo real serán los sellos distintivos de los ganadores de datos en el futuro. Los usuarios querrán poder usar datos para tomar decisiones en tiempo real con programas como Kafka y Spark.
  • El aprendizaje automático es una de las principales tendencias estratégicas para 2016 , según Gartner. Y Ovum predice que el aprendizaje automático será un elemento necesario para la preparación de datos y el análisis predictivo en las empresas que avanzan.
  • Los grandes datos enfrentarán enormes desafíos en torno a la privacidad, especialmente con la nueva regulación de privacidad de la Unión Europea. Las empresas se verán obligadas a abordar el ‘elefante en la habitación’ en torno a sus controles y procedimientos de privacidad. Gartner predice que para 2018, el 50% de las violaciones de ética empresarial estarán relacionadas con los datos.

  • Más compañías nombrarán un director de datos. Forrester cree que el CDO verá un aumento en la prominencia, en el corto plazo. Pero ciertos tipos de negocios e incluso las diferencias generacionales verán menos necesidad de ellos en el futuro.
  • Según Gartner, los “agentes y cosas autónomos” seguirán siendo una gran tendencia , incluidos robots, vehículos autónomos, asistentes personales virtuales y asesores inteligentes.
  • La escasez de personal de Big Data se ampliará de analistas y científicos para incluir arquitectos y expertos en gestión de datos según IDC.
  • Pero la escasez de talento de big data puede disminuir a medida que las empresas empleen nuevas tácticas. El International Institute for Analytics predice que las empresas utilizarán el reclutamiento y la capacitación interna para resolver sus problemas de personal.
  • El modelo de negocio de datos como servicio está en el horizonte. Forrester sugiere que después de la adquisición de The Weather Channel por parte de IBM, más empresas intentarán monetizar sus datos.
  • También surgirán mercados de algoritmos. Forrester supone que las empresas aprenderán rápidamente que pueden comprar algoritmos en lugar de programarlos y agregar sus propios datos. Se puede esperar que los servicios existentes como Algorithmia, Data Xu y Kaggle crezcan y se multipliquen.
  • La tecnología cognitiva será la nueva palabra de moda. Para muchas empresas, el vínculo entre la computación cognitiva y la analítica se convertirá en sinónimo de la misma manera que las empresas ahora ven similitudes entre analítica y big data.
  • Todas las empresas son negocios de datos ahora “, según Forrester. Más empresas intentarán generar valor e ingresos a partir de sus datos.
  • Según el Instituto Internacional de Análisis, las empresas que usan datos verán $ 430 mil millones en beneficios de productividad sobre su competencia que no usen datos para 2020.
  • Según algunos expertos, los “datos rápidos” y los “datos procesables” reemplazarán a los grandes datos . El argumento es que lo grande no es necesariamente mejor cuando se trata de datos, y que las empresas no usan una fracción de los datos a los que también tienen acceso. En cambio, la idea sugiere que las empresas deberían centrarse en hacer las preguntas correctas y hacer uso de los datos que tienen, grandes o no

Solo el tiempo dirá cuál de estas predicciones se cumplirá y cuál simplemente pasará a la oscuridad. Pero la conclusión importante, creo, es que el big data solo se hará más grande, y las empresas que lo ignoren se quedarán cada vez más atrás.

Los datos están creciendo actualmente a una velocidad exponencial. El 95% de los datos disponibles que tenemos hoy se acumulan en los últimos 2 años. Y esta declaración será válida para un futuro razonable. De hecho, la implementación de IoT aumentará aún más la acumulación y asimilación de estos datos. El almacenamiento y procesamiento de datos también se está moviendo de DBMS estructurado a formas no estructuradas como lagos de datos, etc. En la actualidad, Big-data es la única solución que puede manejar tan gran volumen, variedad, velocidad y veracidad de los datos.

Teniendo en cuenta todos estos puntos, parece que Bigdata tiene un buen futuro, todavía estamos cerca del punto de partida.

¿Big Data llegó para quedarse?

Big data no solo se va a quedar. Se va a poner grande .

La recopilación de datos y análisis a gran escala se está convirtiendo rápidamente en la nueva frontera de la diferenciación competitiva. Grandes empresas como Google, Amazon, Facebook, Twitter y Netflix están aprovechando este inmenso potencial de big data.

De hecho, las empresas que abarcan todo tipo de antecedentes, como productos farmacéuticos, venta minorista, telecomunicaciones y seguros, están comenzando a investigar esta nueva estrategia de datos.

Según el Ivey Business Journal , estas son las cinco ventajas para optimizar el uso de big data:

  1. Big Data puede desbloquear un valor significativo al hacer que la información sea transparente.
  2. A medida que las organizaciones crean y almacenan más datos transaccionales en forma digital, pueden recopilar información de rendimiento más precisa y detallada sobre todo, desde inventarios de productos hasta días de enfermedad y, por lo tanto, exponer la variabilidad y aumentar el rendimiento.
  3. Big Data permite una segmentación cada vez más estrecha de los clientes y, por lo tanto, productos o servicios personalizados mucho más precisos.
  4. Los análisis sofisticados pueden mejorar sustancialmente la toma de decisiones, minimizar los riesgos y descubrir información valiosa que de otro modo permanecería oculta.
  5. Big Data se puede utilizar para desarrollar la próxima generación de productos y servicios.

Si desea leer más sobre el potencial de Big Data, aquí hay un artículo perspicaz escrito por Harvard Gazette : Big Data, potencial masivo.

Big Data llegó para quedarse. Lo que evolucionará es la forma en que modelamos y trabajamos con Big Data. El modelado de datos no es nada nuevo, y es una forma de arte en sí mismo. Entonces, la extensión natural será desarrollar métodos para modelar cantidades de datos a gran escala, que de repente y recientemente se han vuelto mucho más accesibles para los científicos debido al aumento en la eficiencia del almacenamiento computacional.

Lamentablemente, Big Data se ha convertido en una palabra de moda, lo que realmente tenemos es un mayor apetito por el valor que se puede derivar de los datos existentes y / o la creación de nuevos conjuntos de datos. A veces esto significa que necesitamos muchos datos. A veces solo necesitamos una pequeña cantidad de datos. Pero lo que realmente queremos es una nueva visión de los datos que no se puede determinar fácilmente por otros medios.

Almacenar grandes cantidades de datos en bruto significa que tenemos un historial para ayudar a responder preguntas que aún no se han pensado, lo que presenta el “gran” problema, pero este es un problema de TI. Con el tiempo, esto se está resolviendo y el foco se está moviendo más hacia donde probablemente debería estar: el lado del “valor” de la moneda, es decir, lo que realmente queremos hacer con todos estos datos. Este es un tema más centrado en el negocio y por eso estamos viendo más y más discusión e innovación en áreas de aprendizaje automático, inteligencia artificial y análisis.