Splunk y Hadoop son soluciones realmente diferentes para diferentes problemas, no es como si usaras Splunk para el análisis de registro o Hadoop (¿o quizás te refieres a la chispa?).
Puede usar registros obtenidos de Splunk, si su organización lo usa para investigación y el volumen es realmente suficiente.
Depende de qué tipo de datos esté buscando. Pero mi consejo general es dejar de pensar en el problema como un problema de “conjunto de datos” y, en cambio, pensar en formas de recopilar los datos de forma proactiva.
- ¿Cómo aborda un científico de datos experto un problema de aprendizaje automático? ¿Puedes explicar paso a paso?
- Como empresa de tecnología, ¿Amazon usa más Python que R para proyectos de Data Science?
- ¿Cuáles son las aplicaciones de big data y Hadoop en educación?
- ¿Cómo se puede utilizar Data Science en el sector de las telecomunicaciones?
- MLconf 2015 Seattle: ¿Cómo puede usar la topología para abordar los problemas de aprendizaje automático?
En realidad, puede ser bastante fácil después de conocer la lógica básica del ecosistema.
Si, por ejemplo, está buscando binarios, la mayoría de los malwaers ya están ocupados en encontrar formas de expandir su alcance e infectar tantas máquinas como sea posible.
Si desea analizar los patrones de tráfico, recopile todo lo que pueda y extraiga los patrones de tráfico.
Si desea omitir esta parte, busque resorcues que realmente proporcionen datos resumidos, hay muchos, depende de los datos en bruto reales que esté buscando.
La verdadera salsa secreta es cómo puedes hacerlo en gran escala, pero si lo encuentras interesante, encontrarás tus propias metodologías e investigarás las de otros.
