Ciencia de datos desde 0: Proceso de ETL(Extract-Transform-Load) con Logstash

Post con los comandos: www.albertcoronado.com/2018/0...
Blog: www.albertcoronado.com?
Twitter: / acoronadoc
Linkedin: / albertcoronado

[@danielfuentes7722]

Corto y preciso, lo demás lo investigo. Muchas gracias me aclaraste mucho.

[@danyhernandez127]

Excelentes videos Albert

[@agonzalezo]

Muy buen video, muchas gracias

[@JhonOlivares]

Nunca olvidar esto: 2:06

[@isacuxx7967]

excelente!..

[@arturogonzalezhenriquez9346]

Muy bueno

[@tzalejo82]

Hola genial el video!!estoy tratando de aplicar este proceso ETL en php(con Laravel) . Tienes algún ejemplo básico a parte del video o que librería me recomiendas usar? te lo agradecería!

[@gaussnet]

Muy buen video!!!! ¿Hay forma de automatizar el proceso para que no tenga que ejecutar el comando logstash por línea de comando cada vez? Es decir, que cada determinado tiempo lea el archivo .log y lo cargue en la BD. En realidad lo que yo necesito es hacer un input desde una BD y y la salida volcarla a Elasticsearch, pero la idea sería la misma Gracias!!

[@Asgallu]

Qué opinas de apache nifi?

[@syscabmcommunity3368]

hola y garcias por otro gran video, recomendarias implementar un cluster ELK en contenedores docker, y teniendo en cuenta que el host de docker es una maquina virtual?

[@NullSafeArchitect]

Si, de hecho el vídeo de la semana que viene va de esto

[@erikabeltran4792]

que herramientas se pueden usar para una extraccion de disferentes fuentes de origen independientes? si se tienen tablas en SQL server gracias

[@NullSafeArchitect]

Logstash te vale, por ejemplo. O fluentd

[@andresrodriguezortiz6677]

Buenas Albert, cuando intento correr el archivo .conf tengo este problema. ubuntu@ubuntu-VirtualBox:/etc/logstash/conf.d$ /usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/pipeline.conf OpenJDK 64-Bit Server VM warning: Option UseConcMarkSweepGC was deprecated in version 9.0 and will likely be removed in a future release. OpenJDK 64-Bit Server VM warning: INFO: os::commit_memory(0x00000000c5330000, 986513408, 0) failed; error='Not enough space' (errno=12) # # There is insufficient memory for the Java Runtime Environment to continue. # Native memory allocation (mmap) failed to map 986513408 bytes for committing reserved memory. # An error report file with more information is saved as: # /tmp/hs_err_pid4097.log