Procesos ETL con Pentaho Data Integration (2 ejemplos prácticos) | 4SoftwareDevelopers

[@salomonaltamirano1143]

tienes algo sobre el monitoreo de los ETL con nagios? gracias!! excelente aporte.

[@yesidcalle01]

Me parece excelente, no he visto todo el video, pero me imagino que es muy basico, es posible que al hacer el proceso de extracion de registros, se puedan realizar con parametros, ejemplo, solo un periodo de ventas, pero sin necesidad de meterlo en el sql, si no, que tena algun cruadro de dialogo preguntando los campos y lo envie en el query?, para que solo traiga la informacion relevante. gracias por tus videos

[@luissanojacastellano8312]

Buenas tardes, Quisiera saber si en pentaho hay algún pluglins que me documente las etl de manera automática?

[@matiasfb80]

Hola, excelente el video, consulta? es totalmente libre este producto? o tiene algùn modo de licenciamiento al querer utilizarlo a x cantidad de registros? gracias nuevamente por compartir

[@4SoftwareDevelopers]

Hola Matías, puedes utilizar PDI completamente gratis 😎, saludos 😉

[@Sergioortizrangel]

De donde salio table input?

[@yesidcalle01]

Una pregunta, es interesante este aplicacion spoon, tienes un video donde explican como instalarlo en windows 10?

[@4SoftwareDevelopers]

Hola Yesid de momento no tenemos un vídeo cómo el que dices, saludos 😉

[@gatovsky]

En si no se instala, solamente descargas la herramienta desde la página de hitachi comunidad, descargas el zip y los descomprimes. En la carpeta data-integration, está todo lo que necesitas. Verás unos archivos spoon.sh y spoon.bat... el spoon.bat es para ejecutar el programa en Windows (no se si debas configurar tus variables de entorno porque funciona con java y creo que solo la versión 8... yo lo uso en Linux y cuando pongo a java 11 como default de sistema Spoon no funciona)

[@TheALTUVE]

Debes descargar JDK y setearlo en las variables de entorno de tu computador

[@lo9655]

Hola para hacer esa conexión a Oracle. Para poderlos pasar que hiciste ya que creo la conexión como dices tú pero al buscar la tabla se queda colgado y no avanza

[@4SoftwareDevelopers]

Hola, debe ser un problema con el servidor donde te estás conectado.

[@iliastellaarango3716]

Excelente video

[@4SoftwareDevelopers]

Hola Ilia, muchas gracias por tu comentario, esperamos seguir generando contenido que sea de tu agrado.

[@alejandrocabrera8920]

Excelente!

[@christiansanchez2217]

una pregunta cuando uno realiza una extraccion de una tabla, aparece que la mayor cantidad de datos extraidos es 1000(visualmente). realmente los toma todos o solo los mil que se ven visualmente cuando damos previsualizar.

[@4SoftwareDevelopers]

Hola Christian, se toman todos los registros de la tabla debido a que el query SQL que realizamos en el vídeo así lo indica es sólo al momento de previsualizar que la herramienta límite a 1000 la cantidad de registros.

[@vegetagoku69]

No entiendo bien la información que se rellena en el min @7:53 , no entiendo muy bien como funciona el programa, yo tengo sql server managment 2014. gracias

[@4SoftwareDevelopers]

Hola Seba, lo que se explica en esa parte del vídeo es la configuración hacia la base de datos, en tu caso debes usar el driver llamado MS SQL server y llenar los demás datos que te solicita la aplicación esos datos son el host, el usuario y la contraseña de la BD, saludos 😉

[@vegetagoku69]

@@4SoftwareDevelopers Graciaaas, pero ese driver es algo que viene incluído ya en SQL Server 2014 o hay que agregarlo?, Si ya está , dónde puedo verlo, pq hay un lugar de propiedades de SQL de dónde saque el host pero igualmente quedo incompleto para poder llenar ese "formulario", muchas gracias.

[@4SoftwareDevelopers]

Hola, el driver es el puente entre el programa que se muestra en el vídeo y la base de datos que ya tienes instalada no necesitas instalar nada más en tu SQL Server, solo debes configurar la conexión que te solicita el programa del vídeo, eso es todo. La información que solicita el formulario ya deberías conocerla, esa información la obtienes al momento de instalar el motor de BD, si estás corriendo todo sobre una misma máquina el host es localhost, la recomendación es que te documentes un poco mejor antes de seguir el tutorial, sigue como vas, saludos 😉

[@gustavoechenique7441]

Excelente video, muy buena la explicación, pero tengo una duda: si yo necesito solamente migrar procedimientos almacenados y consultas de una base a otra distinta (Ejemplo: PostgreSQL a MySQL), ¿con esta herramienta se puede hacer?, ¿o Pentaho tiene alguna otra herramienta específica para esto?

[@4SoftwareDevelopers]

Hola Gustavo, Pentaho, no permite hacer migración de este tipo de elementos entre base de datos y aunque sería posible realizar esta tarea, quizá tengas compatibilidad en la parte del SQL Estándar, pero ya en funciones y procedimientos puede que no encuentres una función similar en el nuevo motor de base de datos. Aunque todos los motores de bases de datos relacional son compatibles con SQL, cada uno lo implementa a su forma, generando algunas diferencias. Lo que sí es posible con Pentaho es incluir la ejecución de un procedimiento almacenado o función dentro de un ETL.

[@mariidelvalle]

hola! esta herramienta funcionaría para migrar data de un mysql5.1 on-premise a Aurora Postgres en AWS?

[@4SoftwareDevelopers]

Hola, estuvimos indagando un poco y por el momento la herramienta no soporta lo que necesitas de forma nativa, hay un plugin de pago que puedes usar, te dejamos el link : panoply.io/integrations/amazon-aurora-postgre/pentaho/ hay una buena noticia y es que el equipo de Hitachi Vantara tiene un issue abierto donde agregará esta funcionalidad así que una futura versión probablemente se soportará de forma nativa, te dejamos el link de la issue: jira.pentaho.com/browse/PDI-14792?page=com.atlassian.jira.plugin.system.issuetabpanels%3Aall-tabpanel

[@chrism3790]

Yo más bien utilizaría AWS Cloud Migration para esto.

[@4SoftwareDevelopers]

Totalmente de acuerdo contigo.