ETL | CONSUMINDO DADOS DE UMA API REST COM PENTAHO DATA INTEGRATION (PDI)

👇 LEIA A DESCRIÇÃO 👇
✅ APRENDA A IMPLEMENTAR UMA SOLUÇÃO DE BUSINESS INTELLIGENCE COM PENTAHO DO ABSOLUTO ZERO:
comunidados.club
ETL | CONSUMINDO DADOS DE UMA API REST COM PENTAHO DATA INTEGRATION
Fala pessoal, aqui é o Leo da Pendata!
Nesse vídeo mostro para vocês como consumir dados de uma API REST utilizando o Pentaho Data Integration (PDI)!!!!
Dados do portal: brasil.io/home/
1) Criar Transformação e configurar os steps necessários
2) Utilizar REST Client (Step) para conectar na API
3) Organizar os dados utilizando o Step JSON Input (Método Raiz)
Vamos nessa turma!
Quem quiser contribuir com a galera do Brasil.io segue o link: brasil.io/doe/
#ETL​​ #PENTAHO​​ #PDI #SPOON #KETTLE​ #DADOS​​​ #API #REST #RESTAPI #BI​​ #INTEGRATION​​ #BRASILDADOS #COVID19 ​​ #ANALISE #JSON #STEPS
PARA ACOMPANHAR NOSSO DIA A DIA E MAIS CONTEÚDOS:
INSTAGRAM
/ bicompentaho
FACEBOOK
/ pendataanalysis
BLOG
www.pendata.com.br
LINKEDIN
JONATHAN
/ jonathandantaschagas
LEONARDO
/ leonardo-g-99b693b3

[@aresende001]

Eu nem estava pesquisando sobre isso mas o KZbin recomendou, parabéns pelo vídeo, muito bom.

[@Comunidados]

HAHA, santo KZbin :)

[@gabrielfinco8768]

Curiosamente foi o assunto que mais pesquisei hoje!! Obrigado

[@Comunidados]

Coincidência ? Será ? HAHA Tmj.

[@realwalteroliveira]

Gratidão pelo compartilhamento , muito bom.

[@Comunidados]

Imagina, Walter. #tmj

[@ERICALBERTOSILVA]

Excelente conteúdo, simples, objetivo e prático!!

[@Comunidados]

Obrigado pelo elogio Eric.

[@kleberfreitas5807]

Ficou top a Aula!! Parabéns!!

[@Comunidados]

Obrigado Kleber 😃

[@wallacefilipini5534]

Ótimo vídeo, parabéns

[@dayvson1]

Ansioso para ver a próxima aulam

[@Comunidados]

Sairá logo menos Dayvson. Grande abraço!

[@victoriackstet1089]

Excelente tutorial

[@Comunidados]

Valeu, Vitor.

[@jefersonvalentim7809]

Muito legal, quero a aula de paginação, preciso muito

[@Comunidados]

Esse video estará em breve no canal Pendata, Jefferson.

[@heberruas9708]

Obrigado pelo conteúdo

[@Casdias]

Ah que massa! Mestre, se possível, dê andamento nos ensinamentos do pdi usando estes dados da COVID!

[@Comunidados]

Sem dúvida, iremos explorar muito mais os assuntos sobre o C19.

[@Kerbberuss]

Muitooo fodaaaa...obrigado

[@gusalzate1980]

My Rest Client Step executes in an infinite loop, never continues to the next Step, ¿What it could be? Solved: In a Previous step, Generated Rows, I had put generate 100 values

[@thomazalbrecht]

E no caso de um get? Qual seria o procedimento?

[@Comunidados]

Pode ser feita de diversas formas diferentes, inclusive utilizando o Rest Client, mudando o Method de Post para Get.

[@afonsoleite2933]

Amigos, a forma como vocês pegam os dados via API, como os do exemplo, pode ser aplicado a qualquer site, conceitualmente falado? Ou vai mudar padrão para plataformas como LinkedIn, Insta, Facebook etc?

[@Comunidados]

Fala, Afonso. Cada plataforma e API pode ter uma forma de autenticação diferente. Mas geralmente não foge muito do que foi apresentado.

[@afonsoleite2933]

@@Comunidados gratidão!!

[@osleyluciodesouza4863]

Boa tarde! Como extraio diretamente de um banco de dados (está como json)

[@Comunidados]

Para extrair dado de um banco de dados você pode utilizar o step Table Input

[@osleyluciodesouza4863]

@@Comunidados quando puder, faz um vídeo mostrando.

[@vieiramaicon]

Tentei hoje a tarde toda fazer funcionar e ficava negando. Aí do nada funcionou. Não sei se foi algum problema com a chave. Uma coisa que reparei testando é que não precisa preencher os campos HTTP Login e HTTP Password.

[@Comunidados]

Fala Maicon. Isso. O Login e Password devem ser colocado quando há um outro tipo de autenticação. Geralmente, são utilizados tokens no parametro autorization do Header, como no exemplo em questão. Grande abraço;

[@gutembergbaiao8390]

@@Comunidados Fiz os passos e não consigo acessar. No primeiro passo, até o preenchimento do REST Client. Na execução, apresenta mensagem "error code: 1010". Retirei agora os dados HTTP Login e HTTP Password e ainda assim não funcionou; Pode ajudar ?

[@lucielbonella9231]

Bom dia. Gostaria de saber porque no meu gerou apenas 1000 linhas.

[@Comunidados]

opa Luciel, tudo beleza? Então na configuração padrão da API ela retorna somente 1000 linhas, existe um parâmetro que podemos passar chamado page_size esse parâmetro pode receber até o valor de 10000 (dez mil). porém eu fiz uma aula mostrando como fazer a paginação e explico um pouco mais sobre a quantidade de registros kzbin.info/www/bejne/eZuWhaScfceKj9k

[@lucielbonella9231]

@@Comunidados Mas seria possível com o parâmetro trazer todas as linhas?

[@micaelcustodio]

Pessoal, alguem manja enviar os dados para uma api com autenticação?