7 Motivos para você usar o Apache Airflow nos seus Data Pipelines.

  Рет қаралды 18,770

Stack

Stack

Күн бұрын

Пікірлер: 30
@joaoguilhermearaujo8201
@joaoguilhermearaujo8201 2 жыл бұрын
Põe na descrição ae. Abraços e parabéns pelo vídeo. 00:08 - Intro: O que é um Data Pipeline / Airflow 03:15 - Motivo 1: Lógica de desenvolvimento facilitada 04:30 - Motivo 2: Operadores 05:40 - Motivo 3: Gerenciamento de erros, notificações, alertas e log 06:43 - Motivo 4: Sistemas de agendamento avançados 07:59 - Motivo 5: Executores para processos distribuídos 09:25 - Motivo 6: Interface web amigável 10:42 - Motivo 7: Implementação de ambientes em cloud 12:20 - Conclusão
@ptcomics
@ptcomics Жыл бұрын
No meu outro canal de tecnologia tenho pouquíssimos inscritos, ninguém vai lá interagir, conteúdo de extrema qualidade, profissionalizante, que custaria caríssimo se fosse pago, trabalho nas madrugadas dando o meu melhor para ter 15 likes e 20 views... Aí voces vem aqui fazer um trampo de graça para o cara e ele nem deu a mínima para vocês kkkkk... Não colocou na descrição e nem deu like muito menos fixou teu comentário no top! Brasileiro gosta de ser feito de trouxa... Por conta disso eu parei de fazer conteúdos para KZbin, a gente quer cuidar bem dos inscritos mas os usuários de KZbin só vão pelos canais com milhares de inscritos, é uma separação e segregação desleal, brasileiro vai pela vista, pelos números e não pela qualidade. É bom ver isso, como voces são tratados pelos GRANDES KZbinRs ;-) Continuem assim....
@AdrianoReges
@AdrianoReges 3 жыл бұрын
Sim, faz um vídeo em detalhes, pra quem está começando com Airflow seria ótimo.
@felipesantana795
@felipesantana795 3 жыл бұрын
Legal, Adriano. Obrigado pelo interesse, farei o vídeo sim.
@emerson51802
@emerson51802 Жыл бұрын
Top, estou com a missão de implementar o apache airflow pra gerenciar os nossos pipilines que são todos em shellscript e esse vídeo deu uma base legal dos conceitos, valeu
@diegopmayer
@diegopmayer 3 жыл бұрын
Sim, estou já planejando para migrar para airflow
@felipesantana795
@felipesantana795 3 жыл бұрын
Boa Diego!
@claudioroberto8129
@claudioroberto8129 3 жыл бұрын
Tmb gostei. Acho que seria interessante explorar mais essa ferramenta. Vlw
@sandroregiscardoso5346
@sandroregiscardoso5346 2 жыл бұрын
Obrigado pelas dicas. Fiz um post no meu LinkedIn para gerar um calor no seu canal
@ClariceAoto
@ClariceAoto 3 жыл бұрын
Aintttt já já chego nessa matéria pra estudar!! Obrigada pelo material!
@Stack_tecnologias
@Stack_tecnologias 3 жыл бұрын
Que legal, Clarice :)
@MScFabianoBriao
@MScFabianoBriao 3 жыл бұрын
Show Felipe, melhor vídeo explicativo do Airflow até o momento aqui no KZbin. Bora mostrar um ETL de dataset para dentro de um S3 por script em python.
@felipesantana795
@felipesantana795 3 жыл бұрын
Ótima sugestão, Fabiano. Vou fazer sim!
@LuizPerciliano_78
@LuizPerciliano_78 3 жыл бұрын
muito bom, faz um vídeo ae
@felipesantana795
@felipesantana795 3 жыл бұрын
Show, Luiz. Vou fazer com certeza!
@demaxsuelmarques6382
@demaxsuelmarques6382 2 жыл бұрын
Muito bom o vídeo!
@gilbertomanhaes8850
@gilbertomanhaes8850 3 жыл бұрын
Seria ótimo um vídeo desde a instalação, configuração, criação de um data pipeline.
@Stack_tecnologias
@Stack_tecnologias 3 жыл бұрын
Obrigado pela sugestão, Gilberto. Faremos sim, fique ligado aqui no canal.
@brendoaraujo9110
@brendoaraujo9110 2 жыл бұрын
Olá, tenho um airflow rodando na minha máquina com Postgresql no backend do scheduler e LocalExecutor, mas quando coloco minhas dags para rodar ele consome bastante CPU do servidor, como poderia resolver esse problema de alto consumo?
@daniloricardosjc
@daniloricardosjc 3 жыл бұрын
Boa tarde, Felipe, a stack tem algum curso na Udemy ?
@Stack_tecnologias
@Stack_tecnologias 3 жыл бұрын
Oi Danilo, não temos curso na Udemy e sim em nossa própria plataforma. Vamos apresentar os cursos em detalhes no Bootcamp de Data Science. Se inscreva no link: bootcampdatascience.com/
@pedrogomes6
@pedrogomes6 3 жыл бұрын
Felipe meu guru, preciso entender melhor a aplicabilidade desta ferramentas. Aou leigo porém fascinado com a ciência de dados. No próximo vídeo que for falar do assunto, comece do começo.
@felipesantana795
@felipesantana795 3 жыл бұрын
Valeu Pedro, nos próximos farei começando pela aplicabilidade da ferramenta. Obrigado pelo interesse, um abraço!
@pedrogomes6
@pedrogomes6 3 жыл бұрын
@@felipesantana795 já sou seu aluno e estou fazendo o curso de data science Stack. São muitas tecnologias novas e por isso é importante entender o contexto onde utilizamos estas ferramentas.
@felipesantana795
@felipesantana795 3 жыл бұрын
@@pedrogomes6 Sem dúvidas, Pedro. Como já está na Stack recomendo que veja o curso Data Pipelines com Apache Airflow. Neste curso eu começo do zero até o desenvolvimento de Pipelines de Dados muito utilizados em projetos reais. Um abraço!
@pedrogomes6
@pedrogomes6 3 жыл бұрын
@@felipesantana795 Agardeço as suas orintações e parabenizo você pela agilidade nas respostas. Isso fideliza o cliente.
@felipesantana795
@felipesantana795 3 жыл бұрын
@@pedrogomes6 Estamos juntos, Pedro. Obrigado!
@elzitopereiradesouza4148
@elzitopereiradesouza4148 3 жыл бұрын
D
@elzitopereiradesouza4148
@elzitopereiradesouza4148 3 жыл бұрын
F ir
@ciceroneto7370
@ciceroneto7370 2 жыл бұрын
Cara! Estuda Mais!!!
Entenda o que é e como implementar um Data Pipeline.
16:49
Quando A Diferença De Altura É Muito Grande 😲😂
00:12
Mari Maria
Рет қаралды 22 МЛН
УДИВИЛ ВСЕХ СВОИМ УХОДОМ!😳 #shorts
00:49
Одну кружечку 😂❤️
00:12
Денис Кукояка
Рет қаралды 2,8 МЛН
Tutorial Airflow para engenharia de dados
26:18
Codifike
Рет қаралды 35 М.
apache nifi o CANIVETE SUIÇO para ENGENHARIA DE DADOS
13:11
What is Quality in Your Data and Why is it Important?
22:16
Raphael Amorim | Tecnologia e Negócios
Рет қаралды 79
Mão no código como usar o Spark com pyspark
28:45
Codifike
Рет қаралды 26 М.
Automatizando com Airflow | #devadev com Paula Ueda
14:27
Pagarme Talks
Рет қаралды 22 М.
Airflow for Beginners - Run Spotify ETL Job in 15 minutes!
16:38
Karolina Sowinska
Рет қаралды 144 М.
A MAIORIA VAI PERDER MUITO DINHEIRO NOS PRÓXIMOS MESES - Ray Dalio
25:27
Resumindo Conhecimento
Рет қаралды 28 М.
Introdução ao Apache Kafka - Parte 1
31:21
Full Cycle
Рет қаралды 67 М.
Como configurar o Apache Airflow na AWS (MWAA)
12:03
Danilo Sousa
Рет қаралды 2,7 М.
Quando A Diferença De Altura É Muito Grande 😲😂
00:12
Mari Maria
Рет қаралды 22 МЛН