Como ler arquivo CSV com Node JS | Node JS Streams

[@joaovitorsoaresdefarias6197]

Mt obrigado pelo conteudo. Depois de 2 dias penando com um arquivo de 600 mil linhas, enfim consegui subir na base dados.

[@Gustavo054]

sua explicação foi uma das melhores, e olha que eu já vi muito video sobre o assunto, só agora eu entendi

[@rodrigoprado8754]

Ótimo video :) Eu tive um problema parecido para solucionar no trabalho. No meu caso eu estava recebendo via API SOAP um XML gigante que deveria ler e processar os dados. Parte do processamento resolvi via stream (request e leitura do xml) e parte com rabbitmq (processamento dos dados). Na leitura tive que trabalhar com "readline", pois o chunk não chegava bonitinho linha por linha. Foi bem trabalhoso 😔

[@kinerikin]

Pow Man! Gostei da didática! Obrigado pelo conteúdo 🎉 Vai ajudar aqui hein 👍🏻

[@matheusteodorodev]

Show quem bom ter ajudado!

[@devvsdev]

Obrigado por compartilhar!

[@andrelana180]

Tem exemplos de createStream chamando uma API?

[@jennifferkellyrufinodearau1840]

Faz um ensinando como inserir no banco através de uma rota

[@samuelmarcossherman272]

Como posso criar uma stream a partir de um objecto do s3 ?

[@AlmirBispo-CSV-Comp-DB]

demorou 33 segundos.Demorou absurdo

[@joaolucasnascimentoandrade2623]

Ótimo conteúdo!

[@lucasmarcelo4849]

Cara ensina a inserir no banco lendo do csv tanto a leitura quanto a inserção no banco com stream

[@elitexbr9336]

qual a fonte q tu ta usando no vscode?

[@matheusteodorodev]

Cacade Code

[@elitexbr9336]

​@@matheusteodorodev 👍👍

[@elvesbrito9633]

Mano conteúdo top, no segundo exemplo vc loga os dados mas como posso retornar esse dados? tipo para poder trabalhar as informações

[@matheusteodorodev]

Você pode criar uma readable stream e nela você pode fazer qualquer coisa, um log dos dados (como eu fiz) ou chamadas http ou para algum banco dados…

[@jorgelucas7494]

Para o meu funcionar eu tive que importar o Transform assim: import { Transform } from 'stream' espero ajudar alguém !

[@ericfelipesilvaesilva3282]

Massa, teria como inserir no banco também?

[@matheusteodorodev]

Teria sim, você pode criar uma writable stream que faz isso e adicionar ela na pipeline

[@tiagoalves5008]

@@matheusteodorodev Como lidar com erros que ocorrem em operações assincronas dentro de uma Writable Stream? Alguma regra de negocio ou até mesmo um erro do banco, valor null, chave duplicate etc....

[@YuriFontella]

@@matheusteodorodev basicamente eu posso ter várias writable stream então?

[@matheusteodorodev]

@@YuriFontella E várias transform stream dependendo da sua necessidade!

[@blackrock2222]

Já vou assistir

[@blackrock2222]

Vou criar um gráfico que irá mudar em real-time recebendo essas informações ai .. nunca fiz mas deve ser top. Como se fosse um serviço que está recebendo informação real-time de verdade . Acho que até daria um vídeo hein

[@matheusteodorodev]

Bacana de mais! Vai ser um excelente caso de uso em…

[@iury664]

podia ter trazido em typescript, embora o foco seja o stream, já não se coda mais sem ts.

[@Gustavo054]

se coda sim

[@andrebrumcortezferreira9171]

o transform stream está errado! pois ele tem que passar o parametro no callback para que a proxima pipe possa pegar os dados, acho que a writable stream deve estar tudo vazia

[@diegofernandes8357]

Bem legal

[@ValdirCezar]

Braaabo demais!