Cloud Native, GCP e Kubernetes dá para usar VPN na VM obter dados do Twitter e analise de dados

[@antoniothomacelli]

E ai você já conhecia sobre Kubernetes? Acha que consegue criar uma aplicação para essa infraestrutura? Segue a a trilha para saber como sua melhor todo esse Ecossistema! Quer saber algum tema em específico? Deixa no comentário o que gostaria.

[@arozendojr]

Um dúvida pior, apache bean, Spark ou consumer goLang ?

[@antoniothomacelli]

E ai chará, primeiro obrigado pelo comentário. A resposta padrão é depende porque na sua frase falta algumas informações importantes. Mas eu iria na seguinte lógica, se você tem pouco tempo ou o projeto ainda é pequeno eu iria de Go primeiro por causa da velocidade e simplicidade na entrega para consumir ou construir a pipeline, você sairia rápido do zero. Porém, se você tem tempo, dinheiro e o projeto já está com uma cara mais robusta já começaria a desenhar a estrutura com o Google Cloud Dataflow pois você teria a Google como apoio também. Talvez a doc ajude em algo cloud.google.com/dataflow/docs/overview não sei se te ajuda :)

[@antoniothomacelli]

Talvez essa doc possa ajudar também. cloud.google.com/composer/docs/how-to/using/using-dataflow-template-operator?hl=pt-br