PRINCIPAIS FEATURES PARA MANUTENÇÃO DAS TABELAS DELTA NO LAKEHOUSE DO FABRIC.

[@SidneyCirqueira]

Links referenciados no video: learn.microsoft.com/en-us/fabric/data-engineering/lakehouse-table-maintenance blog.fabric.microsoft.com/en-US/blog/optimizing-spark-compute-for-medallion-architectures-in-microsoft-fabric/

[@Levy957]

Ótimo conteúdo como sempre!

[@SidneyCirqueira]

Obrigado pelo feedback meu amigo!

[@nicolastoni9974]

O que o overhead do Vorder causa? Eu deveria desabilitar ele na camada silver?

[@SidneyCirqueira]

O VOrder causa overhead pela necessidade de reorganizar os dados, se vc desabilitar o vorder na escrita da bronze, isso vai facilitar na rapida escrita dos dados. Na camada silver os dados são limpos, enriquecidos e passam tbm por verificações de qualidades. Não necessariamente será consumido diretamente pelos usuarios de reporting. Então vc pode sim optar por desabilitar o vorder na camada silver, pq suas transformações envolvem muitas escritas no storage e isso pode gerar overhead. Lembrando, tudo isso vai depender da quantidade de dados que vc está escrevendo. Vale a pena avaliar com calma sua necessidade. Por fim, não é recomendado desabilitar o VOrder na camada gold, pois o maior beneficio dessa tecnica é para facilitar a leitura dos dados com melhor performance.

[@nicolastoni9974]

@@SidneyCirqueira Beleza, muito obrigado! Você tem vídeo ensinando como pegar os IDs de locatário, cliente da entidade de serviço e chave de serviço para pipeline de dados? Quero copiar os arquivos xlsm de uma pasta no SharePoint para Lakehouse bronze mas não consigo criar esses itens no portal da azure. Se tiver agradeço. Existe alguma maneira mais eficiente de fazer essa operação?

[@SidneyCirqueira]

@ não entendi o que vc precisa. Poderia dar um exemplo prático ?