Data Lake VS Lakehouse; O que muda? Como são as tabelas?
Esse vídeo gravado em especial para a galera do projeto Azure que estou participando junto com o meu brother Quintella!!!
Quando eu fui trabalhar com essas tecnologias, eu estava acostumado com o banco relacional e tinha muitas dúvidas, então se você pretende um dia trabalhar com elas, dá uma olhadela nesse breve vídeo, mas obviamente que ele eh apenas um resumo de vários conceitos que precisam de mais tempo de dedicação paras entendimento mais profundo.
Conceitos abordados:
Modern Data Stack
Diferença entre Data Lake vs Lakehouse
Formatos de armazenamentos modernos (Delta, Hudi e Iceberg)
Conteúdos abordados:
Virtualização de arquivos com o Trino
Consulta SQL em arquivo CSV
Ferramentas utilizadas:
Minio
Trino
Meu Linkedin:
/ wallace-camargo-35b615171
Propostas Comerciais:
www.fwx-consulting.com
[email protected]
Documentações:
Minio
https://min.io/docs/minio/kubernetes/...
Trino
https://trino.io/docs/current/
Delta
https://delta.io/
#Dev #BigData #Lakehouse #DataEngineer #ModernDataStack