Data Mesh, Data Lake ou Data Warehouse? Que arquitetura utilizar?

Рет қаралды 7,072

2 жыл бұрын

Se você nao sabe que tipo de armazenamento de dados e arquitetura utilizar (Data Warehouse, Data Lake ou Data Mesh) esse é seu vídeo, te vou revelar como escolher entre as 3 tecnologias.
Artigo Data Mesh: martinfowler.com/articles/dat...

Пікірлер: 25

@andressamenezzes2414 Жыл бұрын

Vídeo simples, direto e muito elucidativo, parabéns pelo conteúdo!

@LCDados Жыл бұрын

Obrigado Andressa!

@rafaelscolarimaciel 2 жыл бұрын

Explicação foi fantastica, faz o video sobre a criação do Data Mesh por favor!

@LCDados 2 жыл бұрын

Fala Rafael conta com isso!

@LCDados 2 жыл бұрын

Desculpa a demora Rafael, ai vai: kzfaq.info/get/bejne/ic1je8qnt9Kofas.html

@luizgustavobrancobelemmysz9799 Жыл бұрын

Interessante, parabéns pelo conteúdo. Me deu um caminho para continuar explorando a arquitetura/conceito "Data Mesh"

@abraaopaschoaldeoliveira9273 2 жыл бұрын

excelente explicação!

@evaldoluizcavalcanti8180 10 ай бұрын

Excelente explicação, estou iniciando nesse tema e também achei fantástica.

@MrKiraBR Жыл бұрын

Fenomenal sua explicação, cara. Muito obrigado!

@Soldcastro Жыл бұрын

Boa explicação!

@manoelfgneto1 4 ай бұрын

Você é incrível!!!

@1986ssp 2 жыл бұрын

Muita boa a explicação.

@LCDados 2 жыл бұрын

Obrigado Samuel! Grande abs !

@tiago0004 Жыл бұрын

Ótimo video! Só pra deixar algo aqui a ser pensado. O Daralakehouse veio para garantir algo que um datalake puro não faz: ACID. Dps da revolucao do armazenamento distribuido a maioria das grandes empresas usam o data lake como um saco de lixo. Dado duplicados, sem governanca e sem acid. No meu entendimento a melhor combinacao atual é data lake como raw data, dps os dados trafegam para algum datalakehouse(Hudi, Iceberg ou Delta) e de lá criam se os marts(data mesh). O que acham?

@Ricardo-xt9iy Жыл бұрын

Poderia falar sobre data fabric?

@LCDados Жыл бұрын

O próximo video vou dedicar a isso!

@Ricardo-xt9iy Жыл бұрын

@@LCDados Uma outra dica tb ...dar exemplos praticos ... em cases reais ...fica muito mais facil entender .... qual problema cada sistema resolve

@kramnn Жыл бұрын

Obrigado pelo vídeo! Estou esbarrando em entrevistas pq nunca utilizei data lake. Poderia me indicar algum curso?

@LCDados Жыл бұрын

Oi Alexandre, te recomendo as certificacoes da AWS y de GCP, elas sao muito boas para comecar! Abs !

@cesarmicheletti349 2 жыл бұрын

Data mesh, algo como a velha modelagem conceitual?

@LCDados 2 жыл бұрын

Isso! mas com a flexibilidade das plataformas Cloud, provocanto un consumo massivo de dados como Servico (DaaS)

@ccardoso79 2 жыл бұрын

@@LCDados Qual a diferença entre Data Mesh e LakeHouse ?

@LCDados 2 жыл бұрын

@@ccardoso79 Oi Carlos, o Mesh é a forma como você constroi o seu “parque de dados” ja o lake house é uma técnica que mistura “big data” com a modelagem tradicional. Você pode ter um mesh que utiliza a modelagem lake house. São complementares. Um abs!

@contandozeros3317 Жыл бұрын

Olá, boa tarde, tudo bem? :) Fiquei com uma dúvida em relação ao último tema que você abordou, o Lake House. Entendi que o Data Mesh seria a união de um lake com a ideia de data marts (que são os domínios). Contudo, a união: lake + data marts é justamente o conceito que você sugeriu para um Lake House. Logo Lake House e Data Mesh seriam a mesma coisa? (União de um lake + separações (seja domínios ou data marts)) Como entendendo que não são a mesma coisa, até pelo fato de terem nomes diferentes rs, qual seria a diferença entre Data Mesh e Lake House? Desde já agradeço demais por esse vídeo, pois aborda os temas que tenho mais dúvida!

@LCDados Жыл бұрын

Muito boa pergunta. O Data Mesh é uma tecnica (arquitetura) da sua estrutura de dados e o Lake House é como vc distribuí os dados. O Data Mesh efetivamente pode fazer uso de um Lake House, vai depender muito de como vc quer que seu usuario ou sistema consumam os dados. Espero ter ajudado!