Capítulo 5. Mecanismos de computação para arquiteturas Lakehouse
Este trabalho foi traduzido com recurso a IA. Agradecemos o teu feedback e comentários: translation-feedback@oreilly.com
Se o armazenamento é o coração da casa do lago, então o motor de computação é o cérebro que realiza todas as suas atividades computacionais. É necessário um motor de computação de alto desempenho para ingerir, processar e consumir dados de uma plataforma de dados. Um motor de computação permite que os utilizadores da plataforma, como engenheiros de dados, analistas de dados, cientistas de dados, utilizadores empresariais e outros, acedam e utilizem os dados de acordo com as suas necessidades.
Neste capítulo, discutiremos primeiro os vários benefícios de computação de dados que obtém ao implementar a arquitetura lakehouse. Exploraremos como os lakehouses permitem o processamento unificado em lote e em tempo real, melhoram o desempenho das cargas de trabalho de BI e oferecem a liberdade de escolher qualquer motor de processamento.
Discutiremos também os vários motores de computação que estão disponíveis através de ferramentas de código aberto, plataformas Cloud ou outras plataformas de terceiros. Todos os CSP oferecem serviços de dados e de análise que fornecem recursos de computação. Discutiremos alguns dos serviços mais adoptados que os engenheiros e analistas de dados utilizam nas plataformas de dados modernas e os seus diferentes níveis de suporte para formatos de tabela abertos. Os exemplos que ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access