Arquitetar plataformas de dados e de aprendizagem automática
by Marco Tranquillin, Valliappa Lakshmanan, Firat Tekiner
Capítulo 6. Inovar com um Enterprise Data Warehouse
Este trabalho foi traduzido com recurso a IA. Agradecemos o teu feedback e comentários: translation-feedback@oreilly.com
No Capítulo 3, você aprendeu que a escolha entre um data lake e um data warehouse como o componente central da plataforma de dados em Cloud se resume ao fato de sua organização priorizar a engenharia/ciência (escolha um data lake) ou a análise (escolha um DWH). No Capítulo 5, focamos no conceito de lago de dados como um elemento central no design de uma plataforma de dados. Neste capítulo, aprenderá a abordar os mesmos problemas de custo, democratização, flexibilidade e governação utilizando um armazém de dados moderno como elemento central.
Começaremos com uma rápida recapitulação dos problemas que estão a ser resolvidos com a construção de uma plataforma de dados e discutiremos as tendências tecnológicas que tornam um DWH Cloud uma solução apelativa. Em seguida, analisaremos em profundidade o aspeto de uma arquitetura DWH moderna e a forma como pode efetivamente capacitar analistas de dados e cientistas de dados com ela.
Uma plataforma de dados moderna
Sempre que empreender um grande projeto tecnológico, deve começar por perguntar a si próprio quais os objectivos comerciais que pretende atingir, quais os desafios tecnológicos actuais e quais as tendências tecnológicas que pretende aproveitar. Nesta secção, vamos concentrar-nos em ajudar-te a compreender como abordar estas questões ao construir uma plataforma ...