Capítulo 7. El panorama general: Diseñar e implantar una plataforma Lakehouse
Este trabajo se ha traducido utilizando IA. Agradecemos tus opiniones y comentarios: translation-feedback@oreilly.com
En los capítulos anteriores, hemos tratado los componentes individuales de la arquitectura Lakehouse y sus consideraciones de diseño. Este capítulo tratará sobre cómo unir todos estos componentes para diseñar e implantar una plataforma lakehouse moderna, escalable y segura.
Este capítulo ayudará a los arquitectos de datos a diseñar una plataforma integral basada en la arquitectura lakehouse. También guiará a los ingenieros de datos en la aplicación de diversos procesos de gestión de datos y buenas prácticas en una casa del lago. Otras personas relacionadas con los datos, como analistas de datos, científicos, administradores y administradores de plataformas, pueden leer este capítulo para comprender en detalle los distintos procesos de la casa del lago y cómo pueden afectar a su trabajo diario.
Primero hablaremos de las actividades previas al diseño, como la recopilación de requisitos y la comprensión del sistema existente y sus retos. Estas actividades implican hacer las preguntas adecuadas a las personas adecuadas. A continuación, te ayudaré a establecer los principios rectores que sientan las bases de tu plataforma Lakehouse.
A continuación, explicaré las consideraciones de diseño para componentes clave como la ingestión de datos, el procesamiento, el almacenamiento, el consumo, la gestión ...