Capítulo 3. Desmitificar la arquitectura de los medallones
Este trabajo se ha traducido utilizando IA. Agradecemos tus opiniones y comentarios: translation-feedback@oreilly.com
En el Capítulo 1, exploramos la evolución de Spark y Delta Lake, y te presentamos la arquitectura Medallion. Este patrón de diseño ayuda a organizar los datos de forma lógica dentro de las modernas arquitecturas de lago. Utiliza tres capas (Bronce, Plata y Oro) para refinar progresivamente los conjuntos de datos a lo largo de los ciclos de vida de ingestión de datos, transformación de datos y carga de datos en varios destinos.
Explicar la arquitectura Medallion a las organizaciones suele parecer como abrir una caja de Pandora, ya que cada capa, destinada a abordar diferentes preocupaciones, carece de definiciones claras y directrices descriptivas. Esta ambigüedad da lugar a más preguntas que respuestas, creando un ciclo de confusión e ineficacia.
A pesar de la popularidad de este diseño de tres capas, existe un importante debate sobre el alcance, la finalidad y las buenas prácticas de cada capa. Además, la distancia entre la teoría y la aplicación práctica es considerable. En este capítulo, compartiré mis experiencias prácticas en el diseño de cada capa de la arquitectura Medallion utilizando un punto de vista teórico. En la Parte II, el enfoque pasa de la teoría a la práctica. Las percepciones de este capítulo se llevan adelante al participar en un ejercicio práctico en el que se te enseñará a construir ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access