Construir una malla de datos basada en eventos

Capítulo 9. Integrar los Datos Basados en Sucesosen los Datos en Reposo

Este trabajo se ha traducido utilizando IA. Agradecemos tus opiniones y comentarios: [e-mail]

Los productos de datos basados en eventos proporcionan una flexibilidad excepcional a los consumidores, pero pueden no ser adecuados para todos los casos de uso. Los sistemas y dependencias existentes desempeñan un papel importante en cualquier arquitectura, y el cambio a una malla de datos depende de que se respalden los casos de uso existentes y, al mismo tiempo, se promueva un cambio incremental. Muchos sistemas, trabajos de procesamiento y cálculos dependen en gran medida de los datos en reposo, especialmente los del ámbito analítico.

En este capítulo, nos centraremos en la integración de los datos basados en eventos en los datos en reposo. Examinaremos la arquitectura Medallion y el papel que desempeña en los modernos flujos de trabajo de análisis de datos. Exploraremos las estrategias y compensaciones para determinar cuándo convertir los datos de un flujo de eventos en un lote de archivos en reposo. Por último, veremos un ejemplo del mundo real para llevar la teoría a la práctica. Entremos en materia.

La Analítica y la Arquitectura del Medallón

El cambio funciona mejor si primero se encuentra con tus usuarios donde están. Los pipelines y flujos de trabajo de análisis de datos basados en lotes son muy comunes en la mayoría de los sectores, y muchas organizaciones han invertido mucho en ...