El almacenamiento es la piedra angular del ciclo de vida de la ingeniería de datos(Figura 6-1) y subyace a sus principales etapas: ingestión, transformación y servicio. Los datos se almacenan muchas veces a medida que avanzan por el ciclo de vida. Parafraseando un viejo dicho, es almacenamiento hasta el final. Tanto si los datos se necesitan segundos, minutos, días, meses o años después, deben persistir en el almacenamiento hasta que los sistemas estén preparados para consumirlos para su posterior procesamiento y transmisión. Conocer el caso de uso de los datos y la forma en que los recuperarás en el futuro es el primer paso para elegir las soluciones de almacenamiento adecuadas para tu arquitectura de datos.
Figura 6-1. El almacenamiento desempeña un papel central en el ciclo de vida de la ingeniería de datos
También hablamos del almacenamiento en el Capítulo 5, pero con una diferencia de enfoque y dominio de control. En general, los ingenieros de datos no mantienen ni controlan los sistemas fuente. El almacenamiento que manejan directamente los ingenieros de datos, en el que nos centraremos en este capítulo, abarca las etapas del ciclo de vida de la ingeniería de datos, desde la ingesta de datos de los sistemas fuente hasta el servicio ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month, and much more.
