Has aprendido sobre los distintos sistemas fuente que probablemente encontrarás como ingeniero de datos y sobre las formas de almacenar datos. Ahora vamos a centrar nuestra atención en las pautas y opciones que se aplican a la ingesta de datos de diversos sistemas fuente. En este capítulo, hablaremos de la ingesta de datos (ver Figura 7-1), de las consideraciones clave de ingeniería para la fase de ingesta, de los patrones principales para la ingesta por lotes y por flujo, de las tecnologías que encontrarás, de con quién trabajarás mientras desarrollas tu canal de ingesta de datos y de cómo las corrientes subterráneas intervienen en la fase de ingesta.
Figura 7-1. Para empezar a procesar los datos, debemos ingerirlos
¿Qué es la ingestión de datos?
Laingestión de datos es el proceso de mover datos de un lugar a otro. La ingestión de datos implica el movimiento de datos desde los sistemas fuente al almacenamiento en el ciclo de vida de la ingeniería de datos, con la ingestión como paso intermedio(Figura 7-2).
Figura 7-2. Los datos del sistema 1 se ingieren en el sistema 2
Merece la pena contrastar rápidamente la ingestión de datos con la integración ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month, and much more.
