Overview
Este trabajo se ha traducido utilizando IA. Agradecemos tus opiniones y comentarios: translation-feedback@oreilly.com
Los proyectos de datos son una parte importante del ecosistema técnico de una organización, pero los ingenieros de datos de muchas empresas siguen trabajando en problemas que ya han resuelto otros. Esta guía práctica te muestra cómo proporcionar datos valiosos centrándote en varios aspectos de la ingeniería de datos, como la ingestión de datos, la calidad de los datos, la idempotencia y mucho más.
El autor, Bartosz Konieczny, te guía a través del proceso de creación de proyectos de ingeniería de datos fiables de principio a fin, desde la ingestión de datos hasta la observabilidad de los mismos, centrándose en patrones de diseño de ingeniería de datos que resuelven problemas empresariales comunes de forma segura y optimizada para el almacenamiento. Cada patrón incluye una descripción del problema dirigida al usuario, soluciones y consecuencias que sitúan el patrón en el contexto de situaciones reales.
A lo largo de este viaje, usarás herramientas de datos de código abierto y servicios de nube pública para aplicar cada patrón. Aprenderás:
- Los desafíos a los que se enfrentan los ingenieros de datos y su impacto en los sistemas de datos.
- Cómo se relacionan estos desafíos con los componentes de los sistemas de datos.
- Aplicaciones útiles de los patrones de ingeniería de datos.
- Cómo identificar y solucionar problemas con tus componentes de datos actuales
- Soluciones independientes de la tecnología para proyectos de datos nuevos y existentes, con ejemplos de implementación de código abierto.
Bartosz Konieczny es un ingeniero de datos independiente que lleva programando desde 2010. Ha ocupado varios puestos de responsabilidad que le han permitido trabajar en muchos problemas de ingeniería de datos en el procesamiento por lotes y en streaming.
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access