book

Apache Hudi: la guía definitiva.

by Shiyan Xu, Prashant Wason, Bhavani Sudha Saktheeswaran, Rebecca Bilbro

October 2025

Intermediate to advanced

290 pages

7h 59m

Spanish

O'Reilly Media, Inc.

Book available

Read now

Unlock full access

La evolución de las arquitecturas de gestión de datosEl auge de los lagos de datosEl problema del "lago de datos transaccional" de Uber¿Qué es Hudi?La pila HudiFormato de tabla nativoFormato de Tabla ConectableMotor de almacenamientoAPI de programaciónAcceso de UsuarioComponentes compartidos de la plataformaHudi en el mundo realResumen
Operaciones básicasCrear la TablaInsertar, Actualizar, Eliminar y Obtener RegistrosElegir un tipo de tablaCrear una Tabla de Fusión en LecturaDisposición de la tabla MOR tras las escriturasCopiar al escribir frente a combinar al leerUso AvanzadoCrear una tabla como SelectCombinar datos de origen en la tablaActualizar y Borrar Utilizando Campos Clave No RegistroConsulta de viajes en el tiempoConsulta incrementalResumen
Desglose del flujo de escrituraIniciar compromisoPreparar registrosParticionar registrosEscribir en almacenamientoConfirmar cambiosResumir el flujo de upsertExplorar las operaciones de escrituraDefinir las propiedades de la tablaUtilizar INSERT INTORealizar una fusión parcial con MERGE INTOBorrarSobrescribir Partición o TablaDestacar funciones importantesGeneradores de ClavesModos de FusiónEvolución del esquema en escrituraBootstrapResumen
Integración con motores de consultaCiclo de vida de la consultaCatálogo de datosIntegración HudiExplorar los tipos de consultaConsulta InstantáneaConsulta de viajes en el tiempoConsulta Incremental: Modo Último EstadoConsulta Incremental: Modo de Captura de Datos de CambiosCaracterísticas destacadasLectura en flujoEvolución del esquema en lecturaLeer con Rust o PythonResumen
Visión general de los índices en HudiAceleración de índices para escriturasIndexación Multimodal de Uso GeneralÍndices del EscritorComparación de las opciones de indexación del escritorAceleración de índices para lecturasOmisión de datosComparación de igualdadesIndexación de expresionesConstruir los índices adecuadosResumen
Visión general del servicio de tablasModo de Implementación: En líneaModo de Implementación: Ejecución asíncronaModo de Implementación: IndependienteElegir un modo adecuadoCompactaciónProgramar la compactaciónEjecutar la compactaciónAgrupaciónProgramar agrupaciónEjecutar la agrupaciónEstrategias de optimización del diseñoAgrupación frente a compactaciónLimpiezaProgramar limpiezaEjecución de la limpiezaIndexaciónResumen
Por qué el control de la concurrencia es más difícil en los lagos de datosTécnicas de control de la concurrenciaEscenarios multiescritorPor qué son necesarios los multiescritoresEscenarios de multiescritura para OCCEscenarios de multiescritura para NBCC y MVCCEl valor predeterminado simple: Escritor único con servicios de tablaCómo maneja Hudi el control de la concurrenciaLos fundamentos del control de concurrencia de HudiEl proceso de confirmación en tres pasosDetección y resolución de conflictosMecanismos de bloqueoRetos de los sistemas multiescritoresUso del soporte multiescritor en HudiHabilitar el soporte multiescrituraConfiguración del mecanismo de bloqueoMultiescritores con Hudi StreamerEscritores múltiples con el escritor de fuentes de datos SparkServicios de escritor único y tablas múltiplesDesactivar la compatibilidad con multiescritoresConsejos y buenas prácticasImplementar la Partición y la Agrupación de ArchivosActivar la detección temprana de conflictosOptimizar los mecanismos de bloqueoUtilizar servicios de tabla asíncronosReducir los Conflictos de Escritura y los Recursos DesperdiciadosEvitar la duplicación de datos cuando se utilizan escritores múltiplesResumen
Los Problemas del Silo de Datos de AlcubierreAseguramiento de la Calidad de los Datos y DeduplicaciónDatos heterogéneos y evolución de esquemasGestión, Localización y Consistencia de los DatosResumen del problemaArquitectura Lakehouse al rescate¿Qué es Hudi Streamer?Primeros pasos con Hudi StreamerIngesta de datos desde S3Ingesta de datos desde KafkaIngesta de datos desde RDBMSHudi Streamer en acciónPreparación de la fuente ascendenteConfiguración de Hudi StreamerDesbloquear el poder del análisisExplorando las opciones de Hudi StreamerOpciones GeneralesOpciones de origenOpciones OperativasResumen
Funcionar con facilidadConocer la CLIOperaciones con TablasIntegración en la plataformaActivación de Devoluciones de Llamada Post-CompromisoConectar sistemas de monitoreoSincronización con catálogosAjuste del RendimientoPrincipios fundamentales de ajusteAjuste del rendimiento de escrituraAjuste del rendimiento de lecturaAjuste de los servicios de tablaResumen
Visión general de la arquitecturaRetailMax Corp: Un Escenario Real de LakehouseArquitectura: Implementación de Medallion con HudiConfiguración de las Tablas Hudi de RetailMaxClaves primarias (hoodie.datasource.write.recordkey.field)Claves precombinadas (hoodie.datasource.write.precombine.field)Partición (campo rutapartición)Tipos de Tabla (COW Versus MOR)Capa de Bronce: Ingesta de datos ascendentesConfiguración de fuentes de datos ascendentesTransmisión de datos mutables y transaccionales con Debezium, Flink y HudiIngesta de flujos de eventos de aplicaciones con Hudi Kafka Connect SinkCapa de Plata: Creación de conjuntos de datos derivadosObjetivos de la Capa de Plata para RetailMaxTransformaciones basadas en flujos con Hudi StreamerTransformaciones por lotes e incrementales con Spark SQLMantenimiento de la calidad y coherencia de los datos en la Capa PlateadaCapa de Oro: Consulta de Lakehouse para obtener informaciónAnálisis interactivos con TrinoAnálisis por lotes e informes con Spark SQLConsultas avanzadas: Viajes en el Tiempo y Análisis PuntualesCapa empresarial: Información basada en IA para RetailMaxPreparación de datos para IA/Aprendizaje Automático en la Capa DoradaCreación de una base de conocimientos para aplicaciones potenciadas por LLM con Ray y HudiFuncionamiento y optimización del almacén de datos de HudiControl de la Concurrencia y Escenarios de Escritura MúltipleMonitoreo de la Capa DoradaRecuperación de desastres y resistencia de datosPuntos de referencia y consideraciones sobre el rendimientoResumen

Content preview from Apache Hudi: la guía definitiva.

Capítulo 9. Ejecutar Hudi en producción

Este trabajo se ha traducido utilizando IA. Agradecemos tus opiniones y comentarios: translation-feedback@oreilly.com

Pasar del desarrollo a la producción a menudo conlleva un nuevo conjunto de retos operativos. Este capítulo te proporcionará las herramientas y buenas prácticas para gestionar sin problemas las Implementaciones de Apache Hudi en entornos complejos, garantizando canalizaciones fiables con una sobrecarga mínima.

En primer lugar, exploraremos las herramientas para la gestión y recuperación de tablas. Aprenderás a dominar la CLI de Hudi, una herramienta versátil para realizar el mantenimiento rutinario, inspeccionar los metadatos de las tablas para solucionar problemas y ejecutar diversas tareas operativas sin escribir código personalizado. También cubriremos las operaciones de punto de guardado y restauración de Hudi, que son esenciales para la recuperación ante desastres.

A continuación, nos centraremos en la integración de Hudi en plataformas de datos. Cubriremos ...

Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.

Start your free trial

What Employees Want Most in Uncertain Times

Publisher Resources

ISBN: 0642572273514

Apache Hudi: la guía definitiva.

by Shiyan Xu, Prashant Wason, Bhavani Sudha Saktheeswaran, Rebecca Bilbro

Capítulo 9. Ejecutar Hudi en producción

Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.

You might also like

What Employees Want Most in Uncertain Times

How I Built a Personal Board of Directors With GenAI

Reinventing the Organization for GenAI and LLMs

What Successful Project Managers Do

Publisher Resources

Capítulo 9. Ejecutar Hudi en producción

Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,and much more.

You might also like

What Employees Want Most in Uncertain Times

How I Built a Personal Board of Directors With GenAI

Reinventing the Organization for GenAI and LLMs

What Successful Project Managers Do

Publisher Resources

Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.