Capítulo 5. Conectores en acción
Este trabajo se ha traducido utilizando IA. Agradecemos tus opiniones y comentarios: translation-feedback@oreilly.com
Después de haber cubierto cómo funciona Kafka Connect y cómo utilizarlo, ¡es hora de poner en práctica tus conocimientos! En este capítulo examinamos y ejecutamos algunos de los conectores más populares: un conector de sumidero para Amazon Simple Storage Service (S3), un conector de fuente JDBC y un conector de fuente MySQL. Explicamos los casos de uso a los que se dirigen y sus configuraciones más importantes, y demostramos cómo utilizarlos en diversos escenarios.
Estos tres conectores abordan casos de uso comunes y aparecen en muchos pipelines de todos los sectores, por lo que tener un buen conocimiento de ellos es valioso. Aunque no utilices estos conectores específicos, esperamos que muchos de los temas tratados sean aplicables a otros.
Todos los ejemplos suponen que tienes un clúster Kafka en funcionamiento con un servidor de arranque accesible en localhost:9092.
Conector Confluent S3 Sink
Uno de los casos de uso más comunes de Kafka Connect es exportar datos de Kafka a un sistema de almacenamiento. A menudo, necesitas conservar los datos mucho tiempo después de que hayan sido procesados; puede ser por motivos legales, para preservar datos históricos, o simplemente para sistemas orientados a lotes que sólo se ejecutan periódicamente. Aunque Kafka puede almacenar datos indefinidamente, si manejas cantidades muy grandes de datos ...
Get Conexión Kafka now with the O’Reilly learning platform.
O’Reilly members experience books, live events, courses curated by job role, and more from O’Reilly and nearly 200 top publishers.
