Kapitel 5. Konnektoren in Aktion

Diese Arbeit wurde mithilfe von KI übersetzt. Wir freuen uns über dein Feedback und deine Kommentare: translation-feedback@oreilly.com

Nachdem wir uns damit beschäftigt haben, wie Kafka Connect funktioniert und wie man es benutzt, ist es nun an der Zeit, dein Wissen in die Praxis umzusetzen! In diesem Kapitel sehen wir uns einige der beliebtesten Konnektoren an und führen sie aus: einen Sink-Konnektor für Amazon Simple Storage Service (S3), einen JDBC-Quellkonnektor und einen MySQL-Quellkonnektor. Wir erklären die Anwendungsfälle, auf die sie abzielen, und ihre wichtigsten Konfigurationen und zeigen, wie sie in verschiedenen Szenarien eingesetzt werden können.

Diese drei Konnektoren werden häufig verwendet und kommen in vielen Pipelines in allen Branchen vor, daher ist es wichtig, sie gut zu verstehen. Auch wenn du diese speziellen Konnektoren nicht verwendest, dürften viele der behandelten Themen auch auf andere anwendbar sein.

Alle Beispiele gehen davon aus, dass du einen Kafka-Cluster mit einem Bootstrap-Server hast, der unter localhost:9092 erreichbar ist.

Confluent S3 Sink Connector

Einer der häufigsten Anwendungsfälle von Kafka Connect ist der Export von Daten aus Kafka in ein Speichersystem. Oft musst du Daten lange aufbewahren, nachdem sie verarbeitet wurden. Das kann aus rechtlichen Gründen sein, um historische Daten aufzubewahren oder einfach für Batch-orientierte Systeme, die nur periodisch laufen. Kafka kann zwar Daten auf unbestimmte ...

Get Kafka Verbinden now with the O’Reilly learning platform.

O’Reilly members experience books, live events, courses curated by job role, and more from O’Reilly and nearly 200 top publishers.