Kosteneffiziente Datenpipelines

Kapitel 11. Deinen Weg mit Monitoring finden

Diese Arbeit wurde mithilfe von KI übersetzt. Wir freuen uns über dein Feedback und deine Kommentare: [e-mail]

Ein verteiltes System ohne Überwachungsdaten zu betreiben ist ein bisschen so, als würde man versuchen, ohne GPS-Navigationsgerät oder Kompass aus einem Wald herauszukommen.

RabbitMQ-Überwachungsdokumentation¹

Als begeisterter Naturmensch und Überlebender von Cloud-Datenpipelines, die kaum überwacht werden, kann ich dem Eingangszitat nur zustimmen. Die Fähigkeit, zu sehen, was in deinen Datenpipelines vor sich geht, ist so wichtig wie eine gute Karte im Wald: Sie hilft dir, den Überblick zu behalten, wo das System war und wohin es geht, und sie kann dir helfen, wieder auf den richtigen Weg zurückzukommen, wenn die Dinge vom Weg abgekommen sind.

In diesem Kapitel erfährst du, wie du die Karten einer guten Überwachung erstellen und interpretieren kannst. Wenn du in der Lage bist, den Betrieb der Pipeline zu überprüfen, erhältst du Einblicke in Möglichkeiten zur Leistungsverbesserung, Skalierung und Kostenoptimierung. Sie kann auch für die Kommunikation nützlich sein.

Um dich zu motivieren, beginnt das Kapitel mit meiner Erfahrung, ohne eine Karte zu arbeiten. Ich erzähle, mit welchen Herausforderungen unser Team konfrontiert war und welche Art von Überwachung die Leistung und Zuverlässigkeit der Pipeline hätte verbessern und die Kosten senken können.

Der Rest des Kapitels folgt einem ähnlichen Schema, ...