Grundlagen der Datenqualität

Kapitel 7. End-to-End Lineage aufbauen

Diese Arbeit wurde mithilfe von KI übersetzt. Wir freuen uns über dein Feedback und deine Kommentare: [e-mail]

Am 27. Juli 2004 stand ein fünf Jahre altes Startup-Unternehmen namens Google vor einem ernsten Problem: Seine Anwendung war nicht mehr verfügbar.

Mehrere Stunden lang konnten Nutzer in den Vereinigten Staaten, Frankreich und Großbritannien nicht auf die beliebte Suchmaschine zugreifen. Das Unternehmen, das damals 700 Mitarbeiter/innen beschäftigte, und seine Millionen von Nutzer/innen wurden im Dunkeln gelassen, während die Techniker/innen sich bemühten, das Problem zu beheben und die Ursache des Problems zu finden. Gegen Mittag wurde in einem langwierigen und intensiven Prozess, der von einigen panischen Ingenieuren durchgeführt wurde, festgestellt, dass der MyDoom-Virus die Schuld daran trug.

Im Jahr 2021 galt ein Ausfall dieser Länge und dieses Ausmaßes als eher ungewöhnlich, aber vor 15 Jahren waren diese Art von Softwareausfällen keine Seltenheit. Nachdem er im Laufe der Jahre mehrere Teams durch solche Ausfälle geführt hatte, stellte Benjamin Treynor Sloss, damals Engineering Manager bei Google, fest, dass es einen besseren Weg geben musste, um diese schwindelerregenden Ausfälle zu verwalten und zu verhindern - nicht nur bei Google, sondern in der gesamten Branche.

Inspiriert durch seine frühe Karriere beim Aufbau von Daten- und IT-Infrastrukturen, kodifizierte Sloss seine Erkenntnisse in einer völlig ...