Big Data - Entwicklung und Programmierung von Systemen für große Datenmengen und Einsatz der Lambda-Architektur

Kapitel 12: Echtzeit-Views

In diesem Kapitel geht es um folgende Themen:

• Das theoretische Modell des Speed-Layers

• Wie der Batch-Layer die Zuständigkeiten des Speed-Layers verringert

• Datenbanken mit wahlfreiem Schreibzugriff für Echtzeit-Views verwenden

• Das CAP-Theorem und seine Folgen

• Die Schwierigkeiten inkrementeller Berechnungen

• Daten des Speed-Layers verwerfen

Bislang ging es bei der Erläuterung der Lambda-Architektur um den Batch- und den Serving-Layer – Komponenten, die Funktionen sämtlicher vorliegender Daten berechnen. Die beiden Layer erfüllen alle Anforderungen an ein Datenhaltungssystem, mit einer Ausnahme: Aktualisierungen mit niedriger Latenzzeit. Diese letzte Anforderung zu erfüllen, ist die einzige Aufgabe ...