Spark: Der endgültige Leitfaden

Kapitel 33. Ökosystem und Gemeinschaft

Diese Arbeit wurde mithilfe von KI übersetzt. Wir freuen uns über dein Feedback und deine Kommentare: [e-mail]

Eines der größten Verkaufsargumente von Spark ist die schiere Menge an Ressourcen, Tools und Mitwirkenden. Zum Zeitpunkt des Verfassens dieses Artikels gibt es über 1.000 Mitwirkende an der Spark-Codebasis. Das ist um Größenordnungen mehr, als die meisten anderen Projekte erreichen können, und ein Beweis für die großartige Gemeinschaft von Spark - sowohl in Bezug auf die Mitwirkenden als auch auf die Verwalter. Es gibt keine Anzeichen für eine Verlangsamung des Spark-Projekts, da große und kleine Unternehmen versuchen, sich der Gemeinschaft anzuschließen. Dieses Umfeld hat eine große Anzahl von Projekten angeregt, die die Funktionen von Spark ergänzen und erweitern, darunter formelle Spark-Pakete und informelle Erweiterungen, die die Nutzer in Spark verwenden können.

Spark Pakete

Spark hat ein Paket-Repository für Spark-spezifische Pakete: Spark-Pakete. Diese Pakete wurden in den Kapiteln 9 und 24 besprochen. Spark-Pakete sind Bibliotheken für Spark-Anwendungen, die leicht mit der Community geteilt werden können. GraphFrames ( ) ist ein perfektes Beispiel; es macht die Graphenanalyse über die strukturierten APIs von Spark auf eine Art und Weise verfügbar, die viel einfacher zu nutzen ist als die in Spark integrierte API auf niedrigerer Ebene (GraphX). Es gibt zahlreiche andere Pakete, darunter viele für maschinelles ...