Chapitre 23. Le streaming structuré dans la production
Cet ouvrage a été traduit à l'aide de l'IA. Tes réactions et tes commentaires sont les bienvenus : translation-feedback@oreilly.com
Les chapitres précédents de cette partie du livre ont couvert le streaming structuré du point de vue de l'utilisateur. Naturellement, il s'agit du cœur de ton application. Ce chapitre couvre certains des outils opérationnels nécessaires pour faire fonctionner le streaming structuré de manière robuste en production après avoir développé une application.
Structured Streaming a été marqué comme étant prêt pour la production dans Apache Spark 2.2.0, ce qui signifie que cette version dispose de toutes les fonctionnalités requises pour une utilisation en production et stabilise l'API. De nombreuses organisations l'utilisent déjà en production car, franchement, ce n'est pas très différent de l'exécution d'autres applications Spark de production. En effet, grâce à des fonctionnalités telles que les sources/puits transactionnels et le traitement exactly-once, les concepteurs de Structured Streaming ont cherché à rendre son fonctionnement aussi simple que possible. Ce chapitre te guidera à travers certaines des principales tâches opérationnelles spécifiques à Structured Streaming. Cela devrait compléter tout ce que nous avons vu et appris sur les opérations Spark dans la deuxième partie.
Tolérance des pannes et points de contrôle
La préoccupation opérationnelle la plus importante pour une application de ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access