Chapitre 12. Épilogue : Apache Spark 3.0
Au moment où nous écrivions ce livre, Apache Spark 3.0 n'avait pas encore été officiellement publié ; il était encore en cours de développement, et nous avons pu travailler avec Spark 3.0.0-preview2. Tous les exemples de code de ce livre ont été testés avec Spark 3.0.0-preview2, et ils ne devraient pas fonctionner différemment avec la version officielle de Spark 3.0. Dans la mesure du possible, nous avons mentionné dans les chapitres, lorsque c'était pertinent, quand les fonctionnalités étaient des ajouts ou des comportements nouveaux dans Spark 3.0. Dans ce chapitre, nous passons en revue les changements.
Les corrections de bogues et les améliorations de fonctionnalités sont nombreuses, c'est pourquoi, par souci de concision, nous ne mettons en avant qu'une sélection des changements et des fonctionnalités notables concernant les composants Spark. Certaines des nouvelles fonctionnalités sont, sous le capot, avancées et dépassent la portée de ce livre, mais nous les mentionnons ici afin que tu puisses les explorer lorsque la version sera généralement disponible.
Spark Core et Spark SQL
Considérons d'abord ce qu'il y a de nouveau sous les couvertures. Un certain nombre de changements ont été introduits dans Spark Core et dans le moteur Spark SQL afin d'accélérer les requêtes. Une façon d'accélérer les requêtes ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access