Skip to Main Content
Spark: La Guía Definitiva
book

Spark: La Guía Definitiva

by Bill Chambers, Matei Zaharia
September 2024
Intermediate to advanced content levelIntermediate to advanced
606 pages
16h 12m
Spanish
O'Reilly Media, Inc.
Book available
Content preview from Spark: La Guía Definitiva

Capítulo 15. Cómo se ejecuta Spark en un clúster

Este trabajo se ha traducido utilizando IA. Agradecemos tus opiniones y comentarios: translation-feedback@oreilly.com

Así, en nos hemos centrado en las propiedades de Spark como interfaz de programación. Hemos hablado de cómo las API estructuradas toman una operación lógica, la descomponen en un plan lógico y lo convierten en un plan físico que, en realidad, consiste en operaciones de Conjunto de Datos Distribuidos Resilientes (RDD) que se ejecutan en todo el clúster de máquinas. Este capítulo se centra en lo que ocurre cuando Spark ejecuta ese código. Hablamos de ello de una forma agnóstica a la implementación: no depende ni del gestor de clúster que estés utilizando ni del código que estés ejecutando. Al fin y al cabo, todo el código Spark se ejecuta de la misma manera.

Este capítulo abarca varios temas clave:

  • Arquitectura y componentes de una aplicación Spark

  • El ciclo de vida de una aplicación Spark dentro y fuera de Spark

  • Importantes propiedades de ejecución de bajo nivel, como el pipelining

  • Qué se necesita para ejecutar una aplicación Spark, como introducción al Capítulo 16.

Empecemos por la arquitectura.

La arquitectura de una aplicación Spark

En, Capítulo 2, hablamos de algunos de los componentes de alto nivel de una Aplicación Spark. Repasémoslos de nuevo:

El controlador Spark

El controlador es el proceso "en el asiento del conductor" de tu Aplicación Spark. Es el controlador de la ejecución de una Aplicación ...

Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Start your free trial

You might also like

Óxido Atómico y Cerraduras

Óxido Atómico y Cerraduras

Mara Bos
CockroachDB: La guía definitiva

CockroachDB: La guía definitiva

Guy Harrison, Jesse Seldess, Ben Darnell
Concurrencia en Go

Concurrencia en Go

Katherine Cox-Buday

Publisher Resources

ISBN: 9781098183707Supplemental Content