Skip to Main Content
Spark: La Guía Definitiva
book

Spark: La Guía Definitiva

by Bill Chambers, Matei Zaharia
September 2024
Intermediate to advanced content levelIntermediate to advanced
606 pages
16h 12m
Spanish
O'Reilly Media, Inc.
Book available
Content preview from Spark: La Guía Definitiva

Capítulo 19. Ajuste del rendimiento

Este trabajo se ha traducido utilizando IA. Agradecemos tus opiniones y comentarios: translation-feedback@oreilly.com

El Capítulo 18 cubría la interfaz de usuario (UI) de Spark y los primeros auxilios básicos para tu aplicación Spark. Utilizando las herramientas descritas en ese capítulo, deberías ser capaz de garantizar que tus trabajos se ejecuten de forma fiable. Sin embargo, a veces también necesitarás que se ejecuten más rápido o de forma más eficiente por diversas razones. De eso trata este capítulo. Aquí presentamos un análisis de algunas de las opciones de rendimiento disponibles para hacer que tus trabajos se ejecuten más rápido.

Al igual que con el monitoreo, hay una serie de niveles diferentes que puedes intentar ajustar. Por ejemplo, si tuvieras una red extremadamente rápida, eso haría que muchos de tus trabajos Spark fueran más rápidos, porque las barajadas son a menudo uno de los pasos más costosos de un trabajo Spark. Lo más probable es que no tengas mucha capacidad para controlar esas cosas; por lo tanto, vamos a hablar de las cosas que puedes controlar mediante elecciones de código o configuración.

Hay una variedad de partes diferentes de los trabajos de Spark que podrías querer optimizar, y es valioso ser específico. A continuación se indican algunas de las áreas:

  • Elecciones de diseño a nivel de código (por ejemplo, RDDs frente a DataFrames)

  • Datos en reposo

  • Únete a

  • Agregaciones

  • Datos en vuelo

  • Propiedades de la aplicación ...

Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Start your free trial

You might also like

Óxido Atómico y Cerraduras

Óxido Atómico y Cerraduras

Mara Bos
CockroachDB: La guía definitiva

CockroachDB: La guía definitiva

Guy Harrison, Jesse Seldess, Ben Darnell
Concurrencia en Go

Concurrencia en Go

Katherine Cox-Buday

Publisher Resources

ISBN: 9781098183707Supplemental Content