Procesamiento de flujos con Apache Spark

Capítulo 12. Procesamiento de flujos basado en el tiempo de los eventos

Este trabajo se ha traducido utilizando IA. Agradecemos tus opiniones y comentarios: [e-mail]

En "El efecto del tiempo", hablamos en del efecto del tiempo en el procesamiento de flujos desde una perspectiva general.

Como recordamos en, el procesamiento evento-tiempo se refiere a observar el flujo de eventos desde la línea de tiempo en que se produjeron y aplicar la lógica de procesamiento desde esa perspectiva. Cuando nos interesa analizar los patrones de los datos de los eventos a lo largo del tiempo, es necesario procesar los eventos como si los estuviéramos observando en el momento en que se produjeron. Para ello, necesitamos que el dispositivo o sistema que produce el acontecimiento "estampe" los acontecimientos con el momento de su creación. De ahí el nombre habitual de "marca de tiempo" para referirnos a un momento concreto vinculado al acontecimiento. Utilizamos ese momento como nuestro marco de referencia para saber cómo evoluciona el tiempo.

Para ilustrar este concepto, exploremos un ejemplo familiar. Considera una red de estaciones meteorológicas utilizadas para monitorizar las condiciones meteorológicas locales. Algunas estaciones remotas están conectadas a través de la red móvil, mientras que otras, alojadas en casas de voluntarios, tienen acceso a conexiones a Internet de calidad variable. El sistema de monitoreo meteorológico no puede confiar en el orden de llegada de los ...