Skip to Main Content
Hadoop -- Komplety przewodnik. Analiza i przechowywanie danych
book

Hadoop -- Komplety przewodnik. Analiza i przechowywanie danych

by Tom White
March 2015
Intermediate to advanced content levelIntermediate to advanced
672 pages
25h 16m
Polish
Helion
Content preview from Hadoop -- Komplety przewodnik. Analiza i przechowywanie danych

Rozdział 14. Flume

Platformę Hadoop opracowano z myślą o przetwarzaniu bardzo dużych zbiorów danych. Często przyjmuje się, że te dane już znajdują się w systemie HDFS lub że można je masowo skopiować do tego systemu. Jednak w wielu sytuacjach to założenie jest nieprawdziwe. Liczne systemy generują strumienie danych, które programista chce zagregować, zapisać i przeanalizować za pomocą Hadoopa. Dla takich systemów idealnym rozwiązaniem jest platforma Apache Flume (http://flume.apache.org/).

Platforma Flume jest zaprojektowana z myślą o przesyłaniu do Hadoopa dużych ilości danych opartych na zdarzeniach. Wzorcowym przykładem wykorzystania tej platformy jest użycie jej do wczytywania plików dzienników z grupy serwerów WWW i przenoszenia zapisanych ...

Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Start your free trial

You might also like

Zwinna analiza danych. Apache Hadoop dla każdego

Zwinna analiza danych. Apache Hadoop dla każdego

Russell Jurney
Przetwarzanie języka naturalnego z wykorzystaniem transformerów

Przetwarzanie języka naturalnego z wykorzystaniem transformerów

Lewis Tunstall, Leandro von Werra, Thomas Wolf

Publisher Resources

ISBN: 9781098125301