Skip to Main Content
Hadoop -- Komplety przewodnik. Analiza i przechowywanie danych
book

Hadoop -- Komplety przewodnik. Analiza i przechowywanie danych

by Tom White
March 2015
Intermediate to advanced content levelIntermediate to advanced
672 pages
25h 16m
Polish
Helion
Content preview from Hadoop -- Komplety przewodnik. Analiza i przechowywanie danych

Rozdział 16. Pig

Platforma Apache Pig (http://pig.apache.org/) umożliwia przetwarzanie dużych zbiorów danych na wyższym poziomie abstrakcji. Model MapReduce pozwala programiście wskazać funkcję mapującą, po której ma działać funkcja redukująca. Jednak ustalenie, jak dostosować proces przetwarzania danych do tego wzorca (często niezbędnych jest wiele etapów modelu MapReduce), bywa trudne. W platformie Pig struktury danych są znacznie bogatsze. Obsługują wiele wartości i poziomów zagnieżdżenia oraz umożliwiają skomplikowane przekształcenia danych. Pig udostępnia na przykład złączenia, których stosowanie w modelu MapReduce jest trudne.

Platforma Pig składa się z dwóch elementów. Oto one:

  • Język używany do zapisywania przepływu danych (nazywany ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Start your free trial

You might also like

Zwinna analiza danych. Apache Hadoop dla każdego

Zwinna analiza danych. Apache Hadoop dla każdego

Russell Jurney
Przetwarzanie języka naturalnego z wykorzystaniem transformerów

Przetwarzanie języka naturalnego z wykorzystaniem transformerów

Lewis Tunstall, Leandro von Werra, Thomas Wolf

Publisher Resources

ISBN: 9781098125301