Skip to Content
入門 PySpark ―PythonとJupyterで活用するSpark 2エコシステム
book

入門 PySpark ―PythonとJupyterで活用するSpark 2エコシステム

by Tomasz Drabas, Denny Lee, Sky株式会社 玉川 竜司
November 2017
Intermediate to advanced
328 pages
6h 51m
Japanese
O'Reilly Japan, Inc.
Content preview from 入門 PySpark ―PythonとJupyterで活用するSpark 2エコシステム
vii
訳者まえがき
Learning PySparkの全訳をお送りします。
Sparkはすっかり分散処理のフレームワークとして定着した感がありますが、一方で訳者としては 2つ
の懸念を感じていました。1つは Spark 2.x で登場した多彩な新機能やライブラリを紹介する日本語の
情報がなかったこと、そしてもう 1つは Spark 1.x のころに PySparkは遅い、という評価がかなり定着
してしまっていたことです。
Spark 2.xは1.x の頃とは大きく変化しており、PySpark も(使い方に注意は必要なものの)Scalaや
Java からSparkを使う場合と同様のパフォーマンスを発揮できるようになりました。
そしていずれも中核にあるのはDataFrame APIです。本書ではDataFrameベースのさまざまな
Spark のライブラリが紹介されています。それぞれの紹介自体は短いですが、PythonとSparkを組み
合わせてどのように使うことができるのか、大きく把握するのに役立つことと思います。それぞれのト
ピックには英語の情報へのリンクが数多く紹介されていますが、本書で大まかなイメージをつかんでい
ただければ、英語で書かれた詳細な情報へも取り組みやすくなると思います。本格的にSpark のような
フレームワークに取り組むなら英語の情報を見ることは避けて通れませんが、本書がそのためのガイド
ブックの役割を果たしてくれれば、訳者としては大変うれしいです。
Spark のいいところの
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.

Read now

Unlock full access

More than 5,000 organizations count on O’Reilly

AirBnbBlueOriginElectronic ArtsHomeDepotNasdaqRakutenTata Consultancy Services

QuotationMarkO’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.
Julian F.
Head of Cybersecurity
QuotationMarkI wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.
Addison B.
Field Engineer
QuotationMarkI’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.
Amir M.
Data Platform Tech Lead
QuotationMarkI'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
Mark W.
Embedded Software Engineer

You might also like

実践 自然言語処理 ―実世界NLPアプリケーション開発のベストプラクティス

実践 自然言語処理 ―実世界NLPアプリケーション開発のベストプラクティス

Sowmya Vajjala, Bodhisattwa Majumder, Anuj Gupta, Harshit Surana, 中山 光樹
行動を変えるデザイン ―心理学と行動経済学をプロダクトデザインに活用する

行動を変えるデザイン ―心理学と行動経済学をプロダクトデザインに活用する

Stephen Wendel, 武山 政直, 相島 雅樹, 反中 望, 松村 草也

Publisher Resources

ISBN: 9784873118185Other