August 2015
Intermediate to advanced
312 pages
7h 28m
Japanese
Content preview from 初めてのSpark
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
O’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.I wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.I’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.I'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
145
7.8 まとめ
機能を提供しています。もちろん、
YARN
は多くの
Hadoop
ディストリビューションで
プレインストールされているはずです。
• Mesos
が
YARN
や
Standalone
モードよりも優れている点の
1
つは、
fine-grained
共有オ
プションがあることです。このオプションを使うと、
Spark
シェルのようなインタラク
ティブなアプリケーションは、コマンドの実行の間に、
CPU
の割り当てをスケールダウ
ンさせることができます。そのため、複数のユーザーがインタラクティブシェルを実行す
るような環境では、
Mesos
は魅力的でしょう。
•
どういった場合であっても、
Spark
は
HDFS
と同じノード群の上で動作させ、ストレー
ジへのアクセスを高速にするのがベストです。
Mesos
あるいは
Standalone
クラスタマ
ネージャは、
HDFS
と同じノード群に手作業でインストールすることもできます。ある
いは、ほとんどの
Hadoop
のディストリビューションは、すでに
YARN
と
HDFS
を併せ
てインストールするようになっています。
最後に、クラスタの管理は動きが速い領域であることを念頭に置いておいてください。本書が
出版されるときには、現在のクラスタマネージャ群の下で、
Spark
がさらなる機能を使えるように
なっているかもしれず、あるいは新しいクラスタマネージャが登場しているかもしれないのです。
本章で説明したアプリケーションの投入方法が変わることはありませんが、最新のオプションを確
認したい場合は、使用する ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access
More than 5,000 organizations count on O’Reilly
O’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.Julian F.
I wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.Addison B.
I’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.Amir M.
I'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.