October 2014
Intermediate to advanced
288 pages
6h 27m
Japanese
Content preview from 実践 機械学習システム
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
O’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.I wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.I’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.I'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
236
12
章 ビッグデータ
●
処理パワーよりもデータの増加するスピードのほうが速い
●
これまで上手くいった手法や技術が、データサイズの増加に対応できないため（スケールできな
いため）、やり直す必要がある
●
データ全体がメモリに入りきらない場合、現状のアルゴリズムでは対応できない
●
データを管理すること自体、主要なタスクになる
●
コンピュータクラスタやマルチコアのマシンを使用することがオプションではなく、必要不可欠
になる
本章の前半では、上記の最後にある「マルチコア（一台もしくは複数台のマシン）を使って、計算を
高速化する構成方法」について焦点を当てます。これは、中規模程度のデータの場合でも有効に働く
ことでしょう。
12.2
jug
を使って、一連の処理をタスクに分割する
通常、私たちは次のような一連の処理を行います。それは、初期データに対して前処理を施し、特
徴量を計算し、その特徴量を用いて機械学習アルゴリズムを実行するという流
れです。
jugというパッケージは、本書の著者の一人であるLuis Pedro Coelhoによって開発されています。
オープンソース（MITライセンス）であり、多くの分野で用いることができますが、主にデータ分析用
に設計されています。jugを用いることで、一斉に問題を解くことができます。たとえば、次のような
ことができます。
●
一時的な結果をディスク（またはデータベース）に保存することができます。前に計算した内容
を再度計算するように命令したとき、結果をディスクから読み込む ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access
More than 5,000 organizations count on O’Reilly
O’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.Julian F.
I wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.Addison B.
I’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.Amir M.
I'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.