Skip to Content
データサイエンス設計マニュアル
book

データサイエンス設計マニュアル

by Steven S. Skiena, 小野 陽子, 長尾 高弘
January 2020
Beginner to intermediate
728 pages
10h 26m
Japanese
O'Reilly Japan, Inc.
Content preview from データサイエンス設計マニュアル
362 12 ビッグデータ:スケールを追求
MapReduce ジョブという形でバックエンド処理をすべて書き換えようとした。
そして、我々がニュース記事と注釈を表現するために使っていた特殊なファイル形式も置き換えた。この
形式はよくバグを起こし、あちらこちらに例外が含まれていた。構文解析プログラム(パーサ)はたびたび
信じられない理由でエラーを起こした。構造化データを厳密に表現し、市販ツールで効率良く構文解析する
めに XML が発明されたのはそのためだ。彼のコードを通るテキストは、まず XML 検証ソフトを通過す
る。彼は NLP 分析を行う問題だらけの Perl スクリプトには手を触れようとせず、システムの他の部分から
十分隔離して、問題がその部分だけに制限されるようにした。
可動部品が非常に多かったため、Mikhail でさえ、インフラの修正に少し時間をかけなければならなかっ
た。インフラの入れ替えを行うため、Mikhail の作業が行うまで、我々は他のプロジェクトに進めなくなっ
た。実験的な分析が一切できないことで私がイライラしていると、Mikhail は静かにヘッジファンドからの
保留中の内定のことを持ち出して私を牽制し、自分の作業を続けた。
そしてもちろん、Mikhail が正しかった。新しいインフラによって、できることが 10 倍になった。ダウ
ンタイムは大幅に減り、電源が落ちたあとのデータベースの修復作業は必要なくなった。データアクセスを
制御するために Mikhail が開発した ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.

Read now

Unlock full access

More than 5,000 organizations count on O’Reilly

AirBnbBlueOriginElectronic ArtsHomeDepotNasdaqRakutenTata Consultancy Services

QuotationMarkO’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.
Julian F.
Head of Cybersecurity
QuotationMarkI wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.
Addison B.
Field Engineer
QuotationMarkI’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.
Amir M.
Data Platform Tech Lead
QuotationMarkI'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
Mark W.
Embedded Software Engineer

You might also like

Python機械学習クックブック

Python機械学習クックブック

Chris Albon, 中田 秀基
Rではじめるデータサイエンス

Rではじめるデータサイエンス

Hadley Wickham, Garrett Grolemund, 黒川 利明, 大橋 真也
プログラミングC# 第8版

プログラミングC# 第8版

Ian Griffiths, 木下 哲也, 鈴木 幸敏

Publisher Resources

ISBN: 9784873118918Other