Skip to Content
データサイエンス設計マニュアル
book

データサイエンス設計マニュアル

by Steven S. Skiena, 小野 陽子, 長尾 高弘
January 2020
Beginner to intermediate
728 pages
10h 26m
Japanese
O'Reilly Japan, Inc.
Content preview from データサイエンス設計マニュアル
12.2 私の体験談から:インフラの重要性 361
経営
コンサルタントたちは、第 4 V として、土台のデータをどの程度信用できるかという意味の正確
veracity)を挙げることもある。正確さには、スパムの除去、データ収集過程に起因する中間生成物の
除去などが含まれ、通常のクリーニングのレベルを超える配慮が必要になる。
12.2 私の体験談から:インフラの重要性
Mikhail が眉をひそめたその表情から、彼の落胆の深さを気付くべきだった。
私が指導していた博士課程の院生、Mikhail Bautin は、おそらく私が出会った中で最も優れたプログラマ
だ。たぶん、誰にとってもそうだろう。何しろ、第 12 回国際情報オリンピックで満点優勝し、高校レベル
のプログラマとして世界一になったことがあるのだから。
その当時、取り組んでいたニュース分析プロジェクト Lydia は、かなり大掛かりなインフラを持ち、膨大
な数のマシンを使っていた。Lydia では、世界中のニュースソースから集めたテキストを正規化し、我々が
英語用に書いた自然言語処理(NLP)パイプラインを通過させて、実体を抽出し、テキストからそれらの実
体に対する感情を判断し、大きなデータベースに結果を格納する、という処理を行っていた。SQL コマン
ドを使えば、Lydia で処理を行ったデータは、ウェブページに表示したりスプレッドシートで操作できる形
式に変換できた。
私は、検出できる感情が機械翻訳でどの程度維持されるかを研究したいと思っていた。十分に維持される ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.

Read now

Unlock full access

More than 5,000 organizations count on O’Reilly

AirBnbBlueOriginElectronic ArtsHomeDepotNasdaqRakutenTata Consultancy Services

QuotationMarkO’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.
Julian F.
Head of Cybersecurity
QuotationMarkI wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.
Addison B.
Field Engineer
QuotationMarkI’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.
Amir M.
Data Platform Tech Lead
QuotationMarkI'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
Mark W.
Embedded Software Engineer

You might also like

Python機械学習クックブック

Python機械学習クックブック

Chris Albon, 中田 秀基
Rではじめるデータサイエンス

Rではじめるデータサイエンス

Hadley Wickham, Garrett Grolemund, 黒川 利明, 大橋 真也
プログラミングC# 第8版

プログラミングC# 第8版

Ian Griffiths, 木下 哲也, 鈴木 幸敏

Publisher Resources

ISBN: 9784873118918Other