March 2024
Beginner to intermediate
416 pages
6h 54m
Japanese
Content preview from データエンジニアリングの基礎 ―データプロジェクトで失敗しないために
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
O’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.I wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.I’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.I'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
9章アナリティクス、機械学習、リバースETLへのデータの提供
おめでとう！データエンジニアリングライフサイクルの、最後のステージに到達した。下流のユースケースへのデータ提供だ（図9-1）。本章ではデータエンジニアが遭遇するであろう3つの主要なユースケースに対してデータを提供するさまざまな方法について学んでいく。1つ目は、アナリティクスとBIへのデータ提供だ。これには、統計分析、レポート、ダッシュボードで使用するデータを準備することになる。これは最も伝統的なデータ提供の分野だ。おそらくITやデータベースよりも昔からある分野だが、利害関係者がビジネス、組織、財務のプロセスを可視化することは、これまで通り重要だ。
図9-1 それぞれのユースケースに対するデータ提供
2つ目は、MLアプリケーションへのデータ提供だ。MLは、適切に準備された高品質のデータなしには実現できない。データエンジニアは、データサイエンティストやMLエンジニアと協力して、モデルの訓練に必要なデータを取得、変換、提供する。
3つ目は、リバースETLを通じたデータ提供だ。リバースETLとは、データをデータソースに送り返すことだ。例えば、アドテクプラットフォームからデータを取得し、このデータに対して統計処理を実行してクリック単価を決定し、このデータをアドテクプラットフォームに送り返す。リバースETLは、BIやMLと深く関わっている。
これら3つの主要なデータ提供について詳しく説明する前に、これらに共通する一般的な考慮事項を見てみよう。 ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access
More than 5,000 organizations count on O’Reilly
O’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.Julian F.
I wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.Addison B.
I’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.Amir M.
I'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.