Skip to Content
データエンジニアリングの基礎 ―データプロジェクトで失敗しないために
book

データエンジニアリングの基礎 ―データプロジェクトで失敗しないために

by Joe Reis, Matt Housley, 中田 秀基
March 2024
Beginner to intermediate
416 pages
6h 54m
Japanese
O'Reilly Japan, Inc.
Content preview from データエンジニアリングの基礎 ―データプロジェクトで失敗しないために

8章クエリ、データモデリング、変換

これまで見てきたデータエンジニアリングライフサイクルのステージでは、主にデータをある場所から別の場所に移したり、保存したりしていた。この章では、データを有用なものにする方法を学ぶ。クエリ、データモデリング、変換を理解すれば(図8-1参照)、生のデータ素材を下流の利害関係者が消費できるものに変えるツールを手に入れたことになる。

変換によってデータから価値を生み出す

図8-1 変換によってデータから価値を生み出す

まず、クエリとその基礎となる重要なパターンについて説明する。次に、データにビジネスロジックを導入するために使用する、主なデータモデリングパターンについて説明する。次に変換について説明する。変換によって、データモデルのロジックをクエリの結果に適用してその結果を下流で消費しやすくする。最後に、変換に関して「一緒に仕事する人」と、変換を支える「底流」について説明する。

SQLおよびNoSQLデータベースにおけるデータのクエリ、モデリング、変換には、さまざまなテクニックがある。本章では、データウェアハウスやデータレイクなどのOLAPシステムに対するクエリに焦点を当てる。クエリ用の言語は数多く存在するが、利便性と親しみやすさを考慮して、最も一般的に用いられており汎用性の高いクエリ言語であるSQLに重点を置いて説明する。OLAPデータベースやSQLに関する考え方のほとんどは、他の種類のデータベースやクエリ言語にも適用できる。この章では、SQL言語と、主キーや外部キーなどのSQLに関連する基本的な概念を理解していることを前提にしている。これらの考え方に馴染みがなければ、無数の資料が入手できるだろうから、そちらを見てほしい。 ...

Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.

Read now

Unlock full access

More than 5,000 organizations count on O’Reilly

AirBnbBlueOriginElectronic ArtsHomeDepotNasdaqRakutenTata Consultancy Services

QuotationMarkO’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.
Julian F.
Head of Cybersecurity
QuotationMarkI wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.
Addison B.
Field Engineer
QuotationMarkI’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.
Amir M.
Data Platform Tech Lead
QuotationMarkI'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
Mark W.
Embedded Software Engineer

You might also like

大規模データ管理 ―エンタープライズアーキテクチャのベストプラクティス

大規模データ管理 ―エンタープライズアーキテクチャのベストプラクティス

Piethein Strengholt, 村上 列
仕事ではじめる機械学習 第2版

仕事ではじめる機械学習 第2版

有賀 康顕, 中山 心太, 西林 孝
ユーザーストーリーマッピング

ユーザーストーリーマッピング

Jeff Patton, 川口 恭伸, 長尾 高弘

Publisher Resources

ISBN: 9784814400652Publisher Website