September 2021
Intermediate to advanced
392 pages
6h 8m
Japanese
Content preview from 入門 機械学習パイプライン ―TensorFlowで学ぶワークフローの自動化
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
O’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.I wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.I’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.I'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
11章パイプライン Part 1: Apache BeamとApache Airflow
これまでの章では、TFXを使って機械学習パイプラインを構築するために必要なコンポーネントを紹介してきました。本章では、すべてのコンポーネントをまとめて、2つのオーケストレータ（Apache BeamとApache Airflow）を使ったパイプラインの実行方法を紹介します。「12章 パイプライン Part 2: Kubeflow Pipelines」では、Kubeflow Pipelinesを使ったパイプラインの実行方法も紹介します。これらのツールはどれも似たような原理に従っていますが、細かい部分の違いとサンプルコードを示します。
「1章 イントロダクション」で説明したように、パイプラインオーケストレーションツールは、機械学習パイプラインを自動化するために書かなければならないグルーコードを抽象化するために不可欠です。図11-1に示すように、パイプラインオーケストレータは、これまでの章ですでに述べたコンポーネントの下に位置しています。これらのオーケストレータがなければ、あるコンポーネントが終了したかどうかを確認し、次のコンポーネントを起動し、パイプラインの実行をスケジュールするコードを書く必要があります。幸いなことに、これらのコードで実現する機能はオーケストレータがすべて提供してくれます。
図11-1 パイプラインオーケストレータ
本章では、最初にさまざまなオーケストレーションツールのユースケースについて説明します。次に、インタラクティブなパイプラインから、オーケストレーションツールを使ったパイプラインへ移行するのに必要なコードを段階的に説明します。オーケストレーションツールとして、Kubeflow ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access
More than 5,000 organizations count on O’Reilly
O’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.Julian F.
I wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.Addison B.
I’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.Amir M.
I'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.