April 2020
Intermediate to advanced
552 pages
6h 13m
Japanese
これまで私たちは、DeZeroを使って高階微分を求めてきました。そのために行ったことは、本質的には1つです。それは、逆伝播で行う計算に関しても「つながり」を作るようにしたことです。ここで重要な点は、逆伝播の計算グラフ化こそが、DeZeroの新しい機能だということです。高階微分は、その1つの応用例にすぎません。ここでは、新しくなったDeZeroの高階微分以外の用途について見ていきます。
![]() |
|
新しいDeZeroは、逆伝播で行った計算に対して、さらに逆伝播を行うことができます。その機能は、double backpropagationと呼ばれます(以降、double backpropと表記)。double backpropは、現代のディープラーニングのフレームワークのほとんどがサポートしています。 |
それでは、double backpropの高階微分以外の用途を見ていきましょう。まずは、次の問題を考えてみましょう。
問:次の2つの式が与えられたとき、
における(に関するの微分)を求めよ。
|
| (36.1) |
|
| (36.2) |
これは、これまでにも見てきた微分を求める問題です。これまでと異なるのは、式(36.2) ...
Read now
Unlock full access