Deep Learning illustriert

9Deep Networks verbessern

In Kapitel 6 lernten wir einzelne künstliche Neuronen näher kennen. In Kapitel 7 ordneten wir diese neuronalen Einheiten dann als Knoten eines Netzwerks an und ermöglichten damit die Weitergabe (Forwardpropagation) einer Eingabe x durch das Netzwerk, um eine Ausgabe ŷ zu produzieren. In Kapitel 8 beschrieben wir anschließend, wie sich die Ungenauigkeiten eines Netzwerks quantifizieren lassen (indem man ŷ mithilfe einer Kostenfunktion mit dem wahren y vergleicht) und außerdem minimieren lassen (durch Änderung der Netzwerkparameter w und b über eine Optimierung mit stochastischem Gradientenabstieg und Backpropagation).

In diesem Kapitel behandeln wir die Hürden, die der Schaffung leistungsstarker neuronaler Netze häufig ...