Künstliche Intelligenz kapieren und programmieren - Visuell lernen und verstehen mit Illustrationen und Projekten zum Experimentieren

Kapitel 5: Moderne künstliche neuronale Netze

Für fast zwei Jahrzehnte führte die Idee der künstlichen neuronalen Netze ein Schattendasein. Der Durchbruch kam dann im Jahr 1986. Die Wissenschaftler Geoffrey Hinton‌, David Rumelhart‌, and Ronald Williams‌ veröffentlichten ihren berühmten Artikel »Learning representations by back-propagating errors«. (http://www.cs.toronto.edu/~hinton/absps/naturebp.pdf). In diesem Papier führten sie zwei Konzepte ein, mit denen die Leistungsfähigkeit künstlicher neuronaler Netze erheblich verbessert werden konnte:

• »Verborgene Knoten«, die zwischen Eingabe- und Ausgabeknoten liegen,

• Error Backpropagation‌ (auf Deutsch »Fehlerrückführung«), ein neuer Mechanismus für die Anpassung der Gewichte während des Trainings. ...