Design Patterns für Machine Learning

Entwurfsmuster 18: Kontinuierliche Modellbewertung

Das Entwurfsmuster Kontinuierliche Modellbewertung behandelt das häufige Problem, erkennen zu müssen, wann ein bereitgestelltes Modell nicht mehr seinem Zweck entspricht, und daraufhin eine bestimmte Maßnahme zu ergreifen.

Problem

Sie haben nun Ihr Modell trainiert. Sie haben die Rohdaten zusammengetragen, aufbereitet, Features herausgearbeitet, Einbettungsschichten erzeugt, Hyperparameter abgestimmt, das ganze Drum und Dran. Sie sind in der Lage, auf Ihrem reservierten Testdatensatz eine Genauigkeit von 96 % zu erreichen. Erstaunlich! Sie sind sogar den mühsamen Prozess durchgegangen, Ihr Modell bereitzustellen, indem Sie es aus einem Jupyter-Notebook in ein ML-Modell in der Produktion überführt ...