Overview
Diese Arbeit wurde mithilfe von KI übersetzt. Wir freuen uns über dein Feedback und deine Kommentare: translation-feedback@oreilly.com
Große Sprachmodelle (LLMs) sind die Denkmaschinen der modernen KI. Heute ist ein wichtiger Wendepunkt erreicht: Während die Welt um den Einsatz von KI in großem Maßstab ringt, rückt die Modellinferenz in den Mittelpunkt des Stacks. Willkommen in der Inferenz-Ära.
Ohne die richtige Optimierung können LLMs jedoch teuer und langsam sein. Hands-On LLM Serving and Optimization ist ein umfassender Leitfaden für die Komplexität des Einsatzes und der Optimierung von LLMs in großem Maßstab.
In diesem praxisnahen, ingenieurwissenschaftlich ausgerichteten Buch kombinieren die Autoren Chi Wang und Peiheng Hu praktische Beispiele, Code und Strategien für den Aufbau robuster, leistungsfähiger und kosteneffizienter KI-Token-Fabriken. Ganz gleich, ob du die LLM-Inferenzinfrastruktur oder die Anwendungen entwickelst, die sie nutzen - ein tiefes Verständnis des LLM-Serving macht dich zu einem effektiveren, zukunftsfähigen Ingenieur, da KI unsere Arbeits- und Bauweise verändert.
- Lerne die Grundlagen des Model Serving mit Kernkonzepten, Entwurfsparadigmen und bewährten Methoden der Branche kennen
- Verstehe die allgemeinen Herausforderungen beim Hosten von LLMs in großem Maßstab
- Gleichgewicht zwischen Latenz und Durchsatz, um die Anforderungen von KI-Anwendungen und Geschäftsanforderungen zu erfüllen
- LLMs kosteneffizient mit praktischen, codebasierten Techniken hosten
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Read now
Unlock full access