Rozdział 10. Trenowanie transformerów od podstaw

W pierwszym akapicie tej książki wspomnieliśmy o zaawansowanej aplikacji o nazwie GitHub Copilot, która wykorzystuje transformery w stylu GPT do autouzupełniania kodu. Funkcja ta jest szczególnie przydatna podczas programowania w nowym języku, nauki kodowania albo automatycznego generowania szablonowego kodu. Inne produkty, które używają sztucznej inteligencji do tego celu, to m.in. TabNine (https://tabnine.com) i Kite (https://kite.com). Później, w rozdziale 5., wyjaśniliśmy, jak używać modeli GPT do generowania tekstu wysokiej jakości. W tym rozdziale zatoczymy koło i zbudujemy nasz własny model w stylu GPT do generowania źródłowego kodu Pythona! Nadamy mu nazwę CodeParrot.

Dotychczas pracowaliśmy ...

Get Przetwarzanie języka naturalnego z wykorzystaniem transformerów now with the O’Reilly learning platform.

O’Reilly members experience books, live events, courses curated by job role, and more from O’Reilly and nearly 200 top publishers.