Rozdział 3. Reprezentacja tekstu
W przetwarzaniu języka wektory x wyprowadza się z danych tekstowych, aby odzwierciedlić różne właściwości lingwistyczne tekstu.
— Yoav Goldberg
Ekstrakcja cech to ważny etap w każdym procesie uczenia maszynowego. Bez względu na to, jak dobrego algorytmu modelowania użyjesz, jeśli przekażesz mu kiepskie cechy, otrzymasz kiepskie wyniki. W informatyce często podsumowuje się to stwierdzeniem „śmieci na wejściu, śmieci na wyjściu”. W poprzednich dwóch rozdziałach dowiedziałeś się, czym jest NLP, z jakimi wiąże się zadaniami i wyzwaniami i jak wygląda typowy potok NLP. W tym rozdziale zajmiemy się pytaniem: jak wyodrębniać cechy z danych tekstowych? Innymi słowy: jak przekształcić dany tekst w postać liczbową, żeby ...
Get Przetwarzanie języka naturalnego w praktyce now with the O’Reilly learning platform.
O’Reilly members experience books, live events, courses curated by job role, and more from O’Reilly and nearly 200 top publishers.