Słownik AI
Przetwarzanie języka naturalnego (NLP)
NLP, natural language processing, przetwarzanie języka
Przetwarzanie języka naturalnego (NLP) to dziedzina AI zajmująca się tym, jak maszyny rozumieją, analizują i generują ludzki język — od klasyfikacji tekstu i tłumaczenia po prowadzenie rozmowy. Duże modele językowe są jej współczesnym szczytem.
- NLP obejmuje rozumienie i generowanie języka pisanego oraz mówionego.
- Typowe zadania to klasyfikacja tekstu, tłumaczenie, ekstrakcja informacji i odpowiadanie na pytania.
- Duże modele językowe oparte na transformerach to dziś najbardziej zaawansowane podejście w NLP.
Przetwarzanie języka naturalnego (NLP) to obszar sztucznej inteligencji, który zajmuje się tym, jak komputer może rozumieć i tworzyć ludzki język. Mieszczą się tu zarówno proste zadania, jak rozpoznanie, czy opinia jest pozytywna, jak i złożone — tłumaczenie, streszczanie czy prowadzenie rozmowy w naturalnym języku.
Przez dekady NLP opierało się na regułach i statystyce, a postęp przyspieszył dzięki uczeniu maszynowemu, a następnie uczeniu głębokiemu. Wspólnym krokiem wstępnym jest tokenizacja, czyli rozbicie tekstu na tokeny — jednostki, na których model faktycznie operuje, zwykle fragmenty słów.
Najbardziej zaawansowanym podejściem w dziedzinie są dziś duże modele językowe oparte na architekturze transformer, które jednym mechanizmem obsługują zadania wcześniej rozwiązywane osobno. NLP i LLM to nie to samo: NLP to cały obszar badań i zastosowań, a LLM to konkretna klasa modeli, która ten obszar dziś zdominowała. W firmie NLP stoi za wyszukiwaniem, automatyczną obsługą zapytań, analizą dokumentów i klasyfikacją treści — często niewidoczne dla użytkownika, ale obecne w wielu procesach.
Powiązane pojęcia