Natural Language Processing (NLP)
Natural Language Processing (NLP) ist das interdisziplinäre Feld zwischen Informatik, KI und Linguistik, das sich mit der Interaktion zwischen Computern und menschlicher Sprache befasst. Ziel ist es, Computer in die Lage zu versetzen, Sprache in all ihren Nuancen zu verstehen, zu interpretieren und selbst zu generieren.
Traditionelles NLP basierte auf handgeschriebenen grammatikalischen Regeln und Wörterbüchern, was oft starr und fehleranfällig war. Modernes NLP basiert fast ausschließlich auf Machine Learning und Deep Learning (insbesondere Transformer-Modellen). Zu den Kernaufgaben gehören Spracherkennung (Speech-to-Text), maschinelle Übersetzung, Sentiment-Analyse, Textzusammenfassung und Named Entity Recognition (NER). NLP ist die Technologie hinter Google Translate, Alexa und ChatGPT.
FieldLinguistics
Verwandte Begriffe
TokenEin Token ist die Grundeinheit, in die ein Text zerlegt wird, damit ein LLM ihn verarbeiten kann. Ein Token …Word EmbeddingEin Word Embedding ist eine Technik im NLP, bei der Wörter als Vektoren (Listen von Zahlen) dargestellt werd …TokenizerEin Tokenizer zerlegt Text in kleinere Einheiten (Tokens), die das Modell verarbeiten kann. Ein Token kann e …



