# Token

> Die Einheit, die ein Sprachmodell liest und schreibt — Wortfragment, Wort oder Satzzeichen — und die Einheit, in der Kosten und Kontextlimits gezählt werden.

Modelle sehen keinen Text, sie sehen Tokens: häufige Wörter werden ein Token, seltene zerfallen in mehrere, und hundert Tokens sind grob fünfundsiebzig englische Wörter. Jeder Modellaufruf wird in Eingabe- und Ausgabetokens abgerechnet — deshalb wird ein Chatbot teuer, der bei jeder Nachricht ein langes Dokument mitschleppt.

Die praktische Folge ist Budgetierung: Prompt-Länge, Verlauf und die Antwort selbst teilen sich dasselbe Kontextfenster, und der Preis gilt pro Million Tokens, nicht pro Anfrage. Techniken wie RAG existieren vor allem, um Tokens nur für die Fragmente auszugeben, die zählen.

## Verwandte Begriffe

- https://dfieldsolutions.com/de/glossar/context-window.md
- https://dfieldsolutions.com/de/glossar/rag.md
- https://dfieldsolutions.com/de/glossar/llm.md

---

Source: https://dfieldsolutions.com/de/glossar/token
DField Solutions — Dunakeszi, Hungary — dezso@dfieldsolutions.com
Booking: see https://dfieldsolutions.com/en/contact
