Ein Token ist ein kleines Textstück, mit dem eine KI rechnet, oft ein Wortteil. KI-Anbieter berechnen ihre Preise und Grenzen in Tokens.
Illustration: KI-generiert · AI Compare Ninja · CC BY 4.0
Beispiel
Das Wort „Zahlungserinnerung“ wird intern in mehrere Tokens zerlegt.
Für Profis
Als grobe Faustregel entspricht ein Token im Englischen etwa drei Vierteln eines Wortes. Deutsch und viele andere Sprachen brauchen für denselben Inhalt meist mehr Tokens. Eingabe- und Ausgabe-Tokens haben bei APIs meist unterschiedliche Preise.
