Token
Die kleinste Texteinheit, in die ein Sprachmodell Wörter zerlegt, um sie zu verarbeiten — grob vergleichbar mit Silben.
Einfach erklärt
Sprachmodelle lesen Text nicht Wort für Wort, sondern in kleinen Bausteinen, den Tokens. Ein kurzes Wort ist oft ein Token, ein langes oder seltenes Wort kann aus mehreren bestehen.
Wichtig wird das für Sie an zwei Stellen: Die Kosten vieler KI-Dienste richten sich nach der Anzahl der Tokens, und das Kontextfenster wird in Tokens gemessen.
Beispiel aus dem Unternehmensalltag
Ein Beleuchtungsbau-Betrieb, der lange Ausschreibungsunterlagen automatisiert zusammenfassen lässt, merkt, dass die Kosten mit dem Dokumentenumfang steigen — das liegt an der Token-Anzahl.
Was das für Ihr Unternehmen bedeutet
- Sie müssen Tokens nicht zählen, aber wissen, dass sie hinter Preisangaben von KI-Diensten stehen.
- Lange Dokumente sind entsprechend "teurer" zu verarbeiten als kurze.
- Für den Alltag reicht: mehr Text hinein bedeutet mehr Rechenaufwand.
Fragen dazu?
Erstgespräch vereinbaren →