Text & Daten

Tokens zählen

Prompt oder Dokument einfügen und die genaue Tokenzahl vom Tokenizer von OpenAI sehen, nicht aus „Zeichen durch vier“. Die Tabelle sagt, ob es passt.

Speichern und auf dem Desktop fortfahren

Lade dein Ergebnis hier zuerst herunter oder kopiere es. Auf dem Desktop speicherst du in „Dateien“ oder nutzt mehr Funktionen.

In Notizen weiterschreiben — Wörter und Zeichen werden beim Tippen gezählt
In „Dateien“ speichern, wenn du auf dem Desktop weitermachst
Alle Tools an einem Ort, ohne neue Tabs

Kostenlosen Desktop öffnen

Nach dem Download geht es auf dem Desktop weiter: Dateien oder die volle App.

Was dieses Tool kann

Genau, wo es geht, sonst markiert

OpenAI veröffentlicht seine Tokenizer, deshalb ist die Zahl für GPT-5, GPT-4.1, GPT-4o und die älteren GPT-4 und 3.5 exakt: dasselbe Vokabular wie die API, hier ausgeführt. Die Zeilen für Claude, Gemini und Llama tragen ein ≈: Sie werden mit OpenAIs Vokabular statt ihrem eigenen gezählt, also geschätzt. Für Claude fällt die Schätzung zu niedrig aus: Sein Tokenizer macht aus demselben Text mehr Tokens, bei Code und nicht-englischem Text noch mehr. Lass dort Luft.

Warum „Zeichen durch vier“ dich im Stich lässt

Die Faustregel ist auf englische Prosa geeicht und liegt selbst dort daneben: Ein gewöhnlicher englischer Absatz kommt beim Tokenizer von GPT-5 rund ein Viertel darunter. Griechisch, Hebräisch oder Thai liegen etwa die Hälfte darüber, beim älteren Tokenizer von GPT-4 Turbo und GPT-3.5 fast ein Token pro Zeichen. JSON liegt ebenfalls darüber. Nah am Limit entscheidet genau diese Lücke, ob der Aufruf durchgeht.

Das Vokabular lädt einmal, und sonst verlässt nichts das Gerät

Der Tokenizer ist etwa ein Megabyte groß und wird beim ersten Tippen geholt und danach zwischengespeichert. Deshalb erscheinen Zeichen und Wörter sofort, während er lädt, und der nächste Besuch ist unmittelbar. Dein Text gehört nicht dazu: er wird hier tokenisiert, in diesem Tab, und nirgendwohin geschickt. Genau deswegen zählt man lokal, statt einen vertraulichen Prompt zum Messen auf den Server eines anderen zu kopieren.

Fragen

Wird mein Text irgendwo hochgeladen?

Nein. Der Tokenizer läuft in deinem Browser, auf diesem Gerät. Der Text geht an keinen Server, und wir sehen ihn nie.

Welchen Tokenizer benutzt er?

o200k_base für GPT-5, GPT-4.1 und GPT-4o und cl100k_base für GPT-4 Turbo, GPT-3.5 und OpenAI-Embeddings, also dieselben Vokabulare wie die Modelle selbst.

Sind die Zahlen für Claude und Gemini exakt?

Nein, und deshalb tragen sie ein ≈. Diese Seite hat nur die Vokabulare von OpenAI, also zählen diese Zeilen ersatzweise damit. Für Claude fällt die Schätzung meist zu niedrig aus, bei Code und nicht-englischem Text noch deutlicher; lass also echten Spielraum, statt bis ans Limit zu füllen.

Warum dauert die Zahl beim ersten Mal einen Moment?

Weil das Vokabular selbst rund ein Megabyte groß ist, einmal geladen und danach vom Browser behalten wird. Zeichen und Wörter werden sofort gezählt, ohne irgendetwas zu laden.

Zählt er Tokens für Code und JSON?

Ja, es ist derselbe Tokenizer. Und gerade bei Code liegt die Faustregel „Zeichen durch vier“ am weitesten daneben.