LLM Token 计数器

粘贴 prompt 或文档,立刻看到它值多少 token——GPT、Qwen、GLM、Kimi、MiniMax 全部用官方同款分词器。逐 token 查看切分、切换编码、对照上下文窗口做预算。文本不会离开浏览器。

Token 数

o200k_base · 适用:GPT-5 · GPT-4o · o-series
编码

用 GPT、Qwen、GLM、Kimi、MiniMax 官方词表精确计算 token 数,逐 token 查看切分与 ID,全程在浏览器本地完成。

浏览器端

如何使用 Token 计数器

步骤 1

粘贴或输入任意文本

步骤 2

选编码:OpenAI 两套,或 Qwen/GLM/Kimi/MiniMax

步骤 3

看实时计数和逐 token 彩色分段

功能特性

GPT 与 Qwen/GLM/Kimi/MiniMax 官方词表,不是估算

逐 token 展示切分和 ID

每个 token 花在哪看得见

浏览器本地运行

文本不上传

六套官方词表

精确计算 token

Token 计数完全指南

这个工具是什么

Token 计数器用 OpenAI 模型的同款 BPE 编码把文本拆成 token 并计数。token 是大模型世界的通用货币——API 按它计费,上下文窗口按它设限,模型也按它阅读。写 prompt、做 RAG 切块、估算成本,第一步都是搞清楚文本到底值多少 token。

怎么用

  1. 粘贴文本prompt、文档、代码都行,越长越该先数一数。
  2. 选对编码GPT-5/4o/o 系列用 o200k_base,GPT-4/3.5 用 cl100k_base。
  3. 读计数输入即算,无需点按钮;编码表首次加载后常驻。
  4. 看彩色分段相邻 token 换色,一眼看出哪里被拆碎、哪里一词一个 token。
  5. 按需看 Token ID切到 ID 视图,拿到喂给模型的真实整数序列。

规格与限制

输入方式
无需上传文件
编码
OpenAI ×2 · Qwen3.5 · GLM-5.2 · Kimi · MiniMax-M3
计数口径
真实 BPE,非估算
分段视图
1500 个 token 着色
计数上限
无(全文计数)
离线可用
编码表加载后即可

计数对 OpenAI(GPT 系)与 Qwen3.5、GLM-5.2、Kimi、MiniMax-M3 都是官方词表精确值。Claude、Gemini 分词器未公开,数值仅作量级参考。词表 1–4MB,首次使用时下载一次,之后离线可用。

使用技巧

  • 中文比英文贵同样的意思,中文往往要花 1.5–2 倍 token,多语言应用要按语言分别预算。
  • 代码拆得碎缩进、符号、驼峰命名都会增加 token,贴大段代码前先数一数。
  • 上下文要留出口输入 + 输出共享窗口,prompt 顶满上限就没地方生成回答了。
  • 系统提示词也计费每次请求都会重复发送,长系统提示词是隐形成本大户。
  • RAG 按 token 切块按 token 而不是字符切块,检索片段的信息密度才稳定。
  • 留意结构 token对话格式还会加少量结构 token,实际用量略高于正文计数。

为什么选 Tosea.ai

字符数 ÷ 4 粗估

对英文勉强能用,对中文和代码误差很大。

API 返回的 usage

精确但要先花钱调用,写 prompt 时用不上。

Tosea.ai 计数器

同款编码本地精确计算,即输即得,免费。

把 token 当成预算来管理,prompt 才能又准又省。搭配 LLM API 指纹检测器验证您的接口货真价实,或用 AI 把 PDF 转成演示文稿,您可以在一个平台上完成 AI 工作流的搭建与验证。

相关工具

常见问题

Token 计数器 常见问题

这些回答说明了该工具的功能、支持的文件类型及当前限制。

token 到底是什么?
token 是模型实际读取的最小单位,通常几个字符,有时是整个词。常见英文词往往一个 token,而生僻词、代码和中文会拆得更碎。API 计费和上下文上限都按 token 算。
该选哪个编码?
GPT-5、GPT-4o 和 o 系列用 o200k_base;GPT-4 和 GPT-3.5 用 cl100k_base;Qwen、GLM、Kimi、MiniMax 直接选同名词表。拿不准就选 o200k_base。
计数适用于 Claude、Gemini 这些模型吗?
Qwen3.5、GLM-5.2、Kimi、MiniMax-M3 已内置官方词表,计数精确。Claude 与 Gemini 的分词器未公开,对它们只能作量级参考:粗略的 token 预算跨模型仍可迁移。
我的文本会上传吗?
不会。分词器完全在浏览器里运行,编码表作为静态文件下载一次,您的文本不会离开设备。