在线工具集
正在加载,请稍候…
正在加载,请稍候…
在线 Token 计数工具:批量粘贴多个文本或上下文片段(如系统提示词、用户输入、历史对话),逐段估算 Token 数量并自动累加总字符、词数、行数与总 Token;支持手动添加自定义模型并对比各分词器的 Token 估算(系数可编辑),适用于提示词长度评估、上下文窗口规划与成本预估。
估算规则:CJK 字符(中/日/韩)按各模型系数计 token;其余非空白字符约每 4–5 个计 1 token。不同分词器(BPE/Unigram)差异较大,结果仅供参考。可手动添加模型并修改系数进行对比。
CJK 系数 = 每个中/日/韩字符约计 token 数;拉丁系数 = 每多少个非空白非 CJK 字符计 1 token(英文通常为 4–5)。
| 模型 / 分词器 | CJK系数 | 拉丁系数 | 估算 Token | 相对默认 | 操作 |
|---|---|---|---|---|---|
OpenAI GPT-4o | 0 | — | |||
OpenAI GPT-3.5 | 0 | — | |||
Anthropic Claude 3/4 | 0 | — | |||
Google Gemini 1.5 | 0 | — | |||
通义千问 Qwen2.5 | 0 | — | |||
Qwen3.8 | 0 | — | |||
GLM 5.2 | 0 | — | |||
Hunyuan 3 (Hy3) | 0 | — | |||
文心一言 ERNIE 4 | 0 | — | |||
DeepSeek V3 | 0 | — |
说明:百分比以默认模型(OpenAI GPT-4o)为基准。中文越多的文本,各模型差异越大;纯英文文本差异较小。生产环境建议用对应模型的官方 tokenizer(如 tiktoken、claude tokenizer)精确计数。