token 计数对不上：为什么算的比实际少
tokenizer 差异导致预估与实际不符，附估算方法和留余量建议。，附原因排序、修复步骤与责任判定。
更新 2026-10-28
核验 2026-10-28 · 码农阿风
token计费
30 秒结论
不同模型的 tokenizer 不一样，中文尤其差得多。别用一套估算所有模型。
报错原文对照
报错提示 context 超限，但你自己算没超
计费比预估高原因排序
| 概率 | 原因 |
|---|---|
| 60% | 用错了 tokenizer |
| 25% | 中文 token 效率低 |
| 15% | 没算上系统提示词和工具定义 |
修法
先在自己这边查
- 用目标模型自己的 tokenizer 估算
- 预留 20% 余量
- 把工具定义也算进去
再往服务方查
- 中转站可能改写请求导致 token 变化
责任判定表
| 现象 | 责任方 |
|---|---|
| 换成目标模型 tokenizer 就对上 | 估算方法 |
| 差很多 | 中文效率 |
| 带上工具就超 | 工具定义 |
什么时候该换
计费和窗口都按目标模型的 tokenizer 算。
你在这个站点上遇到过这个问题？
认领站点后可补充证据、申请公开核验；认证不改榜单排序，只对应可复核的检测与复测。
认领 / 申请认证