ttok是我的 CLI 工具,用于计算 token 数量,使用 OpenAI 的开源tiktoken库。

它已经好几年没更新了,但我终于修复了一个 Click 警告,更新了 CI,并添加了一个--list-models用于列出可用模型的命令。

它适用于uvx,所以你可以像这样计算任何内容的 token 数量:

cat file.txt | uvx ttok