Simon Willison·· 5 小时前AI 评分37
Simon Willison 发布 token 计数 CLI 工具 ttok 0.4
ttok 0.4
AI 导读
Simon Willison 发布了基于 OpenAI 开源 tiktoken 库的 token 计数 CLI 工具 ttok 0.4。此次更新修复了 Click 警告、更新了 CI，并新增 --list-models 命令用于列出可用模型。工具支持通过 uvx 运行，例如 cat file.txt | uvx ttok 即可统计任意文件的 token 数。
正文 · AI 翻译
ttok 是我用来统计 token 的命令行工具，使用了 OpenAI 的开源 tiktoken 库。
它已经好几年没有更新了，但我终于修复了一个 Click 警告，更新了 CI，并添加了一个 --list-models 命令来列出可用模型。
它可以配合 uvx 使用，这样你就能像这样统计任何内容的 token：
cat file.txt | uvx ttok
来源：Simon Willison · simonwillison.net