Simon Willison·· 5 小时前AI 评分37
Simon Willison 发布 token 计数 CLI 工具 ttok 0.4
ttok 0.4
AI 导读
Simon Willison 发布了基于 OpenAI 开源 tiktoken 库的 token 计数 CLI 工具 ttok 0.4。此次更新修复了 Click 警告、更新了 CI,并新增 --list-models 命令用于列出可用模型。工具支持通过 uvx 运行,例如 cat file.txt | uvx ttok 即可统计任意文件的 token 数。
正文 · 原文
ttok is my CLI tool for counting tokens, using OpenAI's open source tiktoken library.
It hasn't been in updated in a couple of years, but I finally fixed a Click warning, updated CI, and added a --list-models command to list available models.
It works with uvx, so you can count tokens in anything like this:
cat file.txt | uvx ttok
来源:Simon Willison · simonwillison.net