Simon Willison·· 6 天前AI 评分14
ttok 0.4 发布:新增 --list-models 命令
ttok 0.4
AI 导读
Simon Willison 的 token 计数 CLI 工具 ttok 发布 0.4 版本,修复了 Click 警告、更新了 CI,并新增 --list-models 命令用于列出可用模型。该工具基于 OpenAI 开源的 tiktoken 库,此前已有两年未更新,可通过 uvx ttok 直接调用,例如 cat file.txt | uvx ttok 即可统计文件 token 数。
正文
ttok is my CLI tool for counting tokens, using OpenAI's open source tiktoken library.
It hasn't been in updated in a couple of years, but I finally fixed a Click warning, updated CI, and added a --list-models command to list available models.
It works with uvx, so you can count tokens in anything like this:
cat file.txt | uvx ttok
来源:Simon Willison · simonwillison.net