跳到正文
原文
Simon Willison·· 5 小时前AI 评分39

Simon Willison 发布 token 计数 CLI ttok 0.4

ttok 0.4

AI 导读

Simon Willison 更新了自己的 token 计数 CLI 工具 ttok,推出 0.4 版本。这款工具使用 OpenAI 开源的 tiktoken 库来计算 token。

正文 · 原文

ttok is my CLI tool for counting tokens, using OpenAI's open source tiktoken library.

It hasn't been in updated in a couple of years, but I finally fixed a Click warning, updated CI, and added a --list-models command to list available models.

It works with uvx, so you can count tokens in anything like this:

cat file.txt | uvx ttok

来源:Simon Willison · simonwillison.net