Simon Willison·· 11 日前AIスコア22
ttok 0.4、トークン数を数えるCLIツールを更新
ttok 0.4
AIによる概要
ttokは、OpenAIのオープンソースライブラリtiktokenを使ってトークン数を数えるCLIツールで、0.4で数年ぶりに更新された。Clickの警告修正、CIの更新、利用可能なモデルを一覧表示する--list-modelsコマンドの追加が含まれる。uvx経由で実行でき、cat file.txt | uvx ttok のように任意の入力のトークン数を数えられる。
出典: Simon Willison · simonwillison.net