Simon Willison wydał nową wersję ttok 0.4 - swojego narzędzia CLI do liczenia tokenów, które teraz można uruchamiać bezpośrednio z linii poleceń za pomocą uvx. Projekt, który przez kilka lat czekał na aktualizacje, doczekał się poważnego odświeżenia kodu i infrastruktury.

Wśród najważniejszych zmian znalazły się: naprawa ostrzeżeń generowanych przez bibliotekę Click, modernizacja ciągłej integracji (CI), oraz dodanie nowej komendy --list-models, która wyświetla wszystkie dostępne modele. Narzędzie bazuje na open source'owej bibliotece tiktoken od OpenAI, która stała się standardem w ekosystemie pracy z tokenizacją dla modeli języka.

Ttok staje się bardziej praktyczne dla programistów pracujących z LLM-ami. Możliwość szybkiego sprawdzenia liczby tokenów w dowolnym pliku tekstowym za pomocą jednego polecenia - na przykład "cat file.txt | uvx ttok" - ułatwia szacowanie kosztów API i zarządzanie limitami kontekstu modeli takich jak GPT czy Claude.