ttok
AssessCông cụ
Công cụ dòng lệnh để đếm và cắt ngắn văn bản dựa trên số lượng token.
Vì sao ở đây
Xếp vào Assess: 2 bài bằng chứng từ 1 nguồn, chủ yếu là hoạt động mã nguồn mở, 2 bài trong 30 ngày qua. Độ tin cậy 30%. Bằng chứng còn ít nên xếp thận trọng, chờ thêm tín hiệu.
Bằng chứng (2)
- 3Simon Willison·9/10/2026framework_updatettok 1.0 đổi bộ mã hóa mặc định sang GPT-5/GPT-6
Simon Willison phát hành ttok 1.0 sau khi phát hiện công cụ này vẫn mặc định dùng bộ mã hóa của GPT-4. Bản cập nhật chuyển mặc định sang GPT-5/GPT-6, dựa trên bằng chứng cho thấy GPT-6 nhiều khả năng dùng cùng họ tokenizer với GPT-5, dù OpenAI chưa chính thức xác nhận.
- 2Simon Willison·8/10/2026open_sourcePhát hành ttok 0.4
Simon Willison đã phát hành ttok 0.4, bản cập nhật cho công cụ CLI dùng để đếm và cắt ngắn văn bản theo số lượng token. Bản này sửa cảnh báo của Click, cập nhật CI và bổ sung lệnh --list-models để liệt kê các mô hình khả dụng. ttok có thể dùng với uvx để xử lý nhanh văn bản được chuyển qua từ dòng lệnh.