跳到正文
原文
Simon Willison·· 7 小时前AI 评分45

ttok 1.0 发布

ttok 1.0

AI 导读

ttok 1.0 发布,将默认 tokenizer 从 GPT-4 切换为 GPT-5/GPT-6。OpenAI 尚未确认 GPT-6 与 GPT-5 系列使用相同 tokenizer,但 William Liu 的实验显示 GPT-5.5、GPT-6 等七个模型在 31 个测试用例上均报告 44,794 tokens 且完全一致。

来源:Simon Willison · simonwillison.net