MechanismArticle
新的分词器(tokenizer)使Sonnet 5处理英文文本的成本增加约1.4倍,处理西班牙语的成本增加约1.33倍,而处理简体中文的成本大致不变。
Simon Willison指出,Sonnet 5的新分词器悄悄提高了部分语言的实际成本——英文约增加1.4倍,西班牙语约增加1.33倍——而简体中文基本保持不变,这一细节仅靠对比标价是看不出来的。 ✦ AI 生成 · 平台预翻
Simon Willison · Latent Space · 2026-07-01 · English original →
一个未被充分重视的技术细节是分词器/实际计费行为。Simon Willison指出,新的分词器使Sonnet 5处理英文的成本约增加1.4倍,处理西班牙语约增加1.33倍,而处理简体中文的成本大致相同
One underappreciated technical detail was the tokenizer/effective billing behavior. Simon Willison noted the new tokenizer makes Sonnet 5 ~1.4x more expensive for English, ~1.33x for Spanish, and roughly the same for Simplified Mandarin阅读原文 ↗合理引用摘录 · 中文为平台译文