The Decoder· Matthias Bastian·· 3 小时前AI 评分62
Anthropic 在 Claude 平台公测 Message Threads,长对话首 token 时间降低约 35%
Anthropic's Message Threads cut time to first token by 35 percent for long conversations
AI 导读
Anthropic 在 Claude 平台推出公测版 Message Threads,API 请求不再重发完整对话历史,只传输上一条消息之后的新增内容。据 Anthropic 数据,在 50 万至 100 万 token 的请求中,首 token 时间缩短约 35%。
来源:The Decoder · the-decoder.com