跳到正文
热点事件持续更新

Artificial Analysis 改用完成任务耗时作 API 基准头条指标

1 篇报道1 个报道来源7 小时前更新

先了解这件事

AI 综述

独立评测机构 Artificial Analysis 于 11 月 5 日凌晨宣布其 API 性能基准的下一版本:比较模型的头条指标从每秒 token 数改为「Time per Task」(完成任务耗时),衡量一项任务要等多久。新版把首 token 等待计入端到端输出速度,在每次测量中加入智能体工作负载,并将各实验室 API 默认 effort 与最高 effort 并列测量。 这套新口径适用于该机构每天多次测量速度、延迟与缓存的约 1,000 个 serverless(按用量计费)端点,头条数字取这些负载过去 5 天的平均值。Artificial Analysis 称,这些数字全部出自该机构一家的测量。

AI 根据报道生成 · 54 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. 智源社区精选
    Artificial Analysis 宣布 API 性能基准新版本,头条指标改为完成任务耗时

    独立评测机构 Artificial Analysis 于 11 月 5 日凌晨宣布其 API 性能基准的下一版本,头条指标从每秒 token 数改为「Time per Task」(完成任务耗时),并把首 token 等待计入端到端输出速度、在每次测量中加入智能体工作负载、新增按各实验室 API 默认 effort 的基准。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。