跳到正文
热点事件持续更新

Artificial Analysis 发布 Intelligence Index v5,开源闭源差距扩大

2 篇报道2 个报道来源2 小时前更新

先了解这件事

AI 综述

Artificial Analysis 于 10 月 28 日发布 Intelligence Index v5,这是自 v4 以来幅度最大的一次基准重构。新版本导致 Kimi K3.1 Pro 从第四名跌至第九名,落后于八个闭源模型;按 Artificial Analysis 的说法,开源模型与榜首的差距由此前的 3 分扩大到 12 分。 改版的核心变化是 60% 的评测权重首次建立在私有测试集或隐藏答案之上,以防止模型针对公开基准刷分。编码占 25% 权重,其中 Cognition 同日发布的 FrontierCode 2.0 独占 15%,其 132 项任务由开源仓库维护者按是否愿意合并 PR 打分,Terminal-Bench 4.0 占 10%。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. IT之家
    Artificial Analysis 发布 Intelligence Index v5,60% 权重改用私有测试集并纳入 FrontierCode 2.0

    Artificial Analysis 于 10 月 28 日发布 Intelligence Index v5,是 v4 以来幅度最大的基准重构,60% 评测权重首次建立在私有测试集或隐藏答案之上,并将 Cognition 同日发布的 FrontierCode 2.0 纳入编码评价,其 132 项任务由开源仓库维护者按是否愿意合并 PR 打分。

10月28日
  1. The Decoder
    Artificial Analysis 改版 Intelligence Index,开源与闭源模型差距扩大

    Artificial Analysis 全面改版其 Intelligence Index,开源模型 Kimi K3.1 Pro 从第四名跌至第九名,落后于八个闭源模型,开源模型与榜首的差距从 3 分扩大到 12 分。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。