跳到正文
热点事件历史事件

Artificial Analysis更新指数导致Kimi K3.1 Pro排名下降

1 篇报道1 个报道来源11 天前更新

先了解这件事

AI 综述

Artificial Analysis更新了Intelligence Index,导致Kimi K3.1 Pro的排名从第四位下降至第九位,落后于八个closed模型。 新指数中60%依赖私有测试集,目的是防止“benchmaxxing”。 此前open模型与榜首的差距为3点,更新后差距扩大至12点。

AI 根据报道生成 · 11 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. The Decoder
    New Artificial Analysis index 扩大 open 和 closed 模型间的差距

    Artificial Analysis 更新了 Intelligence Index,导致 Kimi K3.1 Pro 从第四位跌至第九位,落后于八个 closed 模型。新指数中 60% 依赖私有测试集以防止 "benchmaxxing",此前 open 模型与榜首的差距为 3 点,现扩大至 12 点。