Artificial Analysis更新指数导致Kimi K3.1 Pro排名下降
热点事件历史事件
Artificial Analysis更新指数导致Kimi K3.1 Pro排名下降
1 篇报道1 个报道来源11 天前更新
先了解这件事
AI 综述
Artificial Analysis更新了Intelligence Index,导致Kimi K3.1 Pro的排名从第四位下降至第九位,落后于八个closed模型。 新指数中60%依赖私有测试集,目的是防止“benchmaxxing”。 此前open模型与榜首的差距为3点,更新后差距扩大至12点。
AI 根据报道生成 · 11 天前更新
最新进展10月28日 23:04
New Artificial Analysis index 扩大 open 和 closed 模型间的差距报道时间线
沿着报道,了解事件的不同侧面。
10月28日
- The DecoderNew Artificial Analysis index 扩大 open 和 closed 模型间的差距
Artificial Analysis 更新了 Intelligence Index,导致 Kimi K3.1 Pro 从第四位跌至第九位,落后于八个 closed 模型。新指数中 60% 依赖私有测试集以防止 "benchmaxxing",此前 open 模型与榜首的差距为 3 点,现扩大至 12 点。