IT之家 · ITHome

Intelligence Index v5 改版:DeepSeek 编码单项领跑已发布权重模型

Artificial Analysis 新版指数将60%的评测权重放在私有测试集或隐藏答案上,以减少公开题库带来的评测污染。DeepSeek 在 FrontierCode 2.0 以28%领跑已发布权重模型,但综合得分为32分,低于榜首的58分。该单项由仓库维护者判断代码改动是否达到合并要求。

来源发布: 简报整理:
Intelligence Index v5 改版:DeepSeek 编码单项领跑已发布权重模型
配图来源 · IT之家 · ITHome

值得关注

  • 01

    FrontierCode 2.0 占总指数15%的权重,涵盖132项来自真实开源仓库的任务;任一阻塞性检查失败,该任务即记零分。

  • 02

    DeepSeek V4.1-Flash 1017(max)在该单项获得28%;综合指数中,DeepSeek 与 GLM-5.3 均为32分,榜首 Claude Opus 5.5 为58分。

为什么值得关注

该指数涵盖多个能力领域,因此 FrontierCode 2.0 的单项领先不应被视为综合排名领先。

原始来源阅读原文 · IT之家 · ITHomewww.ithome.com

摘要经 AI 整理,详情请参阅原文。 编辑与来源说明