ArtificialAnalysis发布全新CodingAgent基准智谱GLM-5.1取得全球开源SOTA

全球权威评测机构ArtificialAnalysis今日发布全新CodingAgent基准Artificia

全球权威评测机构Artificial Analysis今日发布全新Coding Agent基准Artificial Analysis Coding Agent Index,用于衡量Agent harnesses与模型的组合在SWE-Bench-Pro-Hard-AA、Terminal-Bench v2和SWE-Atlas-QnA主流基准上的表现。其中,智谱GLM-5.1(在Claude Code中运行)取得开源第一。

Artificial Analysis在官方推文中点明了这一新榜单的“含金量”:“当开发者使用AI编程时,他们不仅在选择模型,也在将其与特定的Agent harness搭配使用。只有对这一组合进行基准测试,才能真正理解并比较不同模型的真实性能。”

从评测结果上来看,GLM-5.1代表了国产大模型在实际编程Agent场景下的SOTA级别能力。

(来源:云掌财经)
免责声明:本文内容来源于第三方或整理自互联网,本站仅提供展示,不拥有所有权,不代表本站观点立场,也不构成任何其他建议,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容,不承担相关法律责任。如发现本站文章、图片等内容有涉及版权/违法违规或其他不适合的内容, 请及时联系我们进行处理。

相关推荐