关闭广告

Artificial Analysis评测新鲜出炉:Kimi K2 thinking位居世界第二,开源第一

AI寒武纪120人阅读


根据著名AI分析机构Artificial Analysis的评估,Kimi K2 Thinking在智能体(agentic)相关任务中表现非常突出,但在完成评测时生成了所有模型中最多的token,表现出非常“话痨”的特性

以下是其核心要点:

智能指数67分,登顶开源榜首

Kimi K2 Thinking在Artificial Analysis智能指数中获得67分。

这一成绩使其明确领先于所有其他开源权重模型,包括最近发布的MiniMax-M2(61分)和DeepSeek-V3.2-Exp(57分),在所有模型中仅次于GPT-5


Agent能力突出,推理表现强劲

Kimi K2 Thinking在智能体应用场景中展现出强大实力,在Artificial Analysis智能体指数中排名第二,仅次于GPT-5

其优异表现主要得益于在²-Bench Telecom基准测试中取得了93%的成绩。这是一个智能体工具使用评测。这是该机构独立测量到的最高分


此外,在Humanity’s Last Exam(人类终极考试)评测中,Kimi K2 Thinking在无工具情况下的得分为22.3%,创下开源模型历史新高,仅次于GPT-5和Grok 4


成为新晋开源代码模型冠军

尽管Kimi K2 Thinking并未在任何一项代码评测中夺得总冠军,但相较于其他开源模型,它在各项评测中均排名第一或并列第一

具体排名为:Terminal-Bench Hard第6名,SciCode第7名,LiveCodeBench第2名

因此,它在Artificial Analysis代码指数中超越了先前的开源领导者DeepSeek V3.2

更多排名:


模型细节:1万亿参数,INT4原生精度

模型规格:总参数量1万亿,激活参数320亿(约594GB),仅支持文本输入,拥有256K上下文窗口

模型定位:该模型是Kimi K2 Instruct的推理变体,拥有相同的架构和参数数量

INT4精度:与此前Kimi K2 Instruct发布的FP8精度不同,该模型原生以INT4精度发布。月之暗面在后训练阶段使用了量化感知训练来实现这一点。这使得模型大小仅为约594GB,相比K2 Instruct的1TB以上大幅缩小,从而提升了推理和训练效率

代价:高冗余度、成本与延迟

Kimi K2 Thinking表现得非常“话痨”。在完成智能指数评测时,它总共使用了1.4亿个token,约为DeepSeek V3.2的2.5倍,GPT-5的2倍。


高冗余度直接影响了成本和延迟

基础版API

定价:输入 百 万 , 输 出 2.5/百万token。

评测总成本:$356,比顶尖前沿模型便宜(比GPT-5(高)便宜2.5倍),但比DeepSeek V3.2贵9倍

速度:非常慢,约8个输出token/秒

Turbo版API

定价:输入 百 万 , 输 出 8/百万token。
评测总成本:$1172,是第二昂贵的模型,仅次于Grok 4。
速度:相对较快,约50个输出token/秒

报告指出,此次发布再次凸显了一个持续的趋势:后训练,特别是强化学习(RL),正在推动推理模型和涉及工具调用的长程任务性能实现增长

参考:

https://artificialanalysis.ai/models/kimi-k2-thinking

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

AI闭环交易再引争议:OpenAI入股Thrive Holdings,或瞄准更多私募

华尔街见闻官方 浏览 41

路易斯破82天球荒!复出后首球,申花锁定胜局,马纳法精妙助攻

奥拜尔 浏览 143

爆笑佳作入围戛纳,这是真正属于影迷的电影

幕味儿 浏览 135

马竞重新投入训练备战贝蒂斯,卡多佐是唯一缺席训练的球员

懂球帝 浏览 145

巴黎客战布雷斯特:阿什拉夫、巴尔科拉首发, 登贝莱替补

懂球帝 浏览 127

关系藏不住了?小S二女儿被曝恋情

小梊搞笑解说 浏览 173

全运会男足:上海U20 3-2新疆U20,刘诚宇、蒯纪闻破门,李新翔绝杀

懂球帝 浏览 118

纯电版奥迪A6亮相!外观很动感,配800V架构+5块大屏,续航785Km

小史谈车 浏览 2

草根出身的“苦命女星”,41岁怀孕,落子无悔却人人替她冤屈

娱乐白名单 浏览 2856

在以驻美使馆外自焚男子为美空军现役军人

环球网 浏览 2879

亚足联官方:日本裁判替代马宁担任塔吉克vs约旦第四官员

懂球帝 浏览 2774

茅台跌落价格神坛!53度飞天茅台补贴价跌破1700元,释放信号明显

火山诗话 浏览 135

今年秋天最火的4条裙子,配玛丽珍鞋绝美!

LinkFashion 浏览 149

以军已停止在加沙地带军事行动

财联社 浏览 147

硅谷的「十万大裁员」:Meta按代码量裁员

新智元 浏览 131

财经早餐:国内金饰1克已高达1235元;人民币对美元汇率中间价报7.0995

网易财经 浏览 145

事关市值4700多亿元大牛股 两位首席深夜互怼"抢地盘"

每日经济新闻 浏览 2

太阳报:曼联考虑在非洲杯期间让小将谢伊-莱西进入一线队

懂球帝 浏览 118

氧气面罩可能失灵,2600架波音737被查

观察者网 浏览 27172

致使国家税收遭受特别重大损失 退休多年的饶勇被处分

政知新媒体 浏览 3000

贾玲与韩寒:春节档幕后的资本局中局

刺猬公社 浏览 2630
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
Copyright © 2020-2024,版权所有 xingchentong.com
沪ICP备20017958号-8