关闭广告

Artificial Analysis评测新鲜出炉:Kimi K2 thinking位居世界第二,开源第一

AI寒武纪448人阅读


根据著名AI分析机构Artificial Analysis的评估,Kimi K2 Thinking在智能体(agentic)相关任务中表现非常突出,但在完成评测时生成了所有模型中最多的token,表现出非常“话痨”的特性

以下是其核心要点:

智能指数67分,登顶开源榜首

Kimi K2 Thinking在Artificial Analysis智能指数中获得67分。

这一成绩使其明确领先于所有其他开源权重模型,包括最近发布的MiniMax-M2(61分)和DeepSeek-V3.2-Exp(57分),在所有模型中仅次于GPT-5


Agent能力突出,推理表现强劲

Kimi K2 Thinking在智能体应用场景中展现出强大实力,在Artificial Analysis智能体指数中排名第二,仅次于GPT-5

其优异表现主要得益于在²-Bench Telecom基准测试中取得了93%的成绩。这是一个智能体工具使用评测。这是该机构独立测量到的最高分


此外,在Humanity’s Last Exam(人类终极考试)评测中,Kimi K2 Thinking在无工具情况下的得分为22.3%,创下开源模型历史新高,仅次于GPT-5和Grok 4


成为新晋开源代码模型冠军

尽管Kimi K2 Thinking并未在任何一项代码评测中夺得总冠军,但相较于其他开源模型,它在各项评测中均排名第一或并列第一

具体排名为:Terminal-Bench Hard第6名,SciCode第7名,LiveCodeBench第2名

因此,它在Artificial Analysis代码指数中超越了先前的开源领导者DeepSeek V3.2

更多排名:


模型细节:1万亿参数,INT4原生精度

模型规格:总参数量1万亿,激活参数320亿(约594GB),仅支持文本输入,拥有256K上下文窗口

模型定位:该模型是Kimi K2 Instruct的推理变体,拥有相同的架构和参数数量

INT4精度:与此前Kimi K2 Instruct发布的FP8精度不同,该模型原生以INT4精度发布。月之暗面在后训练阶段使用了量化感知训练来实现这一点。这使得模型大小仅为约594GB,相比K2 Instruct的1TB以上大幅缩小,从而提升了推理和训练效率

代价:高冗余度、成本与延迟

Kimi K2 Thinking表现得非常“话痨”。在完成智能指数评测时,它总共使用了1.4亿个token,约为DeepSeek V3.2的2.5倍,GPT-5的2倍。


高冗余度直接影响了成本和延迟

基础版API

定价:输入 百 万 , 输 出 2.5/百万token。

评测总成本:$356,比顶尖前沿模型便宜(比GPT-5(高)便宜2.5倍),但比DeepSeek V3.2贵9倍

速度:非常慢,约8个输出token/秒

Turbo版API

定价:输入 百 万 , 输 出 8/百万token。
评测总成本:$1172,是第二昂贵的模型,仅次于Grok 4。
速度:相对较快,约50个输出token/秒

报告指出,此次发布再次凸显了一个持续的趋势:后训练,特别是强化学习(RL),正在推动推理模型和涉及工具调用的长程任务性能实现增长

参考:

https://artificialanalysis.ai/models/kimi-k2-thinking

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

德约领衔ATP阿德莱德站正赛名单

体坛周报 浏览 367

美媒披露:美空军8天内向中东地区调派至少42架重型运输机

环球网 浏览 297

音你而来3:不设限的音综,把舞台搬进山水里

八卦三缺一 浏览 71

牵手小鹏后,大众为何还豪赌Rivian

帮宁工作室 浏览 2874

315风波后续来了!鹿哈取消直播被追着维权

萌神木木 浏览 211

估值3.5亿的廊坊银行股权被拍卖偿债,持股人刚被法院悬赏

湘财Plus 浏览 324

男子围猎多名女性自称是"公务员" 有女子给他140万

极目新闻 浏览 40

女子豪掷30万买200多箱白酒 丈夫4000元住院费拿不出

扬子晚报 浏览 510

特朗普:一支舰队正在向伊朗方向航行

界面新闻 浏览 286

35岁男子自称婚内出轨女大学生 妻子还有40多天生产

上观新闻 浏览 352

"中国天眼"首席科学家李菂获马塞尔·格罗斯曼奖,杨振宁、丘成桐此前获奖

澎湃新闻 浏览 20544

长得帅还性能出众 上汽大众旗舰纯电轿车ID.7 S来了

网易汽车 浏览 3139

B81 2.0共创版亮相 北京越野开启共创模式新实践

网易汽车 浏览 312

脑机接口再迎政策利好,50只核心概念股“抢跑”

览富财经网 浏览 303

中年女人,为什么夏天不建议你穿短裤,看完这穿搭就你知道了

静儿时尚达人 浏览 3168

安世中国:已建立充足成品与在制品库存,能稳定持续满足客户订单需求

澎湃新闻 浏览 437

外媒:泽连斯基向特朗普展示俄境内潜在打击目标地图

环球网资讯 浏览 586

LV高管空降泡泡玛特,年薪300万港元

YOUNG财经 浏览 428

王子文前男友美国坐地铁,变黑变壮认不出,工作造假还想找女友

缘木不求娱 浏览 3239

爱妻朱媛媛离世5月后,辛柏青又传来坏消息

阿废冷眼观察所 浏览 475

蚂蚁集团AQ品牌升级为“蚂蚁阿福”

半岛晨报 浏览 397
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
Copyright © 2020-2024,版权所有 xingchentong.com
沪ICP备20017958号-8