关闭广告

Artificial Analysis评测新鲜出炉:Kimi K2 thinking位居世界第二,开源第一

AI寒武纪2510人阅读


根据著名AI分析机构Artificial Analysis的评估,Kimi K2 Thinking在智能体(agentic)相关任务中表现非常突出,但在完成评测时生成了所有模型中最多的token,表现出非常“话痨”的特性

以下是其核心要点:

智能指数67分,登顶开源榜首

Kimi K2 Thinking在Artificial Analysis智能指数中获得67分。

这一成绩使其明确领先于所有其他开源权重模型,包括最近发布的MiniMax-M2(61分)和DeepSeek-V3.2-Exp(57分),在所有模型中仅次于GPT-5


Agent能力突出,推理表现强劲

Kimi K2 Thinking在智能体应用场景中展现出强大实力,在Artificial Analysis智能体指数中排名第二,仅次于GPT-5

其优异表现主要得益于在²-Bench Telecom基准测试中取得了93%的成绩。这是一个智能体工具使用评测。这是该机构独立测量到的最高分


此外,在Humanity’s Last Exam(人类终极考试)评测中,Kimi K2 Thinking在无工具情况下的得分为22.3%,创下开源模型历史新高,仅次于GPT-5和Grok 4


成为新晋开源代码模型冠军

尽管Kimi K2 Thinking并未在任何一项代码评测中夺得总冠军,但相较于其他开源模型,它在各项评测中均排名第一或并列第一

具体排名为:Terminal-Bench Hard第6名,SciCode第7名,LiveCodeBench第2名

因此,它在Artificial Analysis代码指数中超越了先前的开源领导者DeepSeek V3.2

更多排名:


模型细节:1万亿参数,INT4原生精度

模型规格:总参数量1万亿,激活参数320亿(约594GB),仅支持文本输入,拥有256K上下文窗口

模型定位:该模型是Kimi K2 Instruct的推理变体,拥有相同的架构和参数数量

INT4精度:与此前Kimi K2 Instruct发布的FP8精度不同,该模型原生以INT4精度发布。月之暗面在后训练阶段使用了量化感知训练来实现这一点。这使得模型大小仅为约594GB,相比K2 Instruct的1TB以上大幅缩小,从而提升了推理和训练效率

代价:高冗余度、成本与延迟

Kimi K2 Thinking表现得非常“话痨”。在完成智能指数评测时,它总共使用了1.4亿个token,约为DeepSeek V3.2的2.5倍,GPT-5的2倍。


高冗余度直接影响了成本和延迟

基础版API

定价:输入 百 万 , 输 出 2.5/百万token。

评测总成本:$356,比顶尖前沿模型便宜(比GPT-5(高)便宜2.5倍),但比DeepSeek V3.2贵9倍

速度:非常慢,约8个输出token/秒

Turbo版API

定价:输入 百 万 , 输 出 8/百万token。
评测总成本:$1172,是第二昂贵的模型,仅次于Grok 4。
速度:相对较快,约50个输出token/秒

报告指出,此次发布再次凸显了一个持续的趋势:后训练,特别是强化学习(RL),正在推动推理模型和涉及工具调用的长程任务性能实现增长

参考:

https://artificialanalysis.ai/models/kimi-k2-thinking

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

武契奇称"无法保证不制裁俄罗斯" 俄方回应

参考消息网 浏览 9623

拉齐奥女足称贝尼斯擅自离队,球员经纪人表示俱乐部不发钱

懂球帝 浏览 2723

赵心童:要学会带着压力享受比赛;特别爱吃陕西面食和葫芦鸡

懂球帝 浏览 2875

加速进化抢单“双11”

北京商报 浏览 2578

央视主持人海霞因争议遭除名,引发主持界讨论

史鹷的生活科普 浏览 1886

你的高级感,烟管裤轻松搞定!

Yuki女人故事 浏览 759

郑中基疑似新恋情,和异性现身游乐场

素素娱乐 浏览 1567

【亚冠精英】傅欢自摆乌龙 海港0比2町田垫底积分榜

体坛周报 浏览 2801

五粮液是会计差错还是财务造假?

诗与星空 浏览 675

丝袜称明年随心参赛无视强制参赛规则,高芙称女网更有趣更具悬念

网球之家 浏览 2561

约6000人被埋加沙废墟下 哈马斯:不会离开自己的土地

红星新闻 浏览 11962

乌称1200名乌被俘人员将获释 俄方暂无回应

新京报 浏览 2421

联想moto X70 Air手机现身:5.3mm超薄机身+159g轻盈重量

IT之家 浏览 2956

定位中大型5座SUV 星途ET7申报图曝光

车质网 浏览 2408

盘点史上无冠但进年终男选手,穆塞蒂并不孤单!

网球之家 浏览 2380

卫报:欧冠决赛英国非法播放量超1620万次,合法观众700多万人

懂球帝 浏览 263

马杜罗在纽约首次“出庭” 多国发表联合声明

环球网资讯 浏览 1961

大衣里面穿什么?这件内搭才是今年冬天的“顶流”

LinkFashion 浏览 1740

高负债下韬盛科技2023年净利润为负,增收反降利,供应商集中

权衡财经 浏览 243

韩华航空航天公司与挪威签署9.22亿美元火箭发射器供应合同

财闻 浏览 1838

在AI面前,我们终于敢脆弱|数字时代的情感避难所『心灵加油站』(274)

我们的太空 浏览 1891
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
Copyright © 2020-2022,版权所有 qukanredian.com
沪ICP备20002587号-1