聪明世界#127
编程入门
记性164K
便宜$2.1
记性换算成体感:一次能读完一本中篇小说
Deepseek R 系列的文本模型 · 按发布时间
共 4 个 · 深度求索的全部模型 →他的房间
电脑
没有公开的编程评测成绩
书架
3 层 · 记忆 164K tokens
黑板
数学与科学推理
日历
知识截止日期未公开
冰箱
支持上下文缓存,能存记忆
门禁
闭源,权重不公开
身世
- 发布日期
- 2025 年 5 月 28 日epoch.ai
- 知识截止
- 暂无数据
- 参数量
- 体型为估算值,官方从未公布参数量
- 开放权重
- 暂无数据
- 开源许可
- 暂无数据
- 上下文窗口
- 164K tokens
- 单次最大输出
- 33K
- 输入价格
- $0.50 / 百万 tokens
- 输出价格
- $2.15 / 百万 tokens
- 模型类型
- 文本只读文字、只写文字的对话模型
- 支持的输入
- 文字 → 文字
- 工具调用
- 暂无数据
- 深度思考
- 暂无数据
- 提示缓存
- 是
战绩
- 综合智力
- 141.3
- AIME 数学
- 66.4%
- GPQA Diamond 科学
- 76.3%
- ARC-AGI-2 抽象推理
- 1.1%
- Fiction.liveBench 长文本
- 33.3%
综合智力、数学、科学、抽象推理与长文本数据来自 Epoch AI(CC-BY 4.0)。写「未参赛」的项目表示该模型没有被这项评测收录, 不代表它做不到——本站不会用估算值填补空缺。
编程战绩(按赛制分列)
- LiveBench 智能体编程20.0%LiveBench 的智能体编程分项:不是写一段代码,而是像开发者那样多轮改动一个项目。第三方实测https://livebench.ai/#/?release=2025-05-30
- Aider Polyglot71.4%多语言代码编辑测试,看模型能不能按要求准确改动已有代码。榜单已停更在 2025 年底,只覆盖那之前的模型。第三方实测https://aider.chat/docs/leaderboards/#polyglot-leaderboard
- LiveBench 编程分项73.2%LiveBench 每月换新题以避免污染,这一列是它的编程分项均分。第三方实测https://livebench.ai/#/?release=2025-05-30
- ALE-Bench804AtCoder 启发式算法竞赛题,考的是给一个没有标准答案的优化问题找出尽量好的解。分数是 137–2177 的评分标度,不是百分比。和「修 bug」是两种能力。第三方实测https://epoch.ai/benchmarks
- AlgoTune1.70×给定一段算法实现,让模型把它调得更快。分数是加速倍率(约 1.3–2 倍),不是百分比。考的是性能调优而不是功能实现。第三方实测https://epoch.ai/benchmarks
这些分数不可互相比较。同一个模型换一套评测脚手架就能差二三十分: SWE-bench Verified 的中位数是 75.7,而难度更高的 SWE-Bench Pro 只有 41.0。 广场上的能力条因此显示的是「在同一把尺子下排第几」,而不是分数本身。
全部成绩(按榜单分列)
名次的分母是在同一个榜、由同一类测量方测过的模型数,不是全站模型数。不同榜的分数不可互相比较。
综合
- 综合智力141.3第 127 / 208Epoch Capabilities Index,把十几项学术评测归并成一个总分。想知道「谁最强」,先看这一栏。第三方实测https://epoch.ai/benchmarks
- SimpleBench40.8%第 64 / 103一套普通人能轻松答对、模型却常常答错的常识题。分数越高越少犯「一看就傻」的错。第三方实测https://simple-bench.com/
数学
- AIME 数学66.4%第 115 / 191美国高中数学邀请赛难度的模拟题,是数学竞赛能力的通行标尺。答对比例,满分 100。第三方实测https://epoch.ai/benchmarks
- MATH 五级96.6%第 10 / 91MATH 题库里难度最高的一档,高中竞赛水平。老榜单,顶尖模型早已接近满分。第三方实测https://epoch.ai/benchmarks/math-level-5
知识与推理
- GPQA 科学76.3%第 100 / 197博士级别的物理、化学、生物选择题,题目设计到「谷歌也搜不到答案」。随机乱猜是 25 分。第三方实测https://epoch.ai/benchmarks
- ARC-AGI-21.1%第 89 / 108看几组图形样例找规律的智力题,人类轻松、模型艰难。专门测「没见过的题会不会做」。第三方实测https://epoch.ai/benchmarks
- ARC-AGI(第一代)21.2%第 88 / 107ARC-AGI 的第一代题库,已被第二代取代。第三方实测https://arcprize.org/leaderboard
- 深度研究35.1%第 36 / 38给一个开放的研究课题,让模型上网查资料写出报告,由人评质量。第三方实测https://drb.futuresearch.ai
- CritPt 物理1.1%第 82 / 163研究级别的物理问题,由在职物理学家出题。测的是能不能做前沿科研级的推理。第三方实测
- WeirdML41.6%第 87 / 146一批刻意古怪的小型机器学习任务,模型要自己写代码训练并拿到成绩。考的是解决陌生问题的能力。第三方实测https://htihle.github.io/weirdml.html
智能体
- 独立工作时长31 分钟第 31 / 53METR 的时间跨度:模型能可靠独立完成的任务,换成人来做要花多久。单位是时间,越长说明能独立干越大的活。第三方实测https://metr.org/blog/2025-03-19-measuring-ai-ability-to-complete-long-tasks/
长文本
- 长文本记忆33.3%第 37 / 41Fiction.liveBench:读一篇长小说后回答细节问题。很多模型号称能读百万字,实测读到一半就忘了前面。第三方实测https://epoch.ai/benchmarks
游戏与谜题
- BALROG 游戏34.9%第 10 / 41玩 NetHack、我的世界之类的文字或像素游戏,看能推进多少进度。第三方实测https://balrogai.com/
写作
- 创意写作81.9%第 19 / 60Lech Mazur 的短篇写作评测:按给定元素写故事,由多个模型交叉评分。分数是 0–10 的均分换算成百分制。第三方实测https://github.com/lechmazur/Writing