聪明世界#104
编程中等
记性200K
便宜$75
记性换算成体感:一次能读完一本《三体》
Claude Opus 系列的视觉模型 · 按发布时间
共 11 个 · 这里是相邻的 7 个 · Anthropic的全部模型 →他的房间
电脑
73.3% · SWE-bench Verified · Epoch AI 统一复跑
书架
3 层 · 记忆 200K tokens
黑板
数学与科学推理
日历
知识停在 2025-03-31
冰箱
支持上下文缓存,能存记忆
门禁
闭源,权重不公开
身世
- 发布日期
- 2025 年 8 月 5 日models.dev
- 知识截止
- 2025-03-31
- 参数量
- 体型为估算值,官方从未公布参数量
- 开放权重
- 否
- 开源许可
- 暂无数据
- 上下文窗口
- 200K tokens
- 单次最大输出
- 32K
- 输入价格
- $15 / 百万 tokens
- 输出价格
- $75 / 百万 tokens
- 模型类型
- 视觉除了文字还能看图片或视频,输出文字
- 支持的输入
- 图像、文件、文字 → 文字
- 工具调用
- 是
- 深度思考
- 是
- 提示缓存
- 是
战绩
- 综合智力
- 144.1
- AIME 数学
- 68.9%
- GPQA Diamond 科学
- 77.3%
- ARC-AGI-2 抽象推理
- 未参评
- Fiction.liveBench 长文本
- 未参评
综合智力、数学、科学、抽象推理与长文本数据来自 Epoch AI(CC-BY 4.0)。写「未参赛」的项目表示该模型没有被这项评测收录, 不代表它做不到——本站不会用估算值填补空缺。
编程战绩(按赛制分列)
- SWE-bench Verified73.3%从真实 GitHub 仓库里挑出的 500 个 issue,看模型能不能提交出通过测试的补丁。业界最通行的编程标尺。这一列由 Epoch AI 用统一脚手架复跑。第三方实测https://epoch.ai/benchmarks
- Terminal-Bench 2.038.0%Terminal-Bench 的第二代题库,任务更长更杂。与 1.0 的分数不可直接比较。第三方实测https://www.tbench.ai/leaderboard/terminal-bench/2.0
- ALE-Bench675AtCoder 启发式算法竞赛题,考的是给一个没有标准答案的优化问题找出尽量好的解。分数是 137–2177 的评分标度,不是百分比。和「修 bug」是两种能力。第三方实测https://epoch.ai/benchmarks
- AlgoTune1.34×给定一段算法实现,让模型把它调得更快。分数是加速倍率(约 1.3–2 倍),不是百分比。考的是性能调优而不是功能实现。第三方实测https://epoch.ai/benchmarks
- WebDev Arena1389 Elo让两个模型各写一个网页,由人来投票选哪个更好,按对战胜负算 Elo 分。考的是前端开发的实际观感,和「能不能修复一个后端 bug」不是一回事。第三方实测https://epoch.ai/benchmarks
这些分数不可互相比较。同一个模型换一套评测脚手架就能差二三十分: SWE-bench Verified 的中位数是 75.7,而难度更高的 SWE-Bench Pro 只有 41.0。 广场上的能力条因此显示的是「在同一把尺子下排第几」,而不是分数本身。
全部成绩(按榜单分列)
名次的分母是在同一个榜、由同一类测量方测过的模型数,不是全站模型数。不同榜的分数不可互相比较。
综合
- 综合智力144.1第 104 / 208Epoch Capabilities Index,把十几项学术评测归并成一个总分。想知道「谁最强」,先看这一栏。第三方实测https://epoch.ai/benchmarks
- SimpleBench60.0%第 29 / 103一套普通人能轻松答对、模型却常常答错的常识题。分数越高越少犯「一看就傻」的错。第三方实测https://simple-bench.com/
数学
- FrontierMath12.6%第 85 / 99由职业数学家出的原创难题,连数学博士都要花几小时甚至几天。分数是解出的比例,能过一成就是前沿水平。第三方实测https://epoch.ai/frontiermath
- FrontierMath(旧版)7.2%第 52 / 95FrontierMath 2025 年初的版本,已被新题库取代。留作历史对照。第三方实测https://epoch.ai/frontiermath
- FrontierMath 第四层2.4%第 59 / 71FrontierMath 里最难的一层,研究级别的问题,绝大多数模型接近零分。第三方实测https://epoch.ai/frontiermath
- FrontierMath 第四层(旧版)4.2%第 26 / 66FrontierMath 第四层 2025 年中的版本,已被新题库取代。第三方实测https://epoch.ai/frontiermath
- AIME 数学68.9%第 109 / 191美国高中数学邀请赛难度的模拟题,是数学竞赛能力的通行标尺。答对比例,满分 100。第三方实测https://epoch.ai/benchmarks
知识与推理
- HLE 终极考试11.5%第 29 / 58Humanity's Last Exam,各学科专家出的刁钻题,专为难住模型而设计。能过四成就是当今顶尖。第三方实测https://lastexam.ai/
- GPQA 科学77.3%第 97 / 197博士级别的物理、化学、生物选择题,题目设计到「谷歌也搜不到答案」。随机乱猜是 25 分。第三方实测https://epoch.ai/benchmarks
- 深度研究48.3%第 13 / 38给一个开放的研究课题,让模型上网查资料写出报告,由人评质量。第三方实测https://drb.futuresearch.ai
- WeirdML45.9%第 69 / 146一批刻意古怪的小型机器学习任务,模型要自己写代码训练并拿到成绩。考的是解决陌生问题的能力。第三方实测https://htihle.github.io/weirdml.html
智能体
- 独立工作时长1.9 小时第 16 / 53METR 的时间跨度:模型能可靠独立完成的任务,换成人来做要花多久。单位是时间,越长说明能独立干越大的活。第三方实测https://metr.org/blog/2025-03-19-measuring-ai-ability-to-complete-long-tasks/
- GDPval 职业任务43.6%第 6 / 22OpenAI 出的一组覆盖多个行业的真实职业任务,由专家把模型的产出与人类专业人士的成果盲比。分数是胜率。第三方实测
- Cybench 网络安全42.0%第 6 / 19夺旗赛(CTF)风格的网络安全题,测攻防能力。第三方实测https://cybench.github.io/
多模态
- 视觉物理预测35.0%第 30 / 36VPCT:看一张小球与斜坡的图,预测球会滚进哪个杯子。测视觉直觉物理。第三方实测https://cbrower.dev/vpct
游戏与谜题
- 国际象棋残局7.0%第 109 / 156给一个棋局找出最佳着法。分数是解对的比例,随机乱走约 5 分。第三方实测https://epoch.ai/benchmarks/chess-puzzles
- 推理游戏谜题21.0%第 39 / 91Epoch 自建的一组推理小游戏,测的是在规则未知的环境里摸索规律。第三方实测https://epoch.ai/benchmarks
- EnigmaEval7.2%第 24 / 51解谜比赛里的复杂谜题,通常要综合图像、文字和多步推理。第三方实测https://labs.scale.com/leaderboard/enigma_eval
- EBR-bench7.9%第 22 / 27Epoch 自建的一项评测,具体口径以 Epoch 榜单页说明为准。第三方实测https://epoch.ai/benchmarks
写作
- 创意写作84.7%第 6 / 60Lech Mazur 的短篇写作评测:按给定元素写故事,由多个模型交叉评分。分数是 0–10 的均分换算成百分制。第三方实测https://github.com/lechmazur/Writing
其他
- Dtbench80.0%第 94 / 198Epoch AI 收录的评测,暂无中文说明。第三方实测https://conceptualreasoning.ai/dtbench
- Lmca37.1%第 64 / 183Epoch AI 收录的评测,暂无中文说明。第三方实测https://conceptualreasoning.ai/lmca
B 站上的 Claude Opus 4.1 实测1 个视频
在 B 站搜「Claude Opus 4.1 测评」↗以上为 B 站搜索结果,按播放量排(站长的视频置顶),内容由各 UP 主提供,不代表本站观点。
