聪明世界#164
编程入门
记性131K
便宜$0.30
记性换算成体感:一次能读完一本中篇小说
Gemma 系列的视觉模型 · 按发布时间
共 5 个 · 谷歌的全部模型 →他的房间
电脑
没有公开的编程评测成绩
书架
3 层 · 记忆 131K tokens
黑板
数学与科学推理
日历
知识停在 2024-08
冰箱
支持上下文缓存,能存记忆
敞开的门
开源权重,谁都能进
身世
- 发布日期
- 2025 年 3 月 11 日epoch.ai
- 知识截止
- 2024-08
- 参数量
- 27.43B
- 开放权重
- 是
- 开源许可
- LicenseRef-Gemma
- 上下文窗口
- 131K tokens
- 单次最大输出
- 131K
- 输入价格
- $0.099 / 百万 tokens
- 输出价格
- $0.30 / 百万 tokens
- 模型类型
- 视觉除了文字还能看图片或视频,输出文字
- 支持的输入
- 图像、文字 → 文字
- 工具调用
- 是
- 深度思考
- 否
- 提示缓存
- 是
战绩
- 综合智力
- 130.0
- AIME 数学
- 22.5%
- GPQA Diamond 科学
- 47.7%
- ARC-AGI-2 抽象推理
- 未参评
- Fiction.liveBench 长文本
- 未参评
综合智力、数学、科学、抽象推理与长文本数据来自 Epoch AI(CC-BY 4.0)。写「未参赛」的项目表示该模型没有被这项评测收录, 不代表它做不到——本站不会用估算值填补空缺。
编程战绩(按赛制分列)
- Aider Polyglot4.9%多语言代码编辑测试,看模型能不能按要求准确改动已有代码。榜单已停更在 2025 年底,只覆盖那之前的模型。第三方实测https://aider.chat/docs/leaderboards/#polyglot-leaderboard
- LiveBench 编程分项48.9%LiveBench 每月换新题以避免污染,这一列是它的编程分项均分。第三方实测https://livebench.ai/#/?release=2025-04-25
这些分数不可互相比较。同一个模型换一套评测脚手架就能差二三十分: SWE-bench Verified 的中位数是 75.7,而难度更高的 SWE-Bench Pro 只有 41.0。 广场上的能力条因此显示的是「在同一把尺子下排第几」,而不是分数本身。
全部成绩(按榜单分列)
名次的分母是在同一个榜、由同一类测量方测过的模型数,不是全站模型数。不同榜的分数不可互相比较。
综合
- 综合智力130.0第 164 / 208Epoch Capabilities Index,把十几项学术评测归并成一个总分。想知道「谁最强」,先看这一栏。第三方实测https://epoch.ai/benchmarks
数学
- AIME 数学22.5%第 147 / 191美国高中数学邀请赛难度的模拟题,是数学竞赛能力的通行标尺。答对比例,满分 100。第三方实测https://epoch.ai/benchmarks
- MATH 五级74.0%第 39 / 91MATH 题库里难度最高的一档,高中竞赛水平。老榜单,顶尖模型早已接近满分。第三方实测https://epoch.ai/benchmarks/math-level-5
知识与推理
- GPQA 科学47.7%第 162 / 197博士级别的物理、化学、生物选择题,题目设计到「谷歌也搜不到答案」。随机乱猜是 25 分。第三方实测https://epoch.ai/benchmarks
- CritPt 物理0.0%第 112 / 163研究级别的物理问题,由在职物理学家出题。测的是能不能做前沿科研级的推理。第三方实测
多模态
- 看图猜地点52.0%第 23 / 29GeoBench:给一张街景照片猜出在哪个国家。测的是视觉细节与地理知识。第三方实测https://geobench.org/
游戏与谜题
- 国际象棋残局0.0%第 144 / 156给一个棋局找出最佳着法。分数是解对的比例,随机乱走约 5 分。第三方实测https://epoch.ai/benchmarks/chess-puzzles
写作
- 创意写作79.9%第 30 / 60Lech Mazur 的短篇写作评测:按给定元素写故事,由多个模型交叉评分。分数是 0–10 的均分换算成百分制。第三方实测https://github.com/lechmazur/Writing
其他
- Dtbench52.5%第 179 / 198Epoch AI 收录的评测,暂无中文说明。第三方实测https://conceptualreasoning.ai/dtbench
- Lmca12.3%第 157 / 183Epoch AI 收录的评测,暂无中文说明。第三方实测https://conceptualreasoning.ai/lmca