聪明世界#99
编程偏弱自报
记性1.0M
便宜$2.5
记性换算成体感:一次能读完《哈利·波特》全七部
Gemini 系列的全模态模型 · 按发布时间
共 19 个 · 这里是相邻的 7 个 · 谷歌的全部模型 →他的房间
电脑
54.2% · SWE-Bench Pro · 厂商系统卡自评,未经第三方复核
书架
5 层 · 记忆 1.0M tokens
黑板
数学与科学推理
日历
知识停在 2026-03
冰箱
支持上下文缓存,能存记忆
门禁
闭源,权重不公开
身世
- 发布日期
- 2026 年 7 月 21 日models.dev
- 知识截止
- 2026-03
- 参数量
- 体型为估算值,官方从未公布参数量
- 开放权重
- 否
- 开源许可
- 暂无数据
- 上下文窗口
- 1.0M tokens
- 单次最大输出
- 66K
- 输入价格
- $0.30 / 百万 tokens
- 输出价格
- $2.50 / 百万 tokens
- 模型类型
- 全模态能听声音、也能看图,文字、图、声音一起理解
- 支持的输入
- 声音、图像、文件、文字、视频 → 文字
- 工具调用
- 是
- 深度思考
- 是
- 提示缓存
- 是
战绩
- 综合智力
- 145.1
- AIME 数学
- 71.1%
- GPQA Diamond 科学
- 83.3%
- ARC-AGI-2 抽象推理
- 10.3%
- Fiction.liveBench 长文本
- 未参评
综合智力、数学、科学、抽象推理与长文本数据来自 Epoch AI(CC-BY 4.0)。写「未参赛」的项目表示该模型没有被这项评测收录, 不代表它做不到——本站不会用估算值填补空缺。
编程战绩(按赛制分列)
- SWE-Bench Pro54.2%同一个思路但难度高得多的版本,题目更长、依赖更复杂。分数普遍比 Verified 低三十分左右,两者不可直接比较。厂商自报https://deepmind.google/models/model-cards/gemini-3-5-flash-lite/
- Terminal-Bench54.0%把模型丢进一个真实终端里让它自己干完一件活——装环境、跑脚本、调错。考的是当「实习生」的本事,不只是写代码。厂商自报https://deepmind.google/models/model-cards/gemini-3-5-flash-lite/
- LiveBench 智能体编程45.3%LiveBench 的智能体编程分项:不是写一段代码,而是像开发者那样多轮改动一个项目。第三方实测https://livebench.ai/#/?release=2026-06-25
- LiveBench 编程分项76.1%LiveBench 每月换新题以避免污染,这一列是它的编程分项均分。第三方实测https://livebench.ai/#/?release=2026-06-25
- ALE-Bench765AtCoder 启发式算法竞赛题,考的是给一个没有标准答案的优化问题找出尽量好的解。分数是 137–2177 的评分标度,不是百分比。和「修 bug」是两种能力。第三方实测https://epoch.ai/benchmarks
- MLE-Bench39.2%让模型自己完成一整个机器学习工程任务——处理数据、训模型、调参、提交结果。厂商自报https://deepmind.google/models/model-cards/gemini-3-5-flash-lite/
- WebDev Arena1449 Elo让两个模型各写一个网页,由人来投票选哪个更好,按对战胜负算 Elo 分。考的是前端开发的实际观感,和「能不能修复一个后端 bug」不是一回事。第三方实测https://epoch.ai/benchmarks
这些分数不可互相比较。同一个模型换一套评测脚手架就能差二三十分: SWE-bench Verified 的中位数是 75.7,而难度更高的 SWE-Bench Pro 只有 41.0。 广场上的能力条因此显示的是「在同一把尺子下排第几」,而不是分数本身。
全部成绩(按榜单分列)
名次的分母是在同一个榜、由同一类测量方测过的模型数,不是全站模型数。不同榜的分数不可互相比较。
综合
- 综合智力145.1第 99 / 208Epoch Capabilities Index,把十几项学术评测归并成一个总分。想知道「谁最强」,先看这一栏。第三方实测https://epoch.ai/benchmarks
数学
- FrontierMath26.0%第 69 / 99由职业数学家出的原创难题,连数学博士都要花几小时甚至几天。分数是解出的比例,能过一成就是前沿水平。第三方实测https://epoch.ai/frontiermath
- FrontierMath 第四层0.0%第 67 / 71FrontierMath 里最难的一层,研究级别的问题,绝大多数模型接近零分。第三方实测https://epoch.ai/frontiermath
- AIME 数学71.1%第 103 / 191美国高中数学邀请赛难度的模拟题,是数学竞赛能力的通行标尺。答对比例,满分 100。第三方实测https://epoch.ai/benchmarks
- ProofBench13.0%第 59 / 79不是算出答案,而是写出完整证明并由人评判。考的是数学推理的严谨程度。第三方实测https://www.vals.ai/benchmarks/proof_bench
知识与推理
- GPQA 科学83.3%第 78 / 197博士级别的物理、化学、生物选择题,题目设计到「谷歌也搜不到答案」。随机乱猜是 25 分。第三方实测https://epoch.ai/benchmarks
- ARC-AGI-210.3%第 49 / 108看几组图形样例找规律的智力题,人类轻松、模型艰难。专门测「没见过的题会不会做」。第三方实测https://epoch.ai/benchmarks
- ARC-AGI(第一代)53.5%第 70 / 107ARC-AGI 的第一代题库,已被第二代取代。第三方实测https://arcprize.org/
- CritPt 物理0.0%第 112 / 163研究级别的物理问题,由在职物理学家出题。测的是能不能做前沿科研级的推理。第三方实测
- WeirdML39.0%第 104 / 146一批刻意古怪的小型机器学习任务,模型要自己写代码训练并拿到成绩。考的是解决陌生问题的能力。第三方实测https://htihle.github.io/weirdml.html
游戏与谜题
- 国际象棋残局22.0%第 57 / 156给一个棋局找出最佳着法。分数是解对的比例,随机乱走约 5 分。第三方实测https://epoch.ai/benchmarks/chess-puzzles
- 推理游戏谜题19.0%第 45 / 91Epoch 自建的一组推理小游戏,测的是在规则未知的环境里摸索规律。第三方实测https://epoch.ai/benchmarks
其他
- Dtbench83.5%第 66 / 198Epoch AI 收录的评测,暂无中文说明。第三方实测https://conceptualreasoning.ai/dtbench
- Lmca37.6%第 58 / 183Epoch AI 收录的评测,暂无中文说明。第三方实测https://conceptualreasoning.ai/lmca