聪明世界#30
编程中等自报
记性1.0M
便宜$4.3
记性换算成体感:一次能读完《哈利·波特》全七部
他的房间
电脑
61.5% · SWE-Bench Pro · 厂商系统卡自评,未经第三方复核
书架
5 层 · 记忆 1.0M tokens
黑板
一块空黑板
日历
知识截止日期未公开
冰箱
支持上下文缓存,能存记忆
门禁
闭源,权重不公开
身世
- 发布日期
- 2026 年 4 月 8 日models.dev
- 知识截止
- 暂无数据
- 参数量
- 体型为估算值,官方从未公布参数量
- 开放权重
- 否
- 开源许可
- 暂无数据
- 上下文窗口
- 1.0M tokens
- 单次最大输出
- 131K
- 输入价格
- $1.25 / 百万 tokens
- 输出价格
- $4.25 / 百万 tokens
- 模型类型
- 视觉除了文字还能看图片或视频,输出文字
- 支持的输入
- 图像、文件、文字、视频 → 文字
- 工具调用
- 是
- 深度思考
- 是
- 提示缓存
- 是
战绩
- 综合智力
- 154.6
- AIME 数学
- 未参评
- GPQA Diamond 科学
- 未参评
- ARC-AGI-2 抽象推理
- 未参评
- Fiction.liveBench 长文本
- 未参评
综合智力、数学、科学、抽象推理与长文本数据来自 Epoch AI(CC-BY 4.0)。写「未参赛」的项目表示该模型没有被这项评测收录, 不代表它做不到——本站不会用估算值填补空缺。
编程战绩(按赛制分列)
- SWE-Bench Pro61.5%同一个思路但难度高得多的版本,题目更长、依赖更复杂。分数普遍比 Verified 低三十分左右,两者不可直接比较。厂商自报https://ai.meta.com/blog/introducing-muse-spark-meta-model-api/
- DeepSWE53.3%SWE-bench Verified 的一个变体测法,用不同的 agent 脚手架跑同一批题。第三方实测https://deepswe.datacurve.ai/
- Terminal-Bench80.0%把模型丢进一个真实终端里让它自己干完一件活——装环境、跑脚本、调错。考的是当「实习生」的本事,不只是写代码。厂商自报https://ai.meta.com/blog/introducing-muse-spark-meta-model-api/
- LiveBench 智能体编程58.5%LiveBench 的智能体编程分项:不是写一段代码,而是像开发者那样多轮改动一个项目。第三方实测https://livebench.ai/#/?release=2026-06-25
- LiveBench 编程分项77.2%LiveBench 每月换新题以避免污染,这一列是它的编程分项均分。第三方实测https://livebench.ai/#/?release=2026-06-25
- WebDev Arena1539 Elo让两个模型各写一个网页,由人来投票选哪个更好,按对战胜负算 Elo 分。考的是前端开发的实际观感,和「能不能修复一个后端 bug」不是一回事。第三方实测https://epoch.ai/benchmarks
这些分数不可互相比较。同一个模型换一套评测脚手架就能差二三十分: SWE-bench Verified 的中位数是 75.7,而难度更高的 SWE-Bench Pro 只有 41.0。 广场上的能力条因此显示的是「在同一把尺子下排第几」,而不是分数本身。
全部成绩(按榜单分列)
名次的分母是在同一个榜、由同一类测量方测过的模型数,不是全站模型数。不同榜的分数不可互相比较。
综合
- 综合智力154.6第 30 / 208Epoch Capabilities Index,把十几项学术评测归并成一个总分。想知道「谁最强」,先看这一栏。第三方实测https://epoch.ai/benchmarks
数学
- ProofBench39.0%第 28 / 79不是算出答案,而是写出完整证明并由人评判。考的是数学推理的严谨程度。第三方实测https://www.vals.ai/benchmarks/proof_bench
知识与推理
- SimpleQA 事实问答57.8%第 15 / 97一问一答的冷门事实题,测的是「知不知道」和「会不会瞎编」。分数低的模型更容易一本正经地胡说。第三方实测https://www.kaggle.com/benchmarks/deepmind/simpleqa-verified
- CritPt 物理15.1%第 28 / 163研究级别的物理问题,由在职物理学家出题。测的是能不能做前沿科研级的推理。第三方实测
智能体
- 经营售货机$6,520第 11 / 89Vending-Bench:让模型经营一台虚拟售货机一整年——进货、定价、付租金。分数是最后账上的钱,考的是长期不犯糊涂。第三方实测https://andonlabs.com/evals/vending-bench
- APEX 专业任务41.9%第 6 / 77投行、律所、咨询公司的真实工作任务,由业内专家出题与评分。第三方实测
- Surface Evolver52.5%第 13 / 30用一款专业的曲面数值软件完成计算任务,考的是驾驭陌生专业工具的能力。第三方实测https://yhenon.github.io/surface-evolver-llm-eval/
多模态
- GBA 游戏评测7.9%第 13 / 23看画面操作掌机游戏,测的是视觉理解加实时决策。第三方实测https://gbaeval.com/model/goose-muse-spark-1-1
其他
- Dtbench94.4%第 16 / 198Epoch AI 收录的评测,暂无中文说明。第三方实测https://conceptualreasoning.ai/dtbench
- Lmca49.9%第 15 / 183Epoch AI 收录的评测,暂无中文说明。第三方实测https://conceptualreasoning.ai/lmca
B 站上的 Muse Spark 1.1 实测1 个视频
在 B 站搜「Muse Spark 1.1 测评」↗以上为 B 站搜索结果,按播放量排(站长的视频置顶),内容由各 UP 主提供,不代表本站观点。
