AI EVALUATION, IN CONTEXT.BY EQUALITY MACHINE

Model reports

MMMU

Image preprocessing and chain-of-thought settings affect results.

评测信息与证据

来源
Model reports
发布者
未收录
评测发布日期
2023-11-27
采集日期
未收录
模态
未收录

本站保留来源报告的结果,不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期;不同运行条件不能直接合并为统一排名。

原始资料

报告成绩 4

按来源中的观察顺序展示,顺序不代表排名。日期保留原始精度。

模型数值单位协议报告日期与口径来源
Claude Opus 476.5percentextended thinking up to 64K tokens2025-05-22 · document_publicationClaude Opus 4 and Sonnet 4
Claude Sonnet 474.4percentextended thinking up to 64K tokens2025-05-22 · document_publicationClaude Opus 4 and Sonnet 4
Gemini 2.5 Pro82.0percentsingle attempt2025-06-17 · document_publicationGemini 2.5 Pro
Qwen3.5-397B-A17B85.0percentthinking (temp 0.6, top_p 0.95, top_k 20)2026-02-16 · document_publicationQwen3.5-397B-A17B