AI EVALUATION, IN CONTEXT.BY EQUALITY MACHINE

Model reports

OSWorld

Screen resolution, OS image and action space all change results. The Verified and 2.0 revisions are not comparable to the original.

评测信息与证据

来源
Model reports
发布者
未收录
评测发布日期
2024-04-11
采集日期
未收录
模态
未收录

本站保留来源报告的结果,不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期;不同运行条件不能直接合并为统一排名。

原始资料

报告成绩 4

按来源中的观察顺序展示,顺序不代表排名。日期保留原始精度。

模型数值单位协议报告日期与口径来源
Claude Opus 570.57percentmax effort, first-attempt success rate, averaged over 5 runs, 1080p, max 500 action steps2026-07-24 · document_publicationClaude Opus 5
Kimi K358.3percentreasoning=max2026-06-13 · document_publicationKimi K3
Kimi K384.8percentreasoning=max2026-06-13 · document_publicationKimi K3
Qwen3.5-397B-A17B62.2percentthinking (temp 0.6, top_p 0.95, top_k 20)2026-02-16 · document_publicationQwen3.5-397B-A17B