AI EVALUATION, IN CONTEXT.BY EQUALITY MACHINE

LLM Stats

Multi-SWE-Bench

A multilingual benchmark for issue resolving that evaluates Large Language Models' ability to resolve software issues across diverse programming ecosystems. Covers 7 programming languages (Java, TypeScript, JavaScript, Go, Rust, C, and C++) with 1,632 high-quality instances carefully annotated by 68 expert annotators. Addresses limitations of existing benchmarks that focus almost exclusively on Python.

评测信息与证据

来源
LLM Stats
发布者
未收录
评测发布日期
未收录
采集日期
2026-08-17
模态
text

本站保留来源报告的结果,不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期;不同运行条件不能直接合并为统一排名。

原始资料

报告成绩 6

按来源中的观察顺序展示,顺序不代表排名。日期保留原始精度。

模型数值单位协议报告日期与口径来源
MiniMax M2.70.527未收录未收录2026-03-18 · model_announcementLLM Stats
MiniMax M2.50.513未收录未收录2026-02-12 · model_announcementLLM Stats
MiniMax M2.10.494未收录未收录2025-12-23 · model_announcementLLM Stats
Kimi K2-Thinking-09050.419未收录未收录2025-09-05 · model_announcementLLM Stats
MiniMax M20.362未收录未收录2025-10-27 · model_announcementLLM Stats
Qwen3-Coder 480B A35B Instruct0.258未收录未收录2025-01-31 · model_announcementLLM Stats