AI EVALUATION, IN CONTEXT.BY EQUALITY MACHINE

LLM Stats

MBPP EvalPlus

MBPP (Mostly Basic Python Problems) is a benchmark of 974 crowd-sourced Python programming problems designed to be solvable by entry-level programmers. EvalPlus extends MBPP with significantly more test cases (35x) for more rigorous evaluation of LLM-synthesized code, providing high-quality and precise evaluation.

评测信息与证据

来源
LLM Stats
发布者
未收录
评测发布日期
未收录
采集日期
2026-08-17
模态
text

本站保留来源报告的结果,不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期;不同运行条件不能直接合并为统一排名。

原始资料

报告成绩 2

按来源中的观察顺序展示,顺序不代表排名。日期保留原始精度。

模型数值单位协议报告日期与口径来源
Llama 3.1 405B Instruct0.886未收录未收录2024-07-23 · model_announcementLLM Stats
Llama 3.3 70B Instruct0.876未收录未收录2024-12-06 · model_announcementLLM Stats