AI EVALUATION, IN CONTEXT.BY EQUALITY MACHINE

LLM Stats

TheoremQA

A theorem-driven question answering dataset containing 800 high-quality questions covering 350+ theorems from Math, Physics, EE&CS, and Finance. Designed to evaluate AI models' capabilities to apply theorems to solve challenging university-level science problems.

评测信息与证据

来源
LLM Stats
发布者
未收录
评测发布日期
未收录
采集日期
2026-08-17
模态
text

本站保留来源报告的结果,不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期;不同运行条件不能直接合并为统一排名。

原始资料

报告成绩 6

按来源中的观察顺序展示,顺序不代表排名。日期保留原始精度。

模型数值单位协议报告日期与口径来源
Qwen2 72B Instruct0.444未收录未收录2024-07-23 · model_announcementLLM Stats
Qwen2.5 32B Instruct0.441未收录未收录2024-09-19 · model_announcementLLM Stats
Qwen2.5-Coder 32B Instruct0.431未收录未收录2024-09-19 · model_announcementLLM Stats
Qwen2.5 14B Instruct0.43未收录未收录2024-09-19 · model_announcementLLM Stats
Qwen2.5-Coder 7B Instruct0.34未收录未收录2024-09-19 · model_announcementLLM Stats
Qwen2 7B Instruct0.253未收录未收录2024-07-23 · model_announcementLLM Stats