AI EVALUATION, IN CONTEXT.BY EQUALITY MACHINE

LLM Stats

BenchCAD

BenchCAD is a benchmark for programmatic CAD reasoning built from 17,900 execution-verified CadQuery programs spanning 106 industrial part families, roughly half anchored to real ISO, DIN, EN, ASME, and IEC specification tables. It decomposes CAD capability into matched tasks; the Vision2Code task requires models to generate CadQuery code from multi-view renders, scored by voxel IoU against the reference geometry.

评测信息与证据

来源
LLM Stats
发布者
未收录
评测发布日期
未收录
采集日期
2026-08-17
模态
multimodal

本站保留来源报告的结果,不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期;不同运行条件不能直接合并为统一排名。

原始资料

报告成绩 4

按来源中的观察顺序展示,顺序不代表排名。日期保留原始精度。

模型数值单位协议报告日期与口径来源
GPT-5.6 Sol0.706未收录未收录2026-07-09 · model_announcementLLM Stats
GPT-5.6 Luna0.631未收录未收录2026-07-09 · model_announcementLLM Stats
GPT-5.6 Terra0.623未收录未收录2026-07-09 · model_announcementLLM Stats
Claude Sonnet 50.373未收录未收录2026-06-30 · model_announcementLLM Stats