AI 评测与排行榜，分别告诉你什么
分清评测基准、一次评测运行与排行榜，用它们回答各自适合的问题。
LLM Stats
COLLIE
COLLIE is a grammar-based framework for systematic construction of constrained text generation tasks. It allows specification of rich, compositional constraints across diverse generation levels and modeling challenges including language understanding, logical reasoning, and semantic planning. The COLLIE-v1 dataset contains 2,080 instances across 13 constraint structures.
评测信息与证据
- 来源
- LLM Stats
- 发布者
- 未收录
- 评测发布日期
- 未收录
- 采集日期
- 2026-08-17
- 模态
- text
本站保留来源报告的结果，不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期；不同运行条件不能直接合并为统一排名。
原始资料
报告成绩 10
按来源中的观察顺序展示，顺序不代表排名。日期保留原始精度。
| 模型 | 数值 | 单位 | 协议 | 报告日期与口径 | 来源 |
|---|---|---|---|---|---|
| GPT-5 | 0.99 | 未收录 | 未收录 | 2025-08-07 · model_announcement | LLM Stats |
| o3-mini | 0.987 | 未收录 | 未收录 | 2025-01-30 · model_announcement | LLM Stats |
| o3 | 0.984 | 未收录 | 未收录 | 2025-04-16 · model_announcement | LLM Stats |
| Mistral Medium 3.5 | 0.958 | 未收录 | 未收录 | 2026-04-29 · model_announcement | LLM Stats |
| GPT-4.5 | 0.723 | 未收录 | 未收录 | 2025-02-27 · model_announcement | LLM Stats |
| GPT-4.1 | 0.658 | 未收录 | 未收录 | 2025-04-14 · model_announcement | LLM Stats |
| Mistral Small 4 | 0.629 | 未收录 | 未收录 | 2026-03-16 · model_announcement | LLM Stats |
| GPT-4o | 0.61 | 未收录 | 未收录 | 2024-08-06 · model_announcement | LLM Stats |
| GPT-4.1 mini | 0.546 | 未收录 | 未收录 | 2025-04-14 · model_announcement | LLM Stats |
| GPT-4.1 nano | 0.425 | 未收录 | 未收录 | 2025-04-14 · model_announcement | LLM Stats |