AI 评测与排行榜，分别告诉你什么
分清评测基准、一次评测运行与排行榜，用它们回答各自适合的问题。
LLM Stats
Tau2 Airline
TAU2 airline domain benchmark for evaluating conversational agents in dual-control environments where both AI agents and users interact with tools in airline customer service scenarios. Tests agent coordination, communication, and ability to guide user actions in tasks like flight booking, modifications, cancellations, and refunds.
评测信息与证据
- 来源
- LLM Stats
- 发布者
- Sierra
- 评测发布日期
- 2025-06-09
- 采集日期
- 2026-08-17
- 模态
- text
本站保留来源报告的结果，不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期；不同运行条件不能直接合并为统一排名。
原始资料
报告成绩 23
按来源中的观察顺序展示，顺序不代表排名。日期保留原始精度。
| 模型 | 数值 | 单位 | 协议 | 报告日期与口径 | 来源 |
|---|---|---|---|---|---|
| LongCat-Flash-Thinking-2601 | 0.765 | 未收录 | 未收录 | 2026-01-14 · model_announcement | LLM Stats |
| Nova 2 Omni | 0.688 | 未收录 | 未收录 | 2025-12-02 · model_announcement | LLM Stats |
| LongCat-Flash-Thinking | 0.675 | 未收录 | 未收录 | 2025-09-22 · model_announcement | LLM Stats |
| GPT-5.1 | 0.67 | 未收录 | 未收录 | 2025-11-13 · model_announcement | LLM Stats |
| GPT-5.1 Thinking | 0.67 | 未收录 | 未收录 | 2025-11-12 · model_announcement | LLM Stats |
| GPT-5.1 Instant | 0.67 | 未收录 | 未收录 | 2025-11-12 · model_announcement | LLM Stats |
| Nova 2 Pro | 0.652 | 未收录 | 未收录 | 2025-12-02 · model_announcement | LLM Stats |
| Nova 2 Lite | 0.648 | 未收录 | 未收录 | 2025-12-02 · model_announcement | LLM Stats |
| o3 | 0.648 | 未收录 | 未收录 | 2025-04-16 · model_announcement | LLM Stats |
| Claude Haiku 4.5 | 0.636 | 未收录 | 未收录 | 2025-10-15 · model_announcement | LLM Stats |
| GPT-5 | 0.626 | 未收录 | 未收录 | 2025-08-07 · model_announcement | LLM Stats |
| Qwen3-Next-80B-A3B-Thinking | 0.605 | 未收录 | 未收录 | 2025-09-10 · model_announcement | LLM Stats |
| LongCat-Flash-Lite | 0.58 | 未收录 | 未收录 | 2026-02-05 · model_announcement | LLM Stats |
| LongCat-Flash-Chat | 0.58 | 未收录 | 未收录 | 2025-08-29 · model_announcement | LLM Stats |
| Qwen3-235B-A22B-Thinking-2507 | 0.58 | 未收录 | 未收录 | 2025-07-25 · model_announcement | LLM Stats |
| Kimi K2-Instruct-0905 | 0.565 | 未收录 | 未收录 | 2025-09-05 · model_announcement | LLM Stats |
| Kimi K2 Instruct | 0.565 | 未收录 | 未收录 | 2025-07-11 · model_announcement | LLM Stats |
| Nemotron 3 Super (120B A12B) | 0.5625 | 未收录 | 未收录 | 2026-03-11 · model_announcement | LLM Stats |
| Mercury 2 | 0.53 | 未收录 | 未收录 | 2026-02-24 · model_announcement | LLM Stats |
| Nemotron 3 Nano (30B A3B) | 0.48 | 未收录 | 未收录 | 2025-12-15 · model_announcement | LLM Stats |
| Qwen3-Next-80B-A3B-Instruct | 0.455 | 未收录 | 未收录 | 2025-09-10 · model_announcement | LLM Stats |
| GPT-4o | 0.455 | 未收录 | 未收录 | 2024-08-06 · model_announcement | LLM Stats |
| Qwen3-235B-A22B-Instruct-2507 | 0.44 | 未收录 | 未收录 | 2025-07-22 · model_announcement | LLM Stats |