Navers Lab / Einsia：六个评测分别测什么
按任务、评分和证据理解 Einsia 的六个评测，连接完整 Radar 详情与原始发布资料。
Model reports
Brain-to-Text Benchmark '24
原始来源英文简介
Evaluates 1,200 held-out sentences from one participant (T12). Language model post-processing is part of each system, and results do not establish transfer to another participant or to the different Brain-to-Text '25 dataset.
已收录的评测资料
这条来源记录收录了 4 条数值成绩。来源区分了 4 个模型身份或配置。同一模型可能有多条记录；比较前请核对具体版本、工具和运行预算。 查看成绩及逐条证据 →
- 报告指标
- word_error_rate
- 原始单位
- percent
- 指标方向
- 数值越低越好
从这些资料开始
引用文档及日期（1）
评测信息与证据
- 来源
- Model reports
- 发布者
- 未收录
- 评测发布日期
- 2023-06-01
- 采集日期
- 未收录
- 模态
- 未收录
本站保留来源报告的结果，不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期；不同运行条件不能直接合并为统一排名。
报告成绩 4
按来源中的观察顺序展示，顺序不代表排名。日期保留原始精度。
| 模型 | 数值 | 单位 | 协议 | 报告日期与口径 | 来源 |
|---|---|---|---|---|---|
| DCoND-LIFT | 5.81 | percent | 1,200 competitionHoldOut sentences; aggregate word error rate | 2024-06-01 · document_publication | Brain-to-Text Benchmark '24 leaderboard |
| PyTorch baseline | 9.76 | percent | 1,200 competitionHoldOut sentences; aggregate word error rate | 2024-06-01 · document_publication | Brain-to-Text Benchmark '24 leaderboard |
| TeamCyber submission | 8.26 | percent | 1,200 competitionHoldOut sentences; aggregate word error rate | 2024-06-01 · document_publication | Brain-to-Text Benchmark '24 leaderboard |
| Tyler Benster et al. submission | 8.93 | percent | 1,200 competitionHoldOut sentences; aggregate word error rate | 2024-06-01 · document_publication | Brain-to-Text Benchmark '24 leaderboard |