理解财务文档问答、数值推理与证据检索,避免把它们等同于投资表现。
金融评测考查涉及金融语言、文档或工作流程的任务。回答公司报告中的问题,可能需要找到正确期间、读取表格,并按指定公式组合数字。FinQA 侧重财务报告中的数值推理,FinanceBench 关注有文档依据的金融问题。这些任务有助于观察分析行为,但不衡量未来投资收益。
搜索并筛选这些评测
分清评测基准、一次评测运行与排行榜,用它们回答各自适合的问题。
按顺序核对任务版本、指标、工具、预算、不确定性和报告来源的实用方法。
先把智能体的工作对应到可验证结果,再选择一组覆盖不同失败方式的评测。