AI 评测与排行榜,分别告诉你什么
分清评测基准、一次评测运行与排行榜,用它们回答各自适合的问题。
OpenCompass Hub
本文提出TransLaw——专为香港判例翻译设计的协同交互式多智能体框架。该框架创新性地将传统翻译流程拆解为翻译、错误标注及校对修正三大子任务,并分配三个智能体协同执行。为评估框架性能,我们构建了大规模双语基准数据集BJC Judgments,对13个开源与商业大语言模型(作为智能体)展开评测。实验结果验证了协同策略的有效性:在多智能体协作显著提升效果的同时,提供了具有参考价值的LLM性能横向对比。通过错误类型学分析,本研究进一步揭示了亟待解决的关键翻译挑战。未来工作将聚焦于优化智能体架构以应对这些挑战,同时开发更全面、低成本的评估基准。
本站保留来源报告的结果,不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期;不同运行条件不能直接合并为统一排名。
本来源记录尚未收录数值成绩。这不表示模型得分为零,也不表示该评测没有公开成绩;请查阅原始资料。