AI EVALUATION, IN CONTEXT.BY EQUALITY MACHINE

OpenCompass Hub

TransLaw

本文提出TransLaw——专为香港判例翻译设计的协同交互式多智能体框架。该框架创新性地将传统翻译流程拆解为翻译、错误标注及校对修正三大子任务,并分配三个智能体协同执行。为评估框架性能,我们构建了大规模双语基准数据集BJC Judgments,对13个开源与商业大语言模型(作为智能体)展开评测。实验结果验证了协同策略的有效性:在多智能体协作显著提升效果的同时,提供了具有参考价值的LLM性能横向对比。通过错误类型学分析,本研究进一步揭示了亟待解决的关键翻译挑战。未来工作将聚焦于优化智能体架构以应对这些挑战,同时开发更全面、低成本的评估基准。

评测信息与证据

来源
OpenCompass Hub
发布者
City University of Hong Kong
评测发布日期
2025-07-01
采集日期
2026-08-18
模态
未收录

本站保留来源报告的结果,不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期;不同运行条件不能直接合并为统一排名。

原始资料

报告成绩 0

本来源记录尚未收录数值成绩。这不表示模型得分为零,也不表示该评测没有公开成绩;请查阅原始资料。