OpenCompass Hub

GitGoodBench

GitGoodBench Lite是一个包含900个样本的子集，用于评估AI智能体在解决git任务方面的性能（参见支持的场景）。数据集中的样本在编程语言Python、Java和Kotlin以及样本类型合并冲突解决和文件提交语法之间均匀分布。因此，该数据集包含每种样本类型和编程语言各150个样本。