AI EVALUATION, IN CONTEXT.BY EQUALITY MACHINE

OpenCompass Hub

Spatial457

Spatial457 聚焦于空间推理的四项核心能力:多物体理解、二维位置识别、三维位置识别,以及三维朝向判断。这些能力对现实世界中复杂场景的认知和理解至关重要。我们构建了一种层级递进的评估结构,将问题划分为 7 类问题类型,覆盖从基础的单物体识别任务,到我们首次提出的更具挑战性的 6DoF 空间推理任务。整个数据集按 5 个难度等级组织,帮助系统性地评估模型在不同层次空间理解任务中的表现。 Spatial457 不仅提升了空间推理评测的覆盖面和挑战性,也为后续研究提供了统一的基准,有助于推动多模态模型在真实世界空间认知任务中的发展。

评测信息与证据

来源
OpenCompass Hub
发布者
Johns Hopkins University
评测发布日期
2025-04-09
采集日期
2026-08-18
模态
multimodal

本站保留来源报告的结果,不代表独立复测。请先核对任务版本、评测协议、分数单位和报告日期;不同运行条件不能直接合并为统一排名。

原始资料

报告成绩 0

本来源记录尚未收录数值成绩。这不表示模型得分为零,也不表示该评测没有公开成绩;请查阅原始资料。