SpaceDG

SpaceDG是一个用于评估在视觉退化条件下空间智能表现的基准项目。它通过物理基础的合成管道将九种退化类型嵌入到3D高斯点云渲染中，生成了约100万个问答对，覆盖近1000个室内场景。此外，该项目还提供了一个经过人工验证的基准测试集SpaceDG-Bench，包含11个推理类别和9种退化类型的1,102个问题（超过10,000个VQA实例）。SpaceDG适用于需要评估多模态大语言模型在面对诸如运动模糊、低光照等真实世界视觉退化情况下的性能的场景。通过分析发现，视觉退化不仅影响机器模型的空间推理能力，也降低了人类的表现，强调了设计能够处理多种视觉输入的鲁棒性模型的重要性。