雷峰网·· 4 天前
浙大团队提出SpaceCast-Bench基准:VLM预测性空间推理最高准确率仅58.0%
VLM 在预测性空间推理上的缺口还有多大?21 个模型,最高准确率仅 58.0%
AI 导读
浙江大学庄越挺团队提出SpaceCast-Bench基准,专门评估视觉语言模型(VLM)的预测性空间推理能力。评测21个模型发现最高准确率仅为58.0%,且6个空间专项模型表现接近随机水平,低于通用模型。研究表明,提供显式3D元数据能显著提升闭源模型性能,而依赖生成式图像作为证据则效果不稳定且易引入误差。
来源:雷峰网 · leiphone.com