AI 资讯
普林斯顿AI Lab推出SSoN基准，人类准确率83.3%而大模型最高仅39.7%
近日，普林斯顿大学 AI Lab 团队正式推出了一项全新的空间智能基准测试 —— SSoN。该测试旨在剥离动态交互与动作控制的干扰，专门检验人工智能在静态跨视角下的三维空间理解能力。测试结果显示，在“四选一挑异常”的室内空间考题面前，人类的准确率高达83.3%，而受测的主流视觉语言模型 最高 仅有39.7%，甚至多数模型的表现低于四选一的随机基线，暴露出当前 AI 在空间几何推理上的核心短板。
核心测试机制:四张静态图考验空间一致性
SSoN 基准测试的核心任务逻辑非常直观:通过向受测模型提供四张静态的室内场景图像，要求模型准确找出其中不属于同一场景的那张“异常图”。
通过这种方式，测试能够直接检验 AI 是否具备真正的跨视角三维空间整合能力。然而，测试结果显示出巨大的鸿沟:人类能够凭借直觉和生活经验轻松识别出空间逻辑上的不协调，而当前的视觉语言模型在面对此类测试时显得捉襟见肘。
三大核心痛点:几何推理短板明显，解释有效性堪忧
深入分析模型的答题表现，普林斯顿研究团队发现当前大模型在空间智能上暴露出三大显著痛点:
移动与旋转推理成 最大 短板: 在各类几何推理题型中，特别是涉及物体相对位置移动、视角旋转等空间变换的场景下，模型的错误率居高不下，短板极为突出。
知其然而不知其所以然: 在模型少数选对答案的结果中，有近三成的推理解释在逻辑上根本不成立，属于典型的“蒙对答案却说不清理由”。
整体表现不及随机盲猜: 多数受测模型的综合准确率甚至低于四选一的随机基线，说明它们尚未真正建立起稳定的三维空间直觉。
后续干预实验:定向微调与相机参数成破局关键
为了探究如何帮助 AI 跨越这道技术鸿沟，研究团队随后开展了一系列干预实验:
提示引导与三维重建: 实验表明，通过文字提示引导或引入传统的三维重建流程，只能为模型的成绩带来小幅度的提升。
提供真实相机参数: 当直接为模型提供真实的相机参数时，其表现得到了大幅度改善，但即便如此，依然未能实现半数以上题目的可靠答对。
定向监督微调: 令人鼓舞的是，针对该任务开展定向监督微调，可以让模型在未见过的全新房间测试题上，准确率实现近乎翻倍的飞跃。
这一结果充分验证了，大模型的空间一致性判断能力并非不可攻克，完全可以通过有针对性的定向监督训练实现迁移与提升。SSoN 基准的推出，成功剥离了多余的干扰因素，直指当前 AI 在三维空间跨视角整合上的核心缺口，也为全球研究人员后续迭代空间智能技术指明了清晰的前进方向。
本文由 AI 自动聚合与摘要，内容仅供参考。