普林斯顿 AI Lab 发布 SSoN 测试:人类准确率 83.3%,模型最高 39.7%
普林斯顿大学 AI Lab 推出空间智能测试 Same Space or Not(SSoN),用 1,000 道题、4,000 张室内图像检验模型的静态跨视角空间理解能力。结果显示,人类准确率为 83.3%,6 个受测视觉语言模型中最高仅 39.7%,其余 5 个甚至低于 25% 的随机基线。研究还发现,17 个视觉编码器全部低于随机线;即便加入提示、三维重建或真实相机参数,模型表现仍未达到可靠水平。
20

