AI百科网 AI教程
AI百科

世界模型分不清看到的和记得的

一个新基准把同一道物理题配成五种不同证据来问,结果视频模型在地球常识题上很准,一旦物理参数被改过,它们还是按老经验作答。读完你会知道「懂物理」该怎么拆开测。

本文目录 · 6 节

把重力调小一半,让一个物体停在本不该停的位置,再问模型刚才发生了什么。它答得又快又笃定,用的是它熟悉的那套物理。

一、发生了什么

InfiniteWorld 是个物理推理基准,10 月 24 日挂出。它的做法不是收集更多视频,而是成对地造视频:同一个场景,系统性地改动物理参数,再配同一道题。

生成流程五步:仿真、场景筛选、成对视频转译、问题构造、输入检查。任务分五类——识别定律、估计参数、时序推理、解析式反事实比较、从观察里归纳规律。

评测设计是这篇最值得看的部分。每道题都有五种匹配的输入设置:只给文本;给仿真视频的有序帧;给打乱顺序的帧;给转译视频的有序帧;给转译视频的打乱帧。同一道题、同样的选项,唯一变化的是证据。

在被评测的一批视频语言模型上,结果指向同一个方向:模型持续偏好熟悉的物理规则。帧对多数模型有帮助,但不同任务上的增益不一致。地球正常条件下的题正确率可以很高,同时对「被改过的动力学」识别很差;观测到的物理明明变了,答案照样回到地球常态。

作者还强调打分要分两层:任务分数与语义一致性。这样才能区分「找对了起作用的因素」和「算对了它的量」,也能区分「答对」和「反复犯同一个错」。

边界:摘要没有列出参评模型的数量和名单,没给数据集规模——多少段视频、多少道题,也没有给任何具体分数。五类任务各自的样本量同样未说明。作者也没有在摘要里声称某个模型解决了「偏好熟悉规则」这个问题,只说了这个偏好被测量出来了。

补一点同主题背景。这是背景,不是论文结论:过去两年视频模型在物理常识评测上分数一直往上走,但很多测试集的画面本身就符合日常经验,答对可以靠记忆而不是推理。这也是为什么「把参数系统地改掉」比「多收几万条视频」更能暴露问题。

二、跟你有什么关系

做世界模型、视频生成的:能预测下一帧,不代表抓住了帧背后的因果。这个基准提供的测法是「换参数后还准不准」。

做具身智能评测的:真机测试贵,先在仿真里成对改参数,是一个便宜的先筛手段。

买视频理解能力的团队:演示视频里一切都是常规物理,看不出这类短板。要测就测反常识片段。

三、怎么判断

读到这儿,可以顺路看 把找靶点改成推状态,同济团队创业 扰动之心完成数千万天使轮,用几何世界模型推演细胞状态而不是筛靶点。读完知道这条路和主流 AI 制药差在哪、判断靠不靠谱要看哪几件事。
  1. 同一道题换证据喂。文本、有序帧、打乱帧各跑一遍。答案跟着证据走才算在看,答案不随证据变,就是在背先验。
  2. 专挑「地球以外」的样本。把重力、摩擦、弹性改掉,看它是否还套用日常经验。
  3. 分开记两个分:说对是哪个因素,和说对数值。前者对后者错,与两者都错,是两种能力缺陷。

四、三个别信的说法

「物理题分数高,说明模型懂物理。」 分数里混着常识记忆。地球常态题答得好,可能只是相似画面见过太多。

「多给几帧总没坏处。」 摘要说帧对多数模型有帮助,但各任务增益不同。有的任务上,画面多了反而干扰判断。

「打乱帧顺序只是消融实验的花活。」 它恰恰是这套设计的关键:同一批像素只改时序,就能看出模型在读画面还是在读顺序。

五、一句话结论

判断一个模型懂不懂物理,不看它答对多少常识题,看它在常识失效时会不会改口。

信息来源

功能与价格以官方公告为准。本文写于 2026 年 10 月 27 日。

下一站 · 起步必读 斯坦福的研究、红海的珊瑚与一个中国模型 从 IFA 的实时生成演示,到斯坦福的对比框架、红海的珊瑚测绘,用的是同一个开源世界模型。这篇讲它被谁拿去用,以及这条出海路径的软肋。
下一篇,直接发你邮箱

每周一封,只发新教程和可复制模板。不发广告,随时退订。

复制规范引用格式,便于转载注明出处
这篇有用吗?