跳到主要内容

🧑‍🔬 世界模型科学家

🧑‍🔬
世界模型科学家
构建模型:表征 → 动力学 → 预测 → 规划 → 评估。
  1. 1
    a01什么是世界模型?45 分钟
    全局图景:世界模型是什么、从何而来,以及为什么现在重要。
  2. 2
    a02观测、状态与 POMDP60 分钟
    从第一性原理区分"你所看到的"与"真实存在的"。
  3. 3
    a03状态空间模型75 分钟
    线性高斯状态空间模型、卡尔曼滤波与信念状态推断——经典基线。
  4. 4
    a04表征学习60 分钟
    什么样的表征才"好到可以在其中做预测"。
  5. 5
    a05潜在动力学75 分钟
    学习紧凑的隐状态并预测其演化,而不是逐像素预测。
  6. 6
    a06RSSM90 分钟
    循环状态空间模型——Dreamer 的确定性 + 随机性骨干。
  7. 7
    a07World Models(2018)45 分钟
    Ha & Schmidhuber 的开山论文:VAE + MDN-RNN + 控制器,在"梦境"中训练。
  8. 8
    a08Dreamer90 分钟
    在想象中做 Actor-Critic:DreamerV1/V2/V3 与大规模 MBRL 的工程实践。
  9. 9
    a09基于世界模型的规划75 分钟
    MPC、CEM、MPPI 与隐空间规划——模型变成了环境。
  10. 10
    a10视频世界模型75 分钟
    基于扩散/流匹配的生成、交互式视频世界,以及闭环漂移。
  11. 11
    a10b交互式世界模型60 分钟
    从视频生成到可以玩的世界:GameNGen、DIAMOND、Genie——可控性、实时性与一致性。
  12. 12
    a11世界模型 + 策略75 分钟
    闭环:在学习到的模型内部做策略与价值学习(TD-MPC、Dreamer)。
  13. 13
    a12OOD、漂移与评估60 分钟
    当世界模型"撒谎":分布外失效、漂移、校准与评估协议。
  14. 14
    a13毕业项目:构建你自己的空间世界模型项目制
    端到端项目:定义状态 / 转移 / 动作 / 评估,然后亲手把它造出来。
░░░░░░░░░░░░░░░░░░░░ 0%0/14 已完成

为什么是这个顺序​

这条路线遵循真实的研究流程,而不是教科书目录:

  1. 状态的基础(a01–a03):世界模型到底是什么,观测与状态的区别,以及你将要超越、也会借鉴的经典状态空间基线。
  2. 表征与动力学(a04–a08):先学一个值得在其中做预测的潜空间,再走一遍 RSSM 谱系:World Models 2018 → PlaNet → Dreamer。
  3. 使用模型(a09–a11,含 a10b):规划(MPC / CEM / MPPI)、视频尺度的预测、可以实时交互的世界模型,以及用策略闭环。
  4. 信任模型(a12):OOD、漂移与评估。一个无法审计的世界模型是一种负担。
  5. 毕业项目(a13):亲手构建一个,把状态 / 转移 / 动作 / 评估都显式写出来。

完成标准​

当你能在一个新环境上复现 Dreamer / TD-MPC 级别的系统,并按 Lab 10 的规范为它写出标准化评估报告时,这条路线就完成了。职业方向:世界模型研究员 / 研究工程师。

不适合你?并行的空间与具身工程师路线构建的是系统而不是模型:地基相同,出口不同。