← 世界模型 / 生成与轨迹规划语言分解与组合视频扩散RoboDreamer · 原文 Fig. 3 · p.3 ↗
正式发表 / World Models
RoboDreamer
RoboDreamer: Learning Compositional World Models for Robot Imagination
ICML · 2024CCF A
关键框架 FRAMEWORK
把语言任务拆为动作与关系成分,组合各条件的扩散分数,生成机器人完成任务的视频计划。
- 01拆分动作与关系
- 02组合条件扩散
- 03将视频转成动作
THE IDEA
它在解决什么
把语言任务拆为动作与关系成分,组合各条件的扩散分数,生成机器人完成任务的视频计划。
WHY READ IT
为什么放在这条路线
关注世界模型对未见过的语义组合能否泛化,补充单一文本条件生成器的对照。
READ WITH A QUESTION
读的时候,留意什么
组合泛化仍依赖已见成分与数据覆盖;视频计划必须经逆动力学等接口才能成为动作。
我的阅读笔记
LOCAL NOTES笔记仅保存在当前浏览器