← 视觉 · 语言 · 动作 / 数据与经验更新示范分段、变换与执行CoRL 2023 · Fig. 2 · p.3 ↗
正式发表 / Vision–Language–Action
MimicGen
MimicGen: A Data Generation System for Scalable Robot Learning using Human Demonstrations
CoRL · 2023
关键框架 FRAMEWORK
把人类示范分成对象中心子任务,将片段按新场景的对象位姿变换并执行,保留成功轨迹扩展训练数据。
- 01解析对象中心片段
- 02适配新场景
- 03执行并筛选成功轨迹
THE IDEA
它在解决什么
把人类示范分成对象中心子任务,将片段按新场景的对象位姿变换并执行,保留成功轨迹扩展训练数据。
WHY READ IT
为什么放在这条路线
与直接收集更多遥操作不同,MimicGen 复用已有运动片段;它为 RoboCasa 的示范生成提供接口。
READ WITH A QUESTION
读的时候,留意什么
假设已知子任务顺序和对象位姿,并需要环境执行与成功判定;不是任意视频直接变动作。
我的阅读笔记
LOCAL NOTES笔记仅保存在当前浏览器