← 机器人智能体 / 程序与空间接口

正式发表 / Robot Agentic

ReKep

ReKep: Spatio-Temporal Reasoning of Relational Keypoint Constraints for Robotic Manipulation

CoRL · 2024

快照 2026-10-28 · 引用:Semantic Scholar / arXiv 关联记录 · 代码核验依据 ↗

关键框架 FRAMEWORK
关系关键点约束与分层优化ReKep · 项目页 ↗

从视觉提取关键点,由视觉语言模型生成约束函数,分层优化求解子目标与动作。

  1. 01提取三维关键点
  2. 02生成关系约束
  3. 03分层优化执行
ReKep关系关键点约束与分层优化
关系关键点约束与分层优化

从视觉提取关键点,由视觉语言模型生成约束函数,分层优化求解子目标与动作。 来源 ↗ · 打开完整图片 ↗

THE IDEA

它在解决什么

将关键点之间的时空关系写成约束,用分层优化求解机器人动作。

WHY READ IT

为什么放在这条路线

提供紧凑、可解释的任务表示,将语义推理连接到几何执行。

当前阶段程序与空间接口 ↗

高层语言如何变成可执行的约束与接口?

READ WITH A QUESTION

读的时候,留意什么

约束表达正确不代表感知正确;关注关键点跟踪和在线重规划的边界。

我的阅读笔记

LOCAL NOTES
笔记仅保存在当前浏览器