具身大脑仅开源代码
ReKep
Stanford University、Columbia University美国
GitHub 仓库 huangwl18/ReKep
又称 Relational Keypoint Constraints
- 类别
- 模型 · 具身大脑
- 开放程度
- 仅开源代码
- 发布时间
- 2024 年 9 月
- 开源协议
- 未声明
- 发布方所在地
- 美国
项目简介
斯坦福大学与哥伦比亚大学提出的机器人操作方法:用大视觉模型提取场景关键点,由视觉语言模型(如 GPT-4o)把任务写成关键点之间的时空约束,再用分层优化实时求解末端轨迹,形成能应对外部扰动的闭环操作,无需针对任务训练。仓库是基于 OmniGibson 仿真的演示实现,需配置 OpenAI API;真机感知流程(关键点与掩码跟踪等)未包含,README 和论文附录给出 Franka 真机部署说明。
适配机器人
- Franka