VLA 模型开源
RT-1
Google Research、Everyday Robots美国
GitHub 仓库 google-research/robotics_transformer
又称 Robotics Transformer、Robotics Transformer 1
- 类别
- VLA 模型
- 开放程度
- 开源
- 发布时间
- 2022 年 12 月
- 开源协议
- Apache-2.0
- 发布方所在地
- 美国
项目简介
RT-1 是 Google 的端到端机器人控制模型:用 FiLM 调制的 EfficientNet 编码图像和指令,经 TokenLearner 压缩后由 Transformer 直接输出离散化动作。官方仓库含模型代码、动作分词器和测试工具,以 TensorFlow SavedModel 格式提供三个检查点:700 项任务主模型、加入 Kuka 数据的多机器人模型和仿真真机联合训练模型,现已归档。
- 规模
- 主检查点在 700 项任务的数据上训练
适配机器人
- EDR
- Kuka