清华大学 / 字节跳动 Research / 中科院自动化所 等
RoboVLMs（KosMos P.H.）
可商用 7/8 已核实
8 个必填字段里有 1 个待核实，前台用徽标标出、不用默认值填空。已核实字段的来源列在下方。
基本事实
- 发布日期
- 2024-12 1 来源
- 参数量
- 待核实 0 来源
- 架构
- VLM + 动作专家 0 来源
- 许可证
- Apache-2.0（代码与模型卡） 2 来源
- 商用
- 可商用 0 来源
- 权重
- huggingface.co ↗ 1 来源
- 代码
- github.com ↗ 1 来源
- 论文
- arxiv.org ↗ 0 来源
- 输入模态
- rgb · language 0 来源
- 动作空间
- 末端位姿增量 + 夹爪 0 来源
- 跨本体
- Open X-Embodiment 预训练；CALVIN / SimplerEnv / 真机 0 来源
- 预训练数据（小时）
- 待核实 0 来源
- 目标形态
- 单臂 0 来源
架构 · 把任意 VLM 变成 VLA 的框架；表现最好的是 KosMos 主干 + 策略头；Nature Machine Intelligence 2026
来源 · 2 条来源
release_date,license,arch_notes,code_url https://github.com/Robot-VLAs/RoboVLMs 官方页面 · 抓取 2026-09-05 · 尚未存快照 README：initial release 12/11/24；Apache-2.0 license；KosMos VLM backbone；Nature Machine Intelligence
weights_url,license https://huggingface.co/api/models/robovlms/RoboVLMs 模型仓库页 · 抓取 2026-09-05 · 尚未存快照 模型卡 license: apache-2.0；checkpoints kosmos_ph_oxe-pretrain.pt 等
活性信号
每天从 GitHub、Hugging Face、ModelScope 公开接口抓取的数字。只记录，不评价。 · 抓取于 2026-10-31
GitHub stars
491
+6 / 30 天
近 90 天提交
0
最近推送 201 天前
HF 近 30 天下载
0
累计 0 · 6 likes
权重最后更新
2025-01-15
655 天前
ModelScope未找到同名镜像（按仓库名搜索）
Hugging Facerobovlms/RoboVLMs
stars · 近 30 天
公开基准分数
照抄来源；各论文协议不同。带备注的完整表见基准分数页。
| 基准 | 子集 | 分数 | 来源 |
|---|---|---|---|
| CALVINKosMos P.H. (KosMos-2 backbone, policy-head, history) | abc_d | 4.3 avg_len | 论文 · CALVIN results table (paper Extended Table 2; identical in README), row 'KosMos P.H.' train ABC test D, column Avg. Len. |
| CALVINKosMos P.H. (KosMos-2 backbone, policy-head, history) | abcd_d | 4.5 avg_len | 论文 · CALVIN results table (paper Extended Table 2; identical table in GitHub README), row 'KosMos P.H.' train ABCD test D, column Avg. Len. |
| SimplerEnv · Google RobotKosMos P.H. (KosMos-2 backbone, policy-head, history) | move_near | 0.9 fraction | 论文 · Extended Table 3(d), row 'RoboVLMs (Ours)', column 'Move Near / Average' |
| SimplerEnv · Google RobotKosMos P.H. (KosMos-2 backbone, policy-head, history) | open_close_drawer_avg | 0.6 fraction | 论文 · Extended Table 3(d), row 'RoboVLMs (Ours)', column 'Open/Close Drawer / Average' |
| SimplerEnv · Google RobotKosMos P.H. (KosMos-2 backbone, policy-head, history) | open_top_drawer_and_place_apple | 0.3 fraction | 论文 · Extended Table 3(d), row 'RoboVLMs (Ours)', column 'Open Top Drawer and Place Apple / Average' |
| SimplerEnv · Google RobotKosMos P.H. (KosMos-2 backbone, policy-head, history) | pick_coke_can_avg | 1 fraction | 论文 · Extended Table 3(d), row 'RoboVLMs (Ours)', column 'Pick Coke Can / Average' |
| SimplerEnv · WidowX (Bridge)KosMos P.H. (KosMos-2 backbone, policy-head, history) | put_carrot_on_plate | 0.4 fraction | 论文 · Extended Table 3(c), row 'RoboVLMs (Ours)', task 'put carrot on plate', column 'final' |
| SimplerEnv · WidowX (Bridge)KosMos P.H. (KosMos-2 backbone, policy-head, history) | put_eggplant_in_yellow_basket | 1 fraction | 论文 · Extended Table 3(c), row 'RoboVLMs (Ours)', task 'put eggplant in yellow basket', column 'final' |
| SimplerEnv · WidowX (Bridge)KosMos P.H. (KosMos-2 backbone, policy-head, history) | put_spoon_on_towel | 0.5 fraction | 论文 · Extended Table 3(c), row 'RoboVLMs (Ours)', task 'put spoon on towel', column 'final' |
| SimplerEnv · WidowX (Bridge)KosMos P.H. (KosMos-2 backbone, policy-head, history) | stack_green_block_on_yellow_block | 0.2 fraction | 论文 · Extended Table 3(c), row 'RoboVLMs (Ours)', task 'stack green block on yellow block', column 'final' |
部署配方
还没有配方。我们只发布在租用 GPU 上真正跑通、带实测延迟的步骤；这个模型还没轮到。
记录历史
2026-09-05
来源抓取
release_date,license,arch_notes,code_url · weights_url,license
延迟与成本
成本 = 延迟 p50 ÷ 1000 × 租价 ÷ 3600 × 1000
| 硬件 | p50 ms | p95 ms | 峰值显存 | 每千次推理成本 ¥ | 样本 |
|---|---|---|---|---|---|
NVIDIA RTX 4090 ¥1.68/h · 共绩算力 (2026) | — | — | — | — 无延迟数据 | 无数据 |
NVIDIA RTX 5090 ¥2.4/h · 润云 2.4 / 共绩 2.5 / 并行智算云 2.98 (2026) | — | — | — | — 无延迟数据 | 无数据 |
NVIDIA A100 80GB 无租价 | — | — | — | — 无延迟数据 | 无数据 |
NVIDIA Jetson AGX Thor 无租价 | — | — | — | — 无延迟数据 | 无数据 |
NVIDIA H100 80GB 无租价 | — | — | — | — 无延迟数据 | 无数据 |
NVIDIA A800 80GB 无租价 | — | — | — | — 无延迟数据 | 无数据 |
还没有这个模型的延迟测量 · 数据来自文献、维护者实测或众包 CLI 上传；三者都还没有。
适配本体
只有有证据的格子才上色。橙点表示厂商声明的目标形态，那是声明，不是核实过的适配。
| Unitree G1 | Unitree H1 | 智元 精灵 G1 | 松灵 Piper 机械臂 | SO-101 | Franka FR3 / Panda | Fourier GR-2 | WidowX 250 S | Google Robot（Everyday Robots） | ALOHA 2 / Cobot Magic（双臂） | Galaxea R1 Pro | Franka Emika Panda | |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| RoboVLMs（KosMos P.H.） |
图例 官方声明支持社区复现成功理论可微调不支持未知 厂商声明的目标形态 2 / 12 格有明确状态
复现记录
这个模型在你的机器人上跑起来了吗？报一条，附链接（日志、视频或仓库）。记录由维护者核验；核验通过的“跑通”或“微调后跑通”会把矩阵格子升为“社区复现”，你的链接就是证据。可匿名；只存下面这几个字段。
这个模型还没有核验通过的复现记录。
方向清晰，判断有据。