Runway 开源机器人模型 Praxis-1,将视频学习能力用于机器人控制
Runway 开放机器人控制模型 Praxis-1 的权重与源代码,采用允许商用的 Apache 2.0 许可,并发布包含新测试的研究报告。模型利用视频预训练,结合摄像头图像、文本指令和机器人位置信息预测环境变化并生成动作,在 RoboLab-120 上取得 46.2% 成功率,位列 World Action Model 类别第一、总榜第五,测试均由 Runway 自行完成。
Runway 开放机器人控制模型 Praxis-1 的权重与源代码,采用允许商用的 Apache 2.0 许可,并发布包含新测试的研究报告。模型利用视频预训练,结合摄像头图像、文本指令和机器人位置信息预测环境变化并生成动作,在 RoboLab-120 上取得 46.2% 成功率,位列 World Action Model 类别第一、总榜第五,测试均由 Runway 自行完成。
Thinking Machines Lab 开源了 594B 参数模型 Inkling 2 Small,从预训练第一步到最终 RL rollout 均采用原生 4-bit 前向计算,并以 Apache 2.0 许可在 HuggingFace 开放下载。