清除条件
共 2 条
MarkTechPost10/06模型新模型发布海外

Reka 发布 Rho-1:19B 全模态推理模型,统一文本、视频与机器人动作

Reka 发布 Rho-1 研究预览版,一个从零训练的 19B 全模态推理模型,单一神经网络可理解并生成文本、图像、视频,并输出机器人动作。模型采用双流架构:离散 token 承载文本与高层指令,连续 token 承载图像潜变量、视频帧与机器人动作,两条专家权重流共享注意力与 KV cache。官方测试中,基础版视频生成速度为实时的 0.79 倍,约 6 秒可看,首个片段 7.0 秒;蒸馏版将去噪步数从 99 降至 8,约 1 秒返回 5.3 秒片段。机器人方面在 LIBERO 仿真中输出 7 个动作通道。以上均为…

推荐理由19B 单模型替代多模态流水线,视频生成 0.79x 实时、蒸馏版 1 秒出片,做 Agent 和机器人可关注

The Decoder10/06模型新模型发布海外

Reka AI 发布 190 亿参数全能模型 Rho-1,单模型处理文本图像视频与机器人控制

Reka AI 发布 Rho-1 研究预览版,这是一个 190 亿参数的全能模型,在单一神经网络内处理并生成文本、图像、视频和机器人控制动作。与多数将任务分发给专用模型的系统不同,Rho-1 把所有模态作为 token 放在同一个共享上下文窗口中,无需工具调用或外部模型。模型可实时生成连续视频,并即时响应新指令而无需重启。预测摄像头图像的同一套权重也驱动机器人运动。为绕开机器人训练数据稀缺的问题,Reka AI 构建了一个逆动力学模型,从普通互联网视频中提取控制信号。Rho-1 在 320 块 H100 GPU 上…

推荐理由190 亿参数单模型打通文本、视频与机器人控制,且用互联网视频替代稀缺机器人数据,做具身智能的团队可直接参考其训练思路。