跳到正文
原文
arXiv cs.RO· Huang Huang, Wensi Ai, Ziyu Chen, Youhui Wang, Zijian Du, Yang Liu, Jiaolong Yang, Li Fei-Fei, Jiajun Wu·· 2 小时前精选AI 评分71

RoboRender:面向机器人的视频生成实现视觉仿真到真实迁移

RoboRender: Robot-Oriented Video Generation for Visual Sim-to-Real Transfer

AI 导读

RoboRender 是一个将仿真轨迹转换为逼真 RGB 视频用于策略学习的框架,以仿真深度视频、语言指令和机器人 RGB 掩码视频为条件训练面向机器人的视频生成模型,保留仿真器几何、机器人运动和动作标签,同时合成真实纹理、背景和干扰物。

推荐理由

论文给出以仿真深度视频生成逼真 RGB 数据的方法,并报告真机零样本迁移的成功率对比。

来源:arXiv cs.RO · arxiv.org