跳到正文

#仿真/Sim2Real

今日 1 条
8月5日周三
  1. HF blog71

    MiniWorld:从零训练视频世界模型的可复现框架

    MiniWorld 是一个从零训练流式视频世界模型的可复现框架,采用块因果视频扩散 Transformer,在预训练 Video VAE 的潜空间中以 Flow Matching 训练,并基于 Diffusion Forcing 使用分块非递减噪声调度和两阶段继续训练。

    推荐理由:MiniWorld 给出从零训练流式视频世界模型的完整方案与代码,读者可据此评估单机 8 卡复现的可行性。

  2. HF blog53

    Push-Wiper:用分段推扫轨迹实现跨污渍与表面的通用机器人清洁

    Push-Wiper 将黏性污渍清洁重构为聚集问题,用海绵通过分段推扫轨迹逐步聚集污渍,再经后处理分离聚集物并实现海绵自清洁。该方法用 Diffusion Policy 生成自适应推扫动作序列,经任意表面位姿插值器(ASPI)和力位混合控制器执行,清洁得分(去除污渍面积百分比)最高比基线方法高 130%。

7月31日周五
7月30日周四
7月29日周三
  1. genesis releases60

    Genesis 发布 v1.3.0,可微刚体仿真转正并新增扭转与滚动摩擦

    Genesis 发布 v1.3.0,可微刚体仿真不再被视为实验性功能,刚体求解器新增扭转摩擦与滚动摩擦,用于缩小仿真到真实的差距。新版本还在 RigidEntity.attach 中加入显式安装变换、为接触传感器加入连杆过滤,并修复了相机视频录制、SPH 流体浮力、场景重置后相机传感器刷新等问题。

    推荐理由:Genesis v1.3.0 把可微刚体仿真移出实验状态,并新增扭转与滚动摩擦,读者可据此判断仿真到真实迁移的建模能力变化。

7月28日周二
7月27日周一
  1. HF blog74

    NVIDIA 发布 Cosmos-H-Dreams 实时生成式手术机器人仿真器

    NVIDIA 发布 Cosmos-H-Dreams,一个动作条件驱动的实时生成式手术机器人仿真器,由 Cosmos-H-Surgical-Simulator 蒸馏为因果少步学生模型,并通过 FlashDreams 推理库在单张 RTX PRO 6000 上运行。

    推荐理由:原文给出从离线世界模型到实时交互仿真的蒸馏与推理链路,可了解手术机器人策略评估环境的构建方式。

7月22日周三
  1. NVIDIA blog robotics71

    NVIDIA 开源首个 GPU 加速医疗物理仿真框架

    NVIDIA 开源 Medical Physics Simulation 框架,作为 Isaac for Healthcare 内的 GPU 加速能力,用于建模解剖结构与器械交互、生成难以采集的场景并训练或评估机器人策略。

    推荐理由:原文给出框架的仿真能力、开源入口与并行训练数据,读者可据此判断医疗机器人仿真工作流的复用方式。

7月21日周二
7月18日周六
  1. genesis releases22

    Genesis v1.2.3 发布:新增椭圆摩擦锥高阻抗静态摩擦模型

    Genesis 发布 v1.2.3,新增带高阻抗选项的椭圆摩擦锥,用于高保真静态摩擦建模,并改进 fp32 精度下约束求解器的收敛性。该版本还支持批量渲染器中的异构实体、射线传感器仅距离模式,并修复 USD、MJCF 解析及质量矩阵等问题,非批量 CPU 仿真提速最高 30%。

7月16日周四
  1. NVIDIA dev blog robotics34

    NVIDIA 用 AI 智能体加速开发轻量级 USD 运行时

    NVIDIA 提出用 AI 智能体加速开发轻量级 OpenUSD 运行时。OpenUSD 是面向物理 AI 的开放可扩展框架,提供通用场景描述语言,可将 CAD 数据、仿真资产和真实遥测数据整合到统一的物理精确视图中。此前构建 USD 实现通常需要改造大型现有代码库,即便团队只需特定内存占用。

7月11日周六
  1. genesis releases38

    Genesis v1.2.2 发布:新增高吞吐触觉传感器系列,非凸碰撞检测更稳健

    Genesis 发布 v1.2.2,新增面向强化学习灵巧策略训练的高吞吐真实触觉传感器系列,并支持迟滞、失效触觉单元、探针增益等噪声选项。非凸碰撞检测鲁棒性提升,性能与凸分解相当,修复了虚假深层接触与薄壳穿透问题;启用 noslip 后处理对所有后端的减速降至 20% 以内。

7月10日周五
  1. HF blog71

    RynnWorld-Teleop:面向数字遥操作的动作条件世界模型

    论文提出 RynnWorld-Teleop,一种动作条件世界模型,用生成式世界模型替代实体机器人实现数字遥操作,将操作者手部姿态流转化为机器人视角的高保真视频,并作为与本体无关的动作标签经重定向迁移到任意目标机器人。

    推荐理由:论文提出用生成式世界模型替代实体机器人采集数据,读者可了解数字遥操作如何解耦硬件约束并生成可迁移轨迹。

7月8日周三
  1. HF blog67

    Image2Sim:用生成式神经模拟器扩展具身导航

    Image2Sim 是一个实时神经仿真框架,可从带位姿的 RGB-D 图像序列构建可交互的具身导航环境。相关代码与具体使用说明已在 GitHub 页面发布。作者感谢 Gim Hee Lee 教授的指导,以及阿里巴巴、香港科技大学的 Yinghao Xu 教授提供的 64 张 H20 GPU 支持。

    推荐理由:Image2Sim 用带位姿的 RGB-D 序列生成可交互导航环境,读者可了解神经仿真如何降低具身导航的数据门槛。

7月7日周二
  1. HF blog62

    GaP:面向变异性自动化任务的图即策略多智能体自学习框架

    GaP 是一种图即策略(Graph-as-Policy)多智能体编码框架,从模块化开放机器人技能库(MORSL)生成含感知、规划和控制节点的有向计算图,并构建内部仿真环境并行演练不同图以迭代优化结构与参数,提升成功率和吞吐量。

    推荐理由:论文提出用多智能体编码生成计算图并并行仿真迭代,为变异性自动化任务提供可复用的可靠性思路。

  2. HF blog62

    SVA:将树搜索蒸馏为动作评估以增强冻结 VLA 模型

    论文提出 SVA(Search, Value, and Act)框架,将动作生成与后果评估解耦,为冻结的 VLA 策略引入长期后果感知。SVA 先用蒙特卡洛树搜索在仿真中探索 VLA 输出分布并收集带经验回报的轨迹,再蒸馏为轻量 Q 值模型,部署时由冻结 VLA 提出多个候选、评估器选出不确定性正则化后 Q 值最高的动作,无需仿真器。

    推荐理由:论文提出冻结 VLA 的动作评估框架,用树搜索蒸馏 Q 值模型,读者可了解测试时扩展的替代思路。

7月3日周五
  1. genesis releases22

    Genesis v1.1.1 发布:提升刚体碰撞检测鲁棒性

    Genesis 发布 v1.1.1,主要提升凸与非凸几何体刚体碰撞检测的鲁棒性,关闭凸分解以获得更高保真度不再被视为实验性功能。该版本修复了 GPU 仿真非确定性问题、凹几何体非凸碰撞检测,并改进基于扰动的多接触凸-凸碰撞检测。此外还去重 GLB 共享材质纹理、跳过彩色分割图灰度转换,并支持向 RigidSolver.set_base_links_ 传入切片环境掩码。

7月2日周四
6月30日周二
6月19日周五
6月17日周三
  1. IsaacLab releases62

    Isaac Lab 3.0 Beta 2 发布,强化多后端物理与 Newton 支持

    Isaac Lab 3.0 Beta 2 发布,作为 3.0 beta 的稳定化版本,兼容 Isaac Sim 6.0.0,扩展了 Newton 支持(VBD、求解器耦合、Kamino、崎岖地形、传感器)与多后端物理,并简化训练和安装命令。

    推荐理由:Isaac Lab 3.0 Beta 2 汇总了多后端物理、Newton 与无 Kit 工作流的改动,可据此判断升级与迁移成本。

6月10日周三
6月8日周一
6月4日周四
6月3日周三
5月27日周三
5月15日周五
4月9日周四
4月8日周三
3月18日周三
  1. IsaacLab releases74

    Isaac Lab 3.0 Beta 发布:多后端物理架构与 Warp 原生数据管线

    Isaac Lab 3.0 Beta 发布,基于 Isaac Sim 6.0 做架构重构,引入多后端物理、可插拔渲染器与 Warp 原生数据管线。新增 isaaclab_newton 扩展支持 MuJoCo-Warp 求解器与无 Kit 模式,并给出四元数 XYZW 顺序、.data.* 返回 wp.array 等破坏性变更及迁移工具。

    推荐理由:Isaac Lab 3.0 Beta 的架构改动与迁移工具清单,可帮助现有用户评估升级成本与后端切换路径。

3月17日周二
  1. NVIDIA dev blog robotics62

    Newton 1.0 GA 为工业机器人新增接触密集操作与行走能力

    NVIDIA 博客介绍 GPU 加速的开源仿真器 Newton 1.0 GA,为工业机器人新增接触密集操作与行走能力。文章指出,运动与操作任务需要仿真器处理接触力、可变形物体等复杂动力学,多数引擎在速度与真实感之间取舍,而 Newton 的设计目标是兼顾两者。

    推荐理由:Newton 1.0 GA 面向工业机器人补充接触密集操作与行走能力,读者可了解其仿真定位与开源进展。

3月13日周五
  1. NVIDIA dev blog robotics40

    NVIDIA Warp:为 AI 构建加速、可微的计算物理代码

    NVIDIA Warp 用于为 AI 构建加速、可微的计算物理代码,面向从人工驱动转向 AI 驱动的计算机辅助工程(CAE)流程。物理基础模型跨几何与工况泛化,依赖大量高保真、符合物理规律的数据,而近期 CFD 代理模型的缩放律工作表明仿真生成数据在其中起关键作用。

2月11日周三
  1. NVIDIA dev blog robotics62

    R²D²:用 NVIDIA Isaac Lab 扩展多模态机器人学习

    NVIDIA 开发者博客介绍 R²D²,一种借助 NVIDIA Isaac Lab 扩展多模态机器人学习的方法。文章指出真实世界采集数据昂贵、缓慢且危险,难以安全训练高速碰撞或硬件故障等风险场景,且真实数据通常偏向正常条件。原文正文在此处截断,未给出 R²D² 的具体方法、数据规模或实验结果。

    推荐理由:介绍 R²D² 如何借助 Isaac Lab 在仿真中扩展多模态机器人学习,可了解其应对真实数据采集难题的思路。

1月9日周五
  1. NVIDIA dev blog robotics62

    NVIDIA 用仿真到真实工作流构建 Isaac GR00T N1.6 通用人形能力

    NVIDIA 发布 Isaac GR00T N1.6,用于构建人形机器人的通用能力,覆盖感知、规划与全身控制。该工作流将仿真、控制与学习统一起来,让机器人在进入真实世界前先习得复杂技能。

    推荐理由:NVIDIA 官方给出 GR00T N1.6 的仿真到真实工作流,读者可了解人形机器人通用能力训练如何统一仿真、控制与学习。

1月8日周四
1月6日周二
  1. NVIDIA dev blog robotics62

    NVIDIA 推出 Isaac Lab-Arena,简化仿真中的通用机器人策略评测

    NVIDIA 发布 Isaac Lab-Arena,用于在仿真中简化通用机器人策略的评测。通用机器人策略需跨多种任务、本体和环境运行,需要可扩展、可重复的仿真评测,而大规模评测搭建繁琐且依赖人工,开发者往往要自建高开销的定制基础设施,任务库在复杂度和多样性上也有限。

    推荐理由:Isaac Lab-Arena 面向通用机器人策略的仿真评测,读者可了解其如何降低大规模评测的搭建成本。