怎样比较、选型与做 sim-to-sim

固定asset / dt / gains / reset

→

测物理free fall / contact / joint

→

测系统throughput / sensors / tooling

→

决策error-cost frontier

1. 统一比较表

维度	Isaac Sim 6.0.1	Newton 1.5.1	Genesis World 1.3.3
产品层级	完整仿真/数字孪生平台	物理引擎，可独立或嵌入	完整独立仿真平台
场景核心	OpenUSD stage + schemas	ModelBuilder → Model arrays	Scene → Simulator → entities
物理核心	默认 PhysX；实验性 Newton	MuJoCo、Featherstone、XPBD、VBD、Kamino、MPM 等可插拔 solver	Rigid、MPM、FEM、PBD、SPH、Stable Fluid + coupler
运行时数据	Fabric + Physics Tensors	Warp Model/State/Control/Contacts arrays	per-solver state + batched tensor API
渲染/传感器	RTX、多类工业传感器、Replicator	轻量 viewer/export；常与 Isaac Lab/Sim 组合	Rasterizer、BatchRenderer、Nyx、物理 sensors
机器人学习	通过 Isaac Lab 的完整 env/task 生态	高吞吐、multi-world、kit-less；可接 Isaac Lab	scene.build(n_envs)、训练示例与 PyTorch 集成
可微分	取决于 physics backend/feature；PhysX 主路径不以端到端 diff 为核心	Warp autodiff；仅部分 solver/contact 路径支持	scene-level autodiff；solver/contact 支持需逐项确认
硬件重心	NVIDIA CUDA/RTX，尤其感知栈	GPU 高性能路径以 NVIDIA Warp/CUDA 为主	Quadrants 面向 CUDA、ROCm、Metal、Vulkan 与 CPU
当前成熟度	PhysX/RTX/USD 栈成熟；Newton backend 实验性	快速迭代，多 solver feature matrix 不统一	快速迭代，多物理广但组合成熟度不同

2. 它们实际可以怎样组合

A. Isaac Sim + PhysX
   USD / Kit / RTX / ROS / Replicator + mature default physics

B. Isaac Sim + Newton
   同一平台数据与渲染路径 + experimental Newton physics backend

C. Isaac Lab + Newton, kit-less
   task / env / RL abstractions + standalone GPU physics / lightweight rendering

D. Isaac Lab + Isaac Sim / PhysX
   经典高保真 robot-learning stack

E. Genesis World
   独立 scene + multiphysics + render + compiler stack

Newton 与 Isaac Sim 既能比较也能组合；Genesis 当前更像另一套端到端平台。选型前先画清楚你要替换的是 physics、renderer、task framework，还是整个 runtime。

3. 按任务做第一轮选择

4. 公平 sim-to-sim 的对齐清单

必须固定	容易被忽略的差异	验证方法
单位与坐标系	米/厘米、Z-up/Y-up、四元数顺序	静态 pose 与 FK golden test
robot topology	joint order、mimic、armature、fixed-joint merge	逐 joint impulse/position test
质量与惯量	importer 重算 inertia、COM frame	free-fall、pendulum、energy test
碰撞几何	visual mesh、convex decomposition、SDF、contact offset	drop、stack、sliding、grasp test
执行器	PD 方程、gain 单位、limit、delay、motor model	single-joint step response
时间	physics dt、substeps、control decimation、sensor phase	记录每个时钟和 committed action
reset/randomization	seed、buffer swap、warm start、hidden solver state	state hash 与重复 rollout
observation/action	frame、normalization、latency、ordering	逐 tensor schema assertion

5. 不要一上来比较整套 humanoid

先建立由小到大的 physics conformance suite：

1. 单刚体自由落体：重力、积分与单位。
2. 单摆/双摆：关节、惯量、阻尼和能量漂移。
3. 方块滑动与斜坡：静/动摩擦与 contact transition。
4. 堆叠：solver convergence、穿透、jitter 与 buffer。
5. 单关节 PD：执行器和 control decimation。
6. 脚落地/夹爪抓取：多点接触、摩擦锥与 impact。
7. 最后才是整机 policy 的 sim-to-sim 与 sim-to-real。

每项同时报告轨迹误差、约束误差、接触统计、wall-clock throughput、显存和失败率。只有 FPS 没有物理误差，就不知道加速换掉了什么。

6. 一个可执行的 benchmark 协议

for backend in [isaac_physx, isaac_newton, genesis]:
    load_same_canonical_asset()
    assert_units_frames_joint_order()
    apply_same_initial_state_and_control_sequence()
    log(q, qd, body_pose, contacts, sensor_time, step_time)
    run_fixed_seeds(N)

compare:
  trajectory RMSE / contact onset / penetration / energy drift
  task success / robustness under parameter sweep
  physics steps per second / GPU memory / reset latency
  engineering cost and unsupported-feature count

若 importer 无法产生等价模型，应把“资产转换误差”单列，而不是把它混进 solver 误差。若某 backend 不支持所需 feature，也应记录为产品约束，而不是通过删除 feature 获得漂亮 benchmark。

7. 从 sim-to-sim 走向 sim-to-real

• 用 system identification 校准 mass、friction、motor、latency，而非只做宽泛 randomization。
• 对不可辨识参数做有物理意义的 distribution，验证 policy 对每一类变化的敏感度。
• 把相机 exposure、rolling shutter、深度空洞、通信 jitter 与 safety controller 纳入闭环。
• 保留多个 backend 作为 model disagreement signal：策略只在一个 solver 成功时要提高警惕。
• 最终证据仍是真机受控 rollout；sim-to-sim 一致只说明数值模型彼此接近。

8. 四个公平比较计算

自测

1. 为什么 Isaac Sim 和 Newton 不是严格二选一？

Newton 可以作为 Isaac Sim/Isaac Lab 的 physics backend；Isaac Sim 其余 USD、Fabric、RTX、ROS 等平台层仍可保留。

2. 为什么同一 URDF 不保证两个 backend 中模型相同？

importer 可能对 joint、inertia、collision mesh、mimic、drive 和 fixed link 做不同转换。

3. 一个 policy 在三个 simulator 都成功，是否证明能上真机？

不能。三者可能共享同类错误假设；真实 actuator、contact、sensor、latency 和环境分布仍需真机验证。