生成建模与扩散 突破级 暂无讲解视频
发表时间
2026-06-02
arXiv
2606.03159

核心要点

问题/背景
自动驾驶闭环仿真的瓶颈是 policy 会改变环境状态,传统重建式 neural simulator 受限于初始采集数据,很难生成未观测长尾场景。
方法/机制
OmniDreams 从 Cosmos diffusion world model 出发,经 21k 小时驾驶场景中/后训练,实现实时 action-conditioned video generation,让驾驶策略能与生成环境闭环交互。
结果/证据
它值得收录,因为它把生成式世界模型推进到自动驾驶闭环评测场景,是 world model 从视频生成走向交互式安全仿真的重要系统方向。
收录价值
按当前收录规则,它属于近期值得正式跟踪的可复用方法或系统模式;但作为新近预印本,后续仍需要代码、复现和真实部署结果来确认长期影响。
完整收录解读

自动驾驶闭环仿真的瓶颈是 policy 会改变环境状态,传统重建式 neural simulator 受限于初始采集数据,很难生成未观测长尾场景。

OmniDreams 从 Cosmos diffusion world model 出发,经 21k 小时驾驶场景中/后训练,实现实时 action-conditioned video generation,让驾驶策略能与生成环境闭环交互。

它值得收录,因为它把生成式世界模型推进到自动驾驶闭环评测场景,是 world model 从视频生成走向交互式安全仿真的重要系统方向。

按当前收录规则,它属于近期值得正式跟踪的可复用方法或系统模式;但作为新近预印本,后续仍需要代码、复现和真实部署结果来确认长期影响。

论文摘要

OmniDreams 是一种实时动作条件生成世界模型,用于闭环自主车辆模拟,从中、后训练于 NVIDIA Cosmos 上的 21 千小时的驾驶场景。

英文原文

OmniDreams is a real-time action-conditioned generative world model for closed-loop autonomous vehicle simulation, mid- and post-trained from NVIDIA Cosmos on 21k hours of driving scenarios.

相关论文

链接