文档中心 / AI 热点雷达 / DreamGen:让机器人在视频生成模型中"做梦"合成训练数据
DreamGen:让机器人在视频生成模型中"做梦"合成训练数据
来源:X:Jim Fan (@DrJimFan) · 时间:2025-05-20T13:29:57.000Z
事件速览
DreamGen让机器人在视频生成模型中"做梦"合成训练数据。通过微调Sora等模型生成海量神经轨迹(逼真视频+动作标签),机器人从单一拾取放置任务泛化到倾倒、折叠等22种新行为。在NVIDIA总部咖啡厅测试中,人形机器人对新动词零样本成功率从0%提升至43%,新环境达28%。相比传统图形引擎,无需手工建模即可处理流体、可变形物体等复杂场景,整个pipeline将于近期完全开源。