Adaptive-WAM: Quality-Guided Early-Exit Planning from Intermediate Video-Diffusion Features
Adaptive-WAM 是一种基于 Wan2.2-5B 主干的质量感知多出口规划器,用于自动驾驶。研究发现规划性能对视频噪声水平不敏感,且可从中间层解码出强轨迹。通过附加轨迹扩散头和质量评分器,在满足质量阈值时提前终止推理,避免迭代无分类器去噪和 VAE 解码。
Development
- First ReportAdaptive-WAM: Quality-Guided Early-Exit Planning from Intermediate Video-Diffusion FeaturesarXiv cs.RO
- Current Assessment自动驾驶领域可能从生成式世界模型转向更高效的规划直接解码,减少对完整视频生成的依赖。这暗示行业可能更关注任务导向的模型设计,而非通用生成能力。可验证信号:是否有更多工作采用类似早期退出策略,或世界模型公司调整产品方向。Agent Pulse · analysis
Adaptive-WAM 论文提出了一种用于自动驾驶的早期退出规划方法。作者通过控制视频去噪时间步和 DiT 深度,发现规划性能对视频噪声水平不敏感,而强轨迹可从中间层解码。基于此,他们构建了基于 Wan2.2-5B 主干的多出口规划器,在选定的 DiT 块上附加轨迹扩散头,并使用轻量级轨迹质量评分器在满足质量阈值时终止推理,否则从缓存隐藏状态继续到更深出口。这避免了未来视频合成所需的迭代无分类器去噪和 VAE 解码,同时动态分配主干深度。
该工作表明视频扩散模型中的中间特征已包含足够信息用于规划任务,可能无需完整生成视频。早期退出机制通过质量评分器动态决定推理深度,可能降低计算成本。可验证的下一信号:是否在真实驾驶数据集上展示端到端延迟降低,以及质量评分器在不同场景下的鲁棒性。
自动驾驶领域可能从生成式世界模型转向更高效的规划直接解码,减少对完整视频生成的依赖。这暗示行业可能更关注任务导向的模型设计,而非通用生成能力。可验证信号:是否有更多工作采用类似早期退出策略,或世界模型公司调整产品方向。
对于自动驾驶公司,该技术可能降低推理成本,提高实时性,从而加速商业化部署。对于模型提供商,可能推动更高效的模型设计,降低算力需求。可验证信号:是否有公司采用类似技术并报告成本降低。
未来可能看到更多基于扩散模型中间特征的早期退出方法,以及针对不同任务的自适应计算分配。可关注该技术是否扩展到其他机器人任务,以及是否与边缘部署结合。