视频外绘技术总结：Be-Your-Outpainter、Follow-Your-Canvas、M3DDM

Diffusion Models专栏文章汇总：入门与实战

前言：视频Inpaint的技术很火，但是OutPaint却热度不高，这篇博客总结比较经典的几篇视频Outpaint技术。其实Outpaint在runway等工具上很火，可是学术界对此关注比较少，博主从这三年的顶会中找到了最具代表性的三篇论文解读。

目录

【ACM-MM 2023】M3DDM：Hierarchical Masked 3D Diffusion Model for Video Outpainting

Mask训练策略

全局帧嵌入

数据集清晰策略

混合由粗到细的推理

​编辑

实验分析

【ECCV 2024】Be-Your-Outpainter: Mastering Video Outpainting through Input-Specific Adaptation

之前方法的局限性

方法简述

推理过程中的噪声值

Mask Video Controlnet

训练参数

空间感知插入

Noise regret

【AAAI 2025】Follow-Your-Canvas: Higher-Resolution Video Outpainting with Extensive Content Generation

之前任务失败的原因

方法概述

空间窗口

Layout Alignment

布局编码器 (LE)

相对区域嵌入（RRE）

---