Эволюция методов диффузионной генерации видео

За последние пару лет диффузионные модели достигли ощутимого прогресса в области генерации видео. Недавний анонс модели Sora от OpenAI показал совершенно новый уровень качества генерируемого контента.

Рассмотрим основные принципы работы диффузионных моделей генерации видео и проанализируем, как им удалось достичь такого уровня качества за столь короткий промежуток времени.

Доклад рассчитан на тех, кто имеет базовое представление о работе нейросетей: сверточных и трансформеров.