Diffusers : Pipeline de Diffusion Vidéo Stable

term_id: diffusersstablevideodiffusionpipeline

Category: application_paradigms

Definition

Ce terme désigne une implémentation spécifique au sein de la bibliothèque Hugging Face Diffusers, conçue pour la génération vidéo. Il intègre le modèle Stable Video Diffusion (SVD), qui est un modèle de diffusion latente pour la vidéo.

Summary

Un wrapper de pipeline Hugging Face Diffusers qui utilise le modèle Stable Video Diffusion pour générer des vidéos à partir d’images statiques.

Key Concepts

  • Génération Image-Vidéo
  • Diffusion dans l’Espace Latent
  • Hugging Face Diffusers
  • Modèle Stable Video Diffusion

Use Cases

  • Animation d’œuvres d’art ou de photographies statiques
  • Création de courtes vidéos pour les réseaux sociaux
  • Prototypage d’effets visuels dans la production cinématographique

Code Example

1
2
3
4
5
6

from diffusers import StableVideoDiffusionPipeline
import torch

pipe = StableVideoDiffusionPipeline.from_pretrained("stabilityai/stable-video-diffusion-img2vid", torch_dtype=torch.float16)
pipe.enable_model_cpu_offload()
# Usage would involve loading an image and calling pipe(image)

Related