1. Файл text_to_video.py нужен для генерации текста в видео. Там можно поменять разрешение, а так же описание видео. Продолжительность указывается в общем количестве кадров в num_frames
У нас 24 кадра в секунду, значит указав значение в 240 мы получим продолжительность 240/24=10 секунд
2. Файл image_to_video.py
Здесь логика такая же, но рядом с файлом мы можем положить изображение чтобы оно превращалось в видео.
Общие команды чтобы всё заработало:
apt updateapt install python3-venv python3-pippython3 -m venv venvsource venv/bin/activatepip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cu128pip install diffusers transformers accelerate sentencepiecepip install imageio[ffmpeg] soundfile scipypip install av# Проверить GPU
python -c "import torch; print(torch.cuda.get_device_name(0), torch.cuda.get_device_properties(0).total_memory // 1024**3, 'GB')"hf auth loginВставляем токен с сайта hugging face
