مدل Viggle-Animate؛ تعویض کاراکتر در کل ویدیو فقط با ویرایش یک فریم… — VIRSUN

VIRSUN@rss_ai_ir · 10.8K subscribers Open in TelegramOpen

🎭⚡ مدل Viggle-Animate؛ تعویض کاراکتر در کل ویدیو فقط با ویرایش یک فریم

اینکه Viggle با Viggle-Animate برگشته؛ سیستمی که کافی است کاراکتر را در یک فریم تغییر دهید تا مدل همان ویرایش را در کل کلیپ گسترش دهد.

نکته جالب این است که Pipeline ظاهراً به مدل‌های واسطی مثل Pose Estimation، Segmentation، Face Tracking یا Text Encoder متکی نیست و روی حرکت‌های سریع، حیوانات، موجودات غیرانسان‌نما و کاراکترهای Stylized هم هدف‌گذاری شده است.

طبق اعداد اعلام‌شده، پردازش یک ویدیو حدود 26 ثانیه طول می‌کشد و تقریباً 6 برابر سریع‌تر از Wan2.2-Animate گزارش شده. همچنین می‌توان چند کاراکتر را همزمان مشخص کرد؛ مثلاً «کاراکتر سمت چپ».

⚠️ ضعف فعلی: Lip-sync هنوز دقیق نیست و حرکت دهان الزاماً با گفتار هماهنگ نمی‌شود.

اگر عملکرد واقعی با دموها هم‌خوان باشد، Character Swap دارد از یک Workflow چندمرحله‌ای به چیزی شبیه ویرایش مستقیم ویدیو تبدیل می‌شود.
https://huggingface.co/Viggle/Viggle-Animate

https://huggingface.co/spaces/Viggle/viggle-animate

https://viggle.ai/meme/app/video-gen?utm_source=shortlink&utm_medium=h3

@rss_ai_ir
❤️ حمایت از کانال:
https://daramet.com/Virsun

#Viggle #ViggleAnimate #CharacterSwap #VideoAI #MiniMaxH3 #GenerativeAI #VideoEditing #هوش_مصنوعی

t.me/rss_ai_ir/5318 Translate