Stable-Video-Diffusion-Img2Vid

מה זה

אתם מעלים קובץ תמונה בודד, בוחרים פרמטרים ומקבלים קובץ וידאו מונפש או גיף, לצד גלריה של כל הפריימים הבודדים שנוצרו בתהליך. הממשק נותן שליטה על ממדי התוצר עד 1024 על 576, קצב פריימים לשנייה, כמות הרעש, עוצמת התנועה ומספר צעדי הדגימה מ 1 עד 100.

מאחורי הקלעים רצים מודלים ממשפחת Stable Video Diffusion של Stability AI בגרסאות הבסיס וה XT, לצד מימוש של DragNUWA. אתם יכולים לקבוע ידנית באיזה מודל להשתמש או לתת לו לבחור אוטומטית, ויש גם אפשרות לקבוע את פורמט הקובץ הסופי מתוך מגוון אפשרויות כמו mp4, avi, mov או gif.

מתאים ל

• הנפשת תמונות סטילס

  הופכים תמונה בודדת לקטע וידאו קצר באמצעות בחירה בין מודל של 14 פריימים למודל XT של 25 פריימים.

• יצוא פריימים בודדים

  מפרקים את תנועת האנימציה לקבצי תמונה נפרדים בפורמטים כמו webp, png או jpeg לשימוש בעריכה.

• יצירת גיפים מונפשים

  מגדירים את פורמט הפלט לגיף ומקבלים קובץ קל לשיתוף ישיר בלי צורך בנגן וידאו.

איפה זה נופל

האפליקציה מושבתת כרגע ולא תפיק שום סרטון בלחיצה. מעבר לזה, האפשרות לשליטה בתנועה ובקרת המצלמה מסומנת בקוד כניסיונית, ומודל DragNUWA מסומן כלא יציב. ההדגמות לא נשמרות מראש בקוד, כך שאין תצוגה מקדימה מוכנה בלי עיבוד אמיתי.

איך משתמשים

בפועל מעלים תמונה, משנים הגדרות אם רוצים, ולוחצים על Animate. המערכת מוגדרת כרגע במצב PAUSED על מעבד בסיסי, כך שאי אפשר להריץ אותה ישירות בדפדפן בלי להפעיל אותה מחדש או להעביר אותה למכונה משלכם. הקוד משתמש במנגנון חלוקת משאבים ודורש מעבד גרפי כדי לחשב את הפריימים, ולכן על מעבד בלבד הריצה אינה מעשית.

הרישיון

הקוד וההגדרות מפורסמים תחת רישיון apache-2.0, שמאפשר שימוש חופשי ושינוי קוד. הרישיון לא מפרט תנאים מיוחדים לגבי שמירה או בעלות על התמונות שאתם מעלים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗