SDXT-Image-To-Video
רץ בדפדפןmrcuddleרישיון לא דווח2024-12-14
העלאת תמונת סטילס אחת והפיכתה לקליפ קצר של עשרים וחמישה פריימים. מיועד למי שרוצה לבחון הנפשה מהירה של תמונה בלי להגדיר סביבת פיתוח מקומית.
- —הורדות בחודש
- 56לייקים
מה זה
אתם מעלים קובץ תמונה ומקבלים סרטון קצר ברזולוציה של 576 על 1024 פיקסלים. מתחת למכסה המנוע רץ המודל stabilityai/stable-video-diffusion-img2vid-xt דרך ספריית diffusers, והוא מייצר רצף קבוע של עשרים וחמישה פריימים מתוך התמונה הבודדת שהזנתם.
הממשק כולל דוגמה מוכנה מראש עם תמונת ברירת מחדל בשם image.jpeg וסרטון תוצאה שמציג מה המודל אמור להפיק. אתם יכולים לשלוט במספר הסיד לקבלת תוצאות שונות, או להחליף בין קביעת קצב פריימים לשנייה לבין הגדרת משך הזמן הכולל בשניות.
מתאים ל
- הנפשת תמונת סטילס
מעלים תמונה בודדת ומפיקים ממנה סרטון של עשרים וחמישה פריימים.
- בדיקת המודל של סטביליטי
בוחנים איך המודל של סטביליטי מתמודד עם תמונות שונות דרך ממשק פשוט.
- ניסויי קצב פריימים
משנים את מדד הפריימים לשנייה ובודקים איך מהירות התנועה משתנה.
איפה זה נופל
הבעיה המיידית היא שהאפליקציה פשוט לא עובדת ומופיעה בה שגיאת מערכת עוד בשלב הבנייה. מעבר לזה, המודל מייצר עשרים וחמישה פריימים בלבד, כך שלא תקבלו כאן סרטונים ארוכים אלא תנועה של שנייה בודדת בקצב הרגיל. ההדגמה מציגה קובץ וידאו מוכן מראש, אבל בלי חומרה מתאימה קשה לשחזר את הביצועים האלה ישירות דרך הדפדפן.
שאלות
נפוצות
האם אפשר להשתמש בכלי הזה עכשיו בחינם?
השימוש בדף עצמו הוא עקרונית ללא תשלום, אבל כרגע הוא בכלל לא עובד. האפליקציה נמצאת במצב של שגיאת בנייה, ולכן אי אפשר ללחוץ על הכפתור ולקבל תוצאה עד שבעל הפרויקט יתקן את הקוד.
כמה זמן לוקח לייצר את הווידאו?
האפליקציה מוגדרת על מעבד בסיסי רגיל ללא מאיץ גרפי. מודלים של וידאו דורשים כוח עיבוד עצום, ולכן על חומרה כזאת התהליך צפוי להימשך דקות ארוכות מאוד עבור כל סרטון קצר של עשרים וחמישה פריימים.
האם אפשר להריץ את זה מקומית על המחשב?
אפשר לקחת את קוד המקור ולהריץ אותו במחשב שלכם, אך תצטרכו כרטיס מסך חזק של אנבידיה כדי שהמודל יפעל בצורה סבירה. הקוד עצמו מבוסס על ספריות פייתון סטנדרטיות וטוען את המודל ישירות מהרשת.
מה קורה עם התמונות שמעלים לממשק?
התמונות מועברות ישירות לשרת שמריץ את המרחב כדי לייצר את קובץ הווידאו. מאחר שאין פה הצהרת פרטיות מסודרת או רישיון ברור, לא כדאי להעלות לשם תמונות פרטיות או מידע רגיש.
איך משתמשים
בפועל, נכון לעכשיו אי אפשר להריץ את העמוד בדפדפן כי הוא תקוע במצב שגיאת בנייה. במצב תקין, אתם גוררים תמונה למשבצת הקלט, משנים את הסיד או את קצב הפריימים אם רוצים, ולוחצים על כפתור ההפקה. המרחב מוגדר על חומרת מעבד בסיסית, מה שאומר שגם כשהקוד יעלה, יצירת וידאו ממודל כזה תיקח זמן ממושך מאוד ללא מאיץ גרפי ייעודי.
הרישיון
היוצר לא פרסם רישיון שימוש בקוד. המשמעות היא שאין הרשאה משפטית ברורה להעתיק את הקוד או להשתמש בתוצרים למטרות מסחריות, והכול מוגבל לבדיקה אישית בלבד תחת תנאי השימוש הרגילים של השרת.