img2vid
רץ בדפדפןseawolf2357רישיון לא דווח2024-06-28
הופכים תמונה בודדת לסרטון קצר של כמה שניות בעזרת מודלים פתוחים. מתאים למי שרוצה לבדוק הנפשה מבוססת בינה מלאכותית בלי להתקין סביבת פיתוח מקומית.
- —הורדות בחודש
- 185לייקים
מה זה
מעלים תמונה סטטית ומקבלים קובץ וידאו מונפש או גיף, יחד עם גלריה שמציגה את כל הפריימים הבודדים שנוצרו. מתחת למכסה המנוע רצים שני מודלים של Stability AI דרך ספריית diffusers, גרסת הבסיס של Stable Video Diffusion שאומנה על 14 פריימים לשנייה, וגרסת XT שמותאמת ל 25 פריימים לשנייה. הממשק נותן לבחור ביניהם ידנית או להשאיר את הבחירה על מצב אוטומטי.
חוץ מהתמונה עצמה אפשר לכוונן כמה פרמטרים טכניים שמשפיעים ישירות על התוצאה. יש סליידר לכמות התנועה בין 1 ל 255, קביעת קצב הפריימים שמשנה את משך הווידאו, עוצמת הרעש שנוסף לתמונה, ומספר הפריימים שמפוענחים בו זמנית כדי לנהל את הזיכרון. אפשר גם לייצא את הפריימים במגוון פורמטים כמו webp, png, jpeg או bmp בהתאם לצורך.
מתאים ל
- הנפשת תמונות סטילס
הפיכת צילום נוף או פורטרט לקליפ קצר עם תנועת מצלמה עדינה או תזוזה קלה ברקע.
- יצירת גיפים לרשת
ייצוא ישיר של התמונה המונפשת לקובץ גיף שמתאים לשיתוף מהיר ברשתות חברתיות.
- פירוק פריימים לעיצוב
הורדת רצף התמונות הבודדות בפורמט png או webp כדי להשתמש בהן בתוכנות עריכה חיצוניות.
איפה זה נופל
המודלים האלה מוגבלים לתנועות קצרות ופשוטות של שניות בודדות. אם מנסים להנפיש תנועה מורכבת, ידיים של אנשים או טקסט, התוצאה לרוב נמרחת ומאבדת היגיון פיזיקלי. בנוסף, שינוי פרמטר הפענוח לצד הגבוה עלול להכביד מאוד על הזיכרון הגרפי ולהוביל לקריסה של הריצה, כך שאי אפשר לבנות על יצירת רצפים ארוכים או כבדים.
שאלות
נפוצות
האם השימוש פתוח בחינם?
כן, אפשר להשתמש בממשק ישירות בדפדפן בלי לשלם. הריצה מתבצעת על משאבי חומרה שיתופיים, ולכן ייתכנו זמני המתנה קלים אם המערכת עמוסה במשתמשים אחרים באותו רגע.
כמה זמן לוקח לייצר וידאו?
העיבוד לוקח בדרך כלל בין חצי דקה לדקה על גבי מאיץ מדגם a10g. הזמן המדויק משתנה לפי כמות הפריימים שמפוענחים בבת אחת והאורך של הסרטון שבחרתם לייצר.
האם הקבצים שהעליתי נשמרים?
ההעלאה מעובדת בזיכרון השרת לצורך יצירת הפריימים והווידאו בלבד. אין כאן מנגנון של חשבון משתמש או גלריה ציבורית שנשמרת לאורך זמן, אך מדובר בסביבה משותפת ולכן לא כדאי להעלות חומרים רגישים.
במה האפליקציה שונה מהרצת המודל לבד?
היא עוטפת את המודלים של stabilityai בממשק גרפי נוח שנבנה ב gradio. במקום לכתוב קוד פייתון ולנהל ספריות diffusers ידנית, מקבלים סליידרים מוכנים לשליטה בתנועה ובייצוא הקבצים.
איך משתמשים
גוררים תמונה לחלון ההעלאה, פותחים את אפשרויות המתקדמות אם רוצים לשנות את כמות התנועה או פורמט הקובץ, ולוחצים על כפתור ההפעלה. האפליקציה רצה על חומרת zero a10g דרך מנגנון spaces, מה שאומר שהמעבד הגרפי מוקצה רק בזמן הריצה בפועל. בגלל שאין שמירת מטמון מראש לדוגמאות, העיבוד תמיד מתבצע בזמן אמת. המהירות תלויה בעומס על השרת המשותף, ואין צורך בהתחברות מיוחדת כדי להתחיל.
הרישיון
הרישיון של המרחב עצמו לא דווח בעמוד הפרויקט. המשמעות היא שאין הגדרה ברורה לגבי זכויות השימוש בקוד של הממשק או מה מותר לעשות מסחרית עם התוצרים שיוצאים ממנו. מומלץ לבדוק ישירות את תנאי הרישיון המקוריים של מודלי הבסיס של stabilityai לפני שמשתמשים בווידאו לצרכים שאינם בדיקה אישית.