חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
I

InstantID-2V

רץ בדפדפן

fffiloniרישיון לא דווח2024-01-30

  • gradio

מעלים תמונת פנים ותמונת התניה, ויוצרים סרטון שמשלב ביניהן לפי סגנון נבחר. מתאים למי שרוצה לבדוק הנפשת דמויות בלי להתקין סביבת פיתוח כבדה.

  • —הורדות בחודש
  • 53לייקים

מה זה

מזינים תמונת פנים כמו המונה ליזה שמגיעה כברירת מחדל, מוסיפים תמונה מנחה להעמדה ברזולוציה מומלצת של 1280 על 720, ובוחרים תבנית סגנון מהרשימה. יש גם תיבת טקסט קצרה להנחיה, ותיבות סימון עבור רכיבי בקרה.

מאחורי הקלעים הקוד מתבסס על טכנולוגיית InstantID ליציבות הפנים יחד עם מודלים של וידאו. הממשק חושף בחירה במודל i2vgen-xl מול stable-video, אך השדה הזה נעול ולא מאפשר שינוי, כך שאי אפשר להחליף מודל ידנית. הפלט שמתקבל בצד ימין הוא קובץ וידאו מוגמר.

מתאים ל

  • הנפשת דיוקן קיים

    לקיחת תמונת פנים והפיכתה לסרטון קצר לפי תנוחה מוכנה מראש.

  • בדיקת סגנונות ויזואליים

    שילוב אותם פנים בתוך תבניות אמנותיות מוכנות כדי לראות איך הדמות נשמרת.

  • התנסות ביצירת וידאו

    בחינה מהירה בדפדפן של שילוב פרומפט קצר ותמונת מקור בלי להגדיר שרת.

איפה זה נופל

חייבים להעלות תמונת התניה מתאימה, אחרת הקוד זורק שגיאה מפורשת ולא מייצר כלום. בחירת המודל מוסתרת ונעולה בקוד על ערך בודד, כך שאין גמישות אמיתית לבדוק חלופות כמו שהממשק מרמז.

ההסתמכות על תבניות קבועות מראש מגבילה את התוצאה הסופית לסגנונות ספציפיים בלבד, והפרומפט מוגבל לקצר כדי לא לשבור את התהליך.

שאלות
נפוצות

האם הכלי הזה חינמי לשימוש?

כן, פותחים את העמוד בדפדפן ומשתמשים בו ישירות. אין דרישת תשלום ואין צורך להזין כרטיס אשראי כדי ללחוץ על הכפתור.

כמה זמן לוקח לייצר סרטון?

זה לוקח לפחות כמה עשרות שניות עד מספר דקות. החומרה המקומית של העמוד היא מעבד בסיסי, והקריאות תלויות בזמינות השרתים החיצוניים שמריצים את המודל.

אפשר להריץ את זה על המחשב שלי?

הקוד עצמו בנוי על gradio וזמין לצפייה, אך הוא פונה לשרת מרוחק דרך gradio_client. כדי להריץ הכל מקומית לגמרי תצטרכו להוריד את המודלים של הווידאו ולהחזיק כרטיס מסך חזק.

האם מותר לי לבחור איזה מודל וידאו ירוץ?

לא. למרות שהקוד מגדיר אפשרות בין i2vgen-xl לבין stable-video, השדה נעול ולא ניתן לשינוי על ידי המשתמש.

איך משתמשים

טוענים את שתי התמונות, בוחרים סגנון וזווית צילום, כותבים תיאור קצר ולוחצים על Submit. אין כאן דרישת הרשמה מיוחדת מראש.

המרחב רץ על חומרת cpu-basic בסיסית ומשתמש בספריית לקוח חיצונית, כך שהעיבוד הכבד לא קורה ישירות על המעבד החלש של הדף. למרות זאת, יצירת וידאו כזו עדיין דורשת המתנה מורגשת, ואם יש עומס ברשת החיצונית תצטרכו לחכות בתור עד שהקובץ ייטען.

הרישיון

המפתח לא הגדיר רישיון שימוש בקוד או במרחב. כדאי להניח שאין אישור לשימוש מסחרי, וכל תמונה שאתם מעלים לפלטפורמה פומבית חשופה בהתאם לתנאי השימוש הרגילים של השרת.

הרישיון המלא ב־Hugging Face ↗