FramePack-F1

מה זה

אתם מעלים תמונה לעורך המובנה, כותבים תיאור טקסטואלי של התנועה הרצויה ובוחרים את אורך הסרטון בין שנייה אחת לחמש שניות. אם רוצים, אפשר לסמן תיבה ולהפיק סרטון ישירות מטקסט בלבד בלי תמונת מקור. התוצאה הסופית היא קובץ וידאו בפורמט MP4 שנוצר על בסיס ההנחיות.

מאחורי הקלעים רץ שילוב של HunyuanVideo וגרסת FramePack F1 של lllyasviel, יחד עם רכיבי עיבוד תמונה של SigLIP מפרויקט flux_redux_bfl. המערכת מפרקת ומקודדת את התמונה והטקסט במקביל, ומזרימה תצוגה מקדימה תוך כדי תהליך היצירה.

דוגמאות הממשק מציגות בעיקר דמויות רוקדות, כמו בחורה שרוקדת בתנועות עדינות, גבר שרוקד בתנועות מודגשות, ואישה שמסתובבת בין פרחים. כולן מתמקדות בהנפשת תנועות גוף מורכבות מתוך תמונת סטילס בודדת.

מתאים ל

• הנפשת תמונות דמויות

  הפיכת תמונת סטילס של אדם לסרטון ריקוד או תנועה קצר של עד 5 שניות לפי תיאור.

• בדיקת טקסט לווידאו

  הפקת קליפ קצר ישירות מהנחיית טקסט ללא תמונת בסיס באמצעות סימון אפשרות t2v.

• ניסוי במודל FramePack

  בחינת יכולות המודל של lllyasviel ושילוב TeaCache לפני התקנה מקומית על שרת.

איפה זה נופל

ההדגמה מוגבלת לחמש שניות וידאו בלבד, כך שהיא לא מתאימה ליצירת קטעים ארוכים או רצופים. האצת הריצה באמצעות TeaCache גורמת לפגמים נראים לעין באצבעות ובידיים, כפי שמצוין במפורש בממשק. בנוסף, חומרת A10G שיתופית עלולה להיכנס להשהיות תחת עומס משתמשים.

איך משתמשים

לוחצים על כפתור Start Generation והריצה מתחילה מיד. האפליקציה רצה על חומרת zero-a10g של Hugging Face Spaces, מה שאומר שהמעבד הגרפי מוקצה לפי דרישה ועשוי לדרוש המתנה קצרה בתור אם השרת עמוס. בהגדרות המתקדמות אפשר להפעיל או לכבות את TeaCache, שמאיץ את זמן החישוב אבל פוגע בדיוק של איברים קטנים.

הרישיון

הקוד וההדגמה מפורסמים תחת רישיון apache-2.0, שמאפשר שימוש חופשי וגם שימוש מסחרי בקוד עצמו. החומרים שאתם מעלים מועברים לעיבוד דרך שרתי Hugging Face שבהם מאוחסן הספייס.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗