GPT
F

FLUX-GIFs

רץ בדפדפן

dn6mit2024-08-30

  • gradio

מייצרים אנימציות קצרות ישירות מטקסט בעזרת מודל תמונה. הכלי מיועד למי שרוצה לבדוק יצירת תנועה בסיסית בלי להתעסק בכלים מורכבים לווידאו.

  • הורדות בחודש
  • 201לייקים

מה זה

כותבים תיאור טקסטואלי ומקבלים קובץ אנימציה יחד עם תמונות הסטילס שמרכיבות אותו. הממשק נשען על המודל FLUX.1-dev של Black Forest Labs ועל שיטה שהציג fofr ברשת, שמנצלת צינור ג'נרוט של תמונות כדי לפלוט רצף פריימים קצר. ההנחיה בעמוד מבקשת להוסיף לתיאור פירוט של התנועה הרצויה כדי לקבל תוצאה סבירה.

בקוד מוגדרות הגדרות מתקדמות שמאפשרות לשנות את ה־seed, לקבוע ערך אקראי, ולכוונן את ה־guidance scale שברירת המחדל שלו היא 5.0. מספר צעדי הריצה עומד כברירת מחדל על 28 צעדים. המערכת כוללת גם דוגמאות מוכנות שנטענות לפי דרישה, ומציגה סרגל התקדמות בזמן שהעיבוד מתבצע.

מתאים ל

  • יצירת גיפים מטקסט

    מזינים תיאור של סצנה עם תנועה ומקבלים קובץ אנימציה קצר לשיתוף מהיר.

  • בדיקת יכולות המודל

    בוחנים איך פלוקס מתמודד עם יצירת רצף פריימים עקבי לפי הנחיות תנועה.

  • חילוץ תמונות סטילס

    מפיקים סדרת תמונות מתוך רצף האנימציה ישירות מחלון התוצאות.

איפה זה נופל

הבעיה המרכזית כרגע היא סטטוס שגיאת הריצה של העמוד, מה שאומר שאי אפשר להשתמש בו ישירות בדפדפן בלי שיתקנו את הקוד. בנוסף, מדובר במודל תמונה ולא במודל וידאו ייעודי, כך שהתנועה מוגבלת מאוד ולא תקבלו עקביות של סרטון אמיתי. כל חוסר דיוק בתיאור התנועה עלול לייצר עיוותים בין הפריימים.

שאלות
נפוצות

האם הכלי עובד כרגע בחינם בדפדפן?

הגישה לעמוד פתוחה ללא תשלום ואינה דורשת כרטיס אשראי. עם זאת, כרגע מופיעה בו שגיאת ריצה, ולכן אי אפשר להריץ בו פרומפטים עד שהתקלה תיפתר. אם הוא יחזור לעבוד, השימוש בממשק עצמו אינו כרוך בתשלום.

האם אפשר להריץ את הקוד הזה באופן עצמאי?

כן, הקוד מפורסם תחת רישיון MIT ואפשר להוריד אותו מתוך המאגר. כדי להפעיל אותו מקומית תצטרכו כרטיס מסך חזק שמסוגל לטעון את FLUX.1-dev, לצד התקנת הספריות של diffusers ו־gradio.

כמה זמן לוקח לייצר אנימציה?

ברירת המחדל מוגדרת ל־28 צעדי עיבוד על גבי מעבד מסוג A10G. תהליך כזה דורש בדרך כלל חצי דקה עד שתי דקות לכל הרצה. אם יש תור על המשאבים המשותפים, זמן ההמתנה עשוי להתארך בהתאם.

איך התוצאה שונה מיצירת תמונה רגילה במודל?

במקום תמונה בודדת, האלגוריתם מפיק סדרת תמונות שמתחברות לקובץ אנימציה אחד. כדי שזה יעבוד כמו שצריך, חייבים להכניס בתיאור הנחיות ספציפיות לגבי מה זז בסצנה ולאן.

איך משתמשים

מקלידים תיאור קצר בשורת הטקסט ולוחצים על Submit. מתחת יש תפריט הגדרות מתקדמות סגור, שבו אפשר לשנות פרמטרים כמו מספר צעדים או seed לפני ההפעלה. העיבוד מוגדר לרוץ על מעבד גרפי מסוג A10G דרך חומרת שיתוף, אבל נכון לעכשיו העמוד מדווח על שגיאת ריצה שמונעת ממנו לעבוד. במצב תקין של תשתית כזו, יצירה של עשרות צעדים במודל כבד לוקחת בדרך כלל בין כמה עשרות שניות לכמה דקות, כתלות בעומס ובתור.

הרישיון

קוד האפליקציה פתוח תחת רישיון MIT, שמאפשר שימוש חופשי בקוד עצמו. עם זאת, המודל שרץ בפנים הוא FLUX.1-dev, ויש לבדוק את תנאי השימוש והמגבלות של החברה המפתחת לגבי שימוש מסחרי בתוצרים שלו.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗