GPT
F

FLUXllama

רץ בדפדפן

ginipickmit2024-08-22

  • gradio

הכלי מרחיב תיאורי תמונה קצרים בעזרת מודל שפה ומייצר תמונות דרך גרסה מכווצת של פלוקס. הוא מיועד ליוצרים שרוצים לדלג על כתיבת תיאורים מפורטים.

  • הורדות בחודש
  • 562לייקים

מה זה

אתם מקלידים תיאור פשוט באנגלית, והממשק מעביר אותו דרך מודל שפה שמנפח אותו בפרטים ויזואליים, תאורה וסגנון אמנותי. הדוגמה המובנית מראה איך מילה אחת כמו חתול הופכת לפסקה שלמה על חתול טאבי עם עיני ברקת באור שקיעה. משם הטקסט המשודרג עובר אל מנוע התמונות.

מאחורי הקלעים רצה גרסת ארבעה ביט של FLUX.1-dev בשם derekl35/FLUX.1-dev-nf4, שנועדה לחסוך זיכרון ולרוץ על כרטיסי מסך צנועים יותר. להרחבת התיאור מוגדרים מודלי שפה כמו Phi-3-mini של מיקרוסופט לצד אזכורים למודלים נוספים כמו gpt-oss-120b וג׳יפיטי שתיים הוותיק.

מתאים ל

  • הרחבת רעיונות בסיסיים

    הפיכת מילים בודדות לפסקאות תיאור מלאות עבור מנועי יצירת תמונות.

  • בדיקת כיווני תאורה וסגנון

    קבלת הצעות אוטומטיות לזוויות צילום וגוונים בלי לנסח אותם ידנית.

  • בחינת מודל מכווץ

    בדיקת היכולת של גרסת ארבעה ביט של פלוקס לספק תוצאות סבירות בחומרה קלה.

איפה זה נופל

הבעיה המרכזית היא שהעמוד פשוט תקול ולא עולה. מעבר לזה, התיעוד מבטיח מודל ענק של מאה ועשרים מיליארד פרמטרים, אבל בפועל מדובר במרחב הדגמה פשוט שמנסה לטעון מודלים שונים כמו פאי שלוש. הדרישות האמיתיות של פלוקס דורשות כרטיס מסך ייעודי של לפחות שישה גיגה זיכרון, כך שאי אפשר להסתמך על הרצה חלקה ברשת בלי חומרה מתאימה.

שאלות
נפוצות

האם הכלי זמין לעבודה כרגע בדפדפן?

לא, העמוד נמצא במצב של שגיאת בנייה ולא ניתן להריץ אותו אונליין. כדי להשתמש בו צריך להוריד את הקוד ולהפעיל אותו בסביבה פרטית. בנוסף, חומרת ברירת המחדל שהוגדרה שם היא מעבד בסיסי שאינו מספיק להרצת מודלים כאלה.

במה זה שונה משימוש רגיל במודל פלוקס?

הכלי מחבר מודל שפה ישירות לפני מנוע התמונה כדי לעבות את הפרומפט באופן אוטומטי. בנוסף הוא משתמש בגרסה שעברה כיול לארבעה ביט במקום במודל המלא. השילוב הזה נועד לפשט את הכתיבה ולצמצם את דרישות הזיכרון.

אפשר להריץ את זה על המחשב בבית?

כן, הקוד פתוח לחלוטין תחת רישיון מתירני. תצטרכו כרטיס מסך של אנבידיה עם לפחות שישה גיגה זיכרון כדי להריץ את הגרסה המכווצת. מומלץ להצטייד גם בשישה עשר גיגה זיכרון עבודה במחשב.

האם המערכת מבינה עברית?

התיעוד מזכיר תמיכה בריבוי שפות, אך מודל השפה ומנוע התמונות מתפקדים היטב בעיקר באנגלית. מומלץ להזין תיאורים באנגלית בלבד כדי לקבל תוצאה סבירה. שימוש בעברית צפוי להוביל לפרומפטים שבורים ולא מדויקים.

איך משתמשים

בממשק יש שדה להזנת תיאור, כפתור ייעודי להרחבת הטקסט בלבד, וכפתור שמבצע הרחבה ויצירת תמונה במקביל. אפשר גם לייצר תמונה ישירות מהטקסט המקורי ללא שדרוג.

בפועל, כרגע אי אפשר להריץ את העמוד בדפדפן. המרחב נמצא במצב של שגיאת בנייה ומוגדר על חומרת מעבד בסיסית בלבד, כך שלחיצה על הכפתורים לא תניב תמונה.

הרישיון

הקוד מפורסם תחת רישיון MIT שמאפשר שימוש חופשי ושינוי. עם זאת, המודל הבסיסי FLUX.1-dev מגיע עם מגבלות שימוש משלו שאינן מסחריות, ויש להתחשב בהן לגבי התוצרים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗