חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
F

flux1-dev-nf4

רץ בדפדפן

nyanko7mit2024-08-12

  • gradio

הדגמת דפדפן שמייצרת תמונות מטקסט או מעבדת תמונה קיימת בעזרת גרסה מכווצת של המודל. מתאימה למי שרוצה לבדוק את היכולות בלי להוריד עשרות ג'יגה־בייט למחשב.

  • —הורדות בחודש
  • 64לייקים

מה זה

אתם מקלידים תיאור טקסטואלי, קובעים רוחב וגובה בין 128 ל־2048 פיקסלים, ובוחרים את רמת הדיוק ומספר הצעדים. אם רוצים, אפשר לסמן תיבה ולהעלות תמונת מקור כדי לבצע עיבוד תמונה לתמונה עם שליטה בעוצמת הרעש. בתמורה מקבלים תמונה שנוצרה ואת מספר הסיד המדויק ששימש ליצירה.

מאחורי הקלעים רץ המודל flux1-dev-bnb-nf4 בכיבוץ 4 ביט של bitsandbytes, יחד עם רכיבי טקסט של CLIP ושל T5, וה־VAE של FLUX.1-dev. דוגמת ברירת המחדל בממשק מציעה תיאור של יער ערפילי עם המילה FLUX צבועה באדום על גבי הגזעים.

מתאים ל

  • יצירת תמונות מטקסט

    כותבים תיאור חופשי באנגלית ומקבלים תמונה ברזולוציה מותאמת אישית.

  • עיבוד תמונה לתמונה

    מעלים תמונה קיימת ומשנים אותה בעזרת טקסט וסליידר עוצמת שינוי.

  • שחזור תוצאות לפי סיד

    מזינים ערך סיד קבוע כדי לקבל בדיוק את אותה תוצאה שוב.

איפה זה נופל

הבעיה המיידית היא שהאפליקציה במצב תקלה ולא פועלת כרגע בדפדפן. בנוסף, מדובר במשקלים מכווצים ל־4 ביט כדי לחסוך זיכרון, מה שעלול להשפיע על איכות התוצאה לעומת המודל המלא. שליטה מתקדמת מוגבלת לפרמטרים הבסיסיים בלבד, ואין אפשרות לחלץ הגדרות מורכבות יותר מחוץ למה שהסליידרים מציעים.

שאלות
נפוצות

האם השימוש עולה כסף?

לא, הגישה לממשק דרך הדפדפן היא בחינם. המשאבים מוקצים על גבי חומרת ענן שיתופית ללא צורך בתשלום.

למה האפליקציה לא מייצרת תמונה?

הקוד מוגדר כרגע במצב של שגיאת ריצה במערכת. עד שבעל הפרויקט לא יעדכן את הקבצים ויתקן את התקלה, הכפתור לא יפיק תוצאה.

במה זה שונה מהמודל המקורי?

כאן נעשה שימוש במשקלים מכווצים בפורמט nf4 של bitsandbytes. הכיווץ מאפשר לטעון את המודל על מעבד גרפי קטן וזול יותר, אך עשוי לפגוע מעט בפרטים הקטנים.

האם אפשר להריץ את זה מקומית?

כן, קוד הממשק מבוסס על ספריות סטנדרטיות כמו diffusers ו־gradio, והמשקלים פתוחים להורדה. תצטרכו מחשב עם מעבד גרפי של אנבידיה ותמיכה ב־bitsandbytes.

איך משתמשים

לוחצים על כפתור Generate וממתינים. ההרצה משתמשת במעבד גרפי מסוג zero-a10g שמקצה משאבים לפי דרישה דרך מודול spaces, ויש מד התקדמות שמציג את צעדי הריצה בזמן אמת. עם זאת, נכון לעכשיו מוגדר סטטוס שגיאת ריצה, כך שהממשק עלול לקרוס ולא לייצר דבר עד שהתקלה תיפתר.

הרישיון

קוד האפליקציה מפורסם ברישיון mit פתוח ומתירני. לגבי המודלים עצמם, נעשה שימוש במשקלים של FLUX.1-dev שכוללים תנאי שימוש נפרדים של המפתחים המקוריים, ויש לבדוק את מגבלות השימוש המסחרי שלהם לפני הפצה.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗