חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
F

rafaaa2105/flux-ghibsky-illustration

רץ בדפדפן

rafaaa2105mit2024-10-14

  • gradio

הדגמה שמייצרת איורים בסגנון נופים קסומים של סטודיו ג'יבלי מתוך תיאור טקסטואלי. מתאימה למי שרוצה לבדוק התאמה של מודל פלאקס לסגנון הזה ישירות בדפדפן.

  • —הורדות בחודש
  • 41לייקים

מה זה

כותבים תיאור טקסט באנגלית, לוחצים על כפתור ההפעלה, ומקבלים תמונת נוף מאוירת. הממשק כולל דוגמאות מובנות של פרומפטים שאפשר לטעון ישירות לתיבת הטקסט כדי לראות את הכיוון הוויזואלי בלי להמציא תיאור מאפס.

מאחורי הקלעים רץ המודל FLUX.1-dev של Black Forest Labs יחד עם שילוב של aleksa-codes/flux-ghibsky-illustration שמתמקד בסגנון האיור הספציפי. הקוד משתמש במפענח taef1 כדי להציג תצוגה מקדימה מהירה של שלבי הציור, ובסוף נעזר ב־VAE המקורי כדי לפלוט את התוצאה הסופית באיכות מלאה. בהגדרות המתקדמות אפשר לשלוט במידות הגובה והרוחב, במספר צעדי היצירה, בערך הסיד ובמדד ההיצמדות להנחיה.

מתאים ל

  • איור נופים לפרויקטים

    יצירת רקעים פסטורליים בהשראת אנימציה יפנית לפי תיאור מילולי מפורט.

  • בדיקת יכולות המודל

    בחינת השפעת כוונון הצעדים וההנחיה על איכות הפלט של גרסת הפלאקס הזו.

  • רעיונאות לעיצוב

    בדיקת שילובי צבעים וקומפוזיציות של סביבות טבע בדיוניות מתוך פרומפטים מוכנים.

איפה זה נופל

הממשק מיועד רק לייצור תמונות חדשות מטקסט, ואין בו שום אפשרות להעלות תמונה קיימת כדי להמיר אותה לסגנון המצויר. הקוד נשען על מודל בסיס רגיש לשפה, כך שכתיבה בעברית תניב תוצאות שגויות או תתעלם מהפרטים, וצריך להזין טקסט באנגלית. בנוסף, חומרת שיתוף כמו זו עלולה להיעצר באמצע אם מגבלת הזמן של ההרצה החינמית נחצית בעת בחירת מספר צעדים גבוה במיוחד.

שאלות
נפוצות

האם השימוש בממשק עולה כסף?

לא, הגישה בדפדפן פתוחה וחינמית לחלוטין. החומרה ממומנת במסגרת ההרצה הציבורית של Spaces, ולכן אין צורך להכניס אמצעי תשלום.

האם אפשר להריץ את זה מקומית על המחשב?

כן, הקוד כתוב עם ספריות diffusers סטנדרטיות וזמין תחת רישיון MIT. תצטרכו כרטיס מסך חזק שמסוגל להחזיק את FLUX.1-dev ואת המשקלים של ההתאמה.

מה קורה לטקסטים שאני מזין?

הפרומפטים מעובדים על גבי השרת שמריץ את המופע כדי לייצר את התמונה. הממשק אינו כולל אחסון פרטי, כך שלא כדאי להקליד שמות או פרטים רגישים.

במה הממשק שונה מהרצת המודל לבד?

הוא מחבר מראש את מודל הבסיס עם תוסף הסגנון של ג'יבסקי ומנגנון תצוגה מקדימה. במקום לתכנת את הצינור מאפס, מקבלים סליידרים מוכנים לכיוון המידות והסיד.

איך משתמשים

מקלידים תיאור בשדה הטקסט או בוחרים אחת מהדוגמאות, ולוחצים על Run. הייצור מתבצע על גבי תשתית ענן עם כרטיס גרפי מסוג zero-a10g, שמוקצה לפי דרישה ומציג פס התקדמות בזמן אמת. תצוגת התמונה נבנית בהדרגה בזכות מפענח ייעודי קל משקל, כך שלא מחכים בחושך עד לסיום התהליך. החומרה הזו סבירה ומחזירה תמונה בתוך שניות בודדות כשהתור פנוי, אך בשעות עומס ההמתנה לחומרה פנויה מתארכת. אין צורך בהתחברות או בהזנת פרטי גישה כדי להריץ את הממשק.

הרישיון

הקוד של הממשק מפורסם ברישיון MIT חופשי. עם זאת, המודל הבסיסי שרץ בפנים הוא FLUX.1-dev, שמגיע במקור עם תנאי שימוש נפרדים שאינם בהכרח מתירים שימוש מסחרי ישיר. כל תוכן שאתם מייצרים מופק על השרת המשותף של המערכת.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗