GPT
F

FlowEdit

רץ בדפדפן

fallenshockmit2024-12-11

  • gradio

עריכת תמונות מבוססת טקסט בלי צורך בחישוב היפוך מוקדם. הפתרון מיועד למי שרוצה לשנות אובייקטים או סגנון בתמונה קיימת באמצעות פרומפט.

  • הורדות בחודש
  • 79לייקים

מה זה

אתם מעלים תמונת מקור, כותבים תיאור טקסטואלי של מה שמופיע בה, ומגדירים בפרומפט יעד את השינוי המבוקש. ברירת המחדל בממשק מציגה למשל תמונה של חתול על דשא עם פרומפט מקור מתאים, והפיכתו לגור כלבים באותו מיקום בדיוק.

מאחורי הקלעים רצה שיטת FlowEdit, שמתבססת על מודלי זרימה במקום דיפוזיה רגילה עם היפוך. הממשק נותן לבחור בין שני מודלים כבדים: Stable Diffusion 3 Medium או FLUX.1-dev, ומאפשר לקבוע פרמטרים של חוזק השינוי והנחיית טקסט.

מתאים ל

  • החלפת אובייקט בתמונה

    שינוי של חיית מחמד או פריט מסוים בתוך תמונה קיימת בלי להרוס את הרקע מסביב.

  • שינוי סגנון אמנותי

    התאמת תמונה קיימת לסגנון ציור או מראה חדש בעזרת עדכון הפרומפט והגדרת n_min.

  • השוואת מודלים לעריכה

    בדיקת אותה משימת עריכה מול SD3 ומול FLUX.1 כדי לראות מי שומר טוב יותר על המבנה.

איפה זה נופל

אם תשאירו את אחד משדות הטקסט ריקים תקבלו הודעת שגיאה מיד, כי השיטה מחייבת תיאור מדויק של תמונת המקור. בנוסף, מודל FLUX כבד מאוד על החומרה הנוכחית, ושינוי של פרמטרים מתקדמים עלול להאריך את זמן הריצה משמעותית או להיתקל במגבלות זמן של השרת החינמי.

שאלות
נפוצות

האם השימוש בממשק עולה כסף?

השימוש בעמוד עצמו פתוח ללא תשלום. המערכת רצה על תשתית שיתופית של Hugging Face המקצה מאיץ גרפי לצורך העיבוד.

במה זה שונה מיצירה רגילה במודלים האלה?

במקום לייצר תמונה מאפס לפי טקסט בלבד, כאן התמונה שלכם משמשת עוגן. האלגוריתם מנתב את השינויים כך שרק מה שהגדרתם בפרומפט היעד ישתנה, ושאר התמונה תישמר.

אפשר להריץ את זה על המחשב?

כן, הקוד משתמש בספריות diffusers ו־torch סטנדרטיות. תצטרכו להוריד את הקבצים, להחזיק כרטיס מסך חזק עם מספיק זיכרון עבור FLUX או SD3, ולהגדיר טוקן גישה מתאים.

איך משתמשים

בוחרים מודל מתוך הרשימה, מעלים תמונה, מזינים את שני הפרומפטים ולוחצים על Run FlowEdit. החומרה שמריצה את העסק היא מאיץ מסוג zero-a10g שמקצה משאבים לפי דרישה. הרצה של מודל כמו FLUX עם 50 צעדים תדרוש סבלנות, במיוחד אם מגדילים את ערך הדיגום הממוצע בהגדרות המתקדמות.

הרישיון

קוד הממשק מפורסם ברישיון MIT שמאפשר שימוש חופשי וגמיש, אך המודלים עצמם מגיעים מבית Stability AI ו־Black Forest Labs וכוללים תנאי שימוש משלהם.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗