חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
F

FLUX.1-inpaint-dev

רץ בדפדפן

SkalskiPmit2024-08-13

  • gradio

הכלי מיועד למי שרוצה לערוך חלקים מתמונה קיימת באמצעות טקסט. אתם מסמנים אזור ידנית או מבקשים לתפוס אותו בתיאור, ומקבלים תמונה מתוקנת.

  • —הורדות בחודש
  • 90לייקים

מה זה

מעלים תמונה לתוך עורך פשוט, ומשם יש שתי דרכים להגדיר מה לשנות. אפשר לצייר מסכה ישירות עם מברשת לבנה על האזור שרוצים להחליף, או לכתוב תיאור טקסטואלי שמסביר מה לבודד, אבל אי אפשר לשלב בין שניהם יחד. בנוסף כותבים הנחיית טקסט שמגדירה מה לייצר במקום מה שנמחק.

למרות שהשם של הדף מפנה לגרסת הפיתוח, הקוד טוען בפועל את המודל FLUX.1-schnell דרך צינור העבודה של diffusers. בהגדרות המתקדמות אפשר לכוונן טשטוש והרחבה של המסכה, לשנות סיד, ולקבוע את חוזק השינוי ומספר צעדי ההסקה. יש גם תצוגת בדיקה שמאפשרת לראות את המסכה שנוצרה לפני שרצים הלאה.

מתאים ל

  • החלפת אובייקט בתמונה

    צובעים פריט קיים עם המברשת ומקלידים מה לשים במקומו.

  • סימון אזור בעזרת טקסט

    מגדירים במילים מה לבודד בתמונה במקום לצייר מסכה ידנית.

  • תיקון פגמים מקומיים

    מכוונים את עוצמת השינוי וטשטוש המסכה כדי להטמיע חלק חדש.

איפה זה נופל

הבעיה המיידית היא שהדף תקול ולא עובד כרגע בגלל שגיאת ריצה. מעבר לזה, השם של הכלי מטעה. הוא מציג את עצמו כגרסת הפיתוח, אבל הקוד שלו מריץ את גרסת schnell שהיא פחות מפורטת ונועדה לפעולה מהירה יותר. בנוסף, הקוד דורש לבחור רק מסכה ידנית או רק תיאור טקסטואלי למסכה, ואם תנסו להזין את שניהם יחד הפעולה תיחסם מיד.

שאלות
נפוצות

האם הכלי פועל כרגע בדפדפן?

לא. המצב המדווח שלו הוא שגיאת ריצה, ולכן אי אפשר להריץ בו פקודות ישירות עד שהמפתח יתקן את ההרצה.

באיזה מודל משתמשים כאן בפועל?

למרות שהשם כולל את המילה dev, הקוד טוען את המודל FLUX.1-schnell. הגרסה הזאת מכוונת למהירות וביצועים קלים יותר.

האם אפשר להריץ את זה מקומית?

כן, הקוד בנוי ב־Gradio ומשתמש בספריית diffusers תחת רישיון MIT. תצטרכו להתקין את התלויות ולהחזיק מעבד גרפי מתאים כדי להריץ אותו אצלכם.

אפשר גם לצייר מסכה וגם לתאר אותה במילים?

לא, הקוד בודק את זה במפורש. אם תספקו גם ציור של מסכה וגם תיאור טקסטואלי לבידוד אזור, תקבלו הודעת שגיאה שמבקשת לבחור רק דרך אחת.

איך משתמשים

לוחצים על כפתור ההפעלה אחרי שסימנתם מסכה והכנסתם תיאור. המערכת מוגדרת לרוץ על חומרת zero-a10g שמקצה משאבים לפי דרישה. יחד עם זאת, כרגע אי אפשר להשתמש בה ישירות בדפדפן מפני שהיא נמצאת במצב שגיאת ריצה. כדי לעבוד איתה בפועל צריך לבדוק מחדש אם השרת התאושש או להריץ את הקוד עצמאית.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי ושינוי של הקוד. עם זאת, השימוש בפועל כפוף לתנאי הרישיון של המודל שרץ ברקע, FLUX.1-schnell, לגבי התוכן שאתם מעלים או מפיקים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗