diffusers-fast-inpaint

מה זה

אתם מעלים תמונה, צובעים עליה מסכה עם כלי המחיקה, ומקלידים הנחיה רגילה ושלילית למה שתרצו לראות בפנים. יש גם אפשרות לסמן אם להדביק בחזרה את התמונה המקורית מסביב לאזור שנערך. התוצאה מוצגת בסליידר שמשווה בין המקור לתמונה החדשה, ואפשר להעביר אותה בלחיצה אחת בחזרה לקלט כדי להמשיך לעבוד עליה.

מאחורי הקלעים הקוד משתמש בצינור של Diffusers עם ControlNet Union של המפתח עצמו, יחד עם sdxl-vae-fp16-fix ומתזמן TCDScheduler. בתפריט הבחירה מופיע מודל RealVisXL V5.0 Lightning, שנועד לייצר תמונות ריאליסטיות במעט צעדים על בסיס SDXL.

מתאים ל

• החלפת חפצים בצילום

  צובעים פריט קיים בתמונה, כותבים מה לשים במקומו, והוא משתלב ברקע עם מודל ריאליסטי.

• עריכה חוזרת בשלבים

  מעבירים את התוצאה המוכנה לקלט בלחיצה אחת וממשיכים לצבוע אזור נוסף בלי להוריד את הקובץ.

• בדיקת שילוב מודלים

  בוחנים איך ControlNet Union עובד בפועל לצד מודל מואץ כמו RealVisXL Lightning.

איפה זה נופל

הבעיה המיידית היא שהאפליקציה כבויה ולא פעילה כרגע בדפדפן. מעבר לכך, היא נבנתה רק כהוכחת היתכנות למדריך על מילוי תמונות בבלוג, ולכן היא לא מציעה שליטה מתקדמת בעוצמת הטשטוש, במספר הצעדים או ביחס הגובה והרוחב של התמונה. מי שבונה על כלי עבודה יציב ויומיומי יצטרך לקחת את הקוד ולהריץ אותו בסביבה פרטית.

איך משתמשים

לוחצים על כפתור Generate אחרי שצובעים את המסכה ובוחרים מודל מהרשימה. כרגע לא תצליחו להריץ אותה ישירות באתר כי השרת שלה נמצא במצב מושהה. בעמוד מוגדרת חומרת מעבד בסיסית, אבל הקוד דורש גישה למאיץ גרפי ומסתמך על חלוקת משאבים של המערכת כדי לבצע את החישוב.

הרישיון

הפרויקט פורסם תחת רישיון apache-2.0 שמאפשר שימוש חופשי בקוד, שינוי שלו והפצה, כולל לצרכים מסחריים. אין הצהרה נפרדת לגבי זכויות בתמונות שמעלים או מייצרים, והן כפופות לתנאי המודלים שמריצים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗