Inpaint-Anything

מה זה

אתם מעלים תמונה, לוחצים על האובייקט שרוצים להעלים ומקבלים תמונה נקייה שבה הרקע מושלם במקום החלק שנמחק. הממשק מחזיר שלוש אפשרויות שונות של מסיכות פילוח ומציג את התוצאות עבורן.

מאחורי הקלעים הקוד משלב בין Segment Anything של מטא לצורך זיהוי העצם ובידודו, לבין מודל Lama שמבצע את ההשלמה של הרקע החסר. במטא-דאטה של הדף מופיע גם המודל stabilityai/stable-diffusion-2-inpainting, אף שבקוד עצמו בולטת במיוחד הקריאה לפונקציות של Lama. המערכת כוללת גם סליידר שמאפשר להרחיב את שולי המסיכה כדי למנוע הילות מסביב לאזור החתוך.

מתאים ל

• מחיקת עוברי אורח

  סימון בלחיצה על אנשים ברקע של צילום חוץ כדי להעלים אותם מהתמונה.

• הסרת כתמים ופגמים

  בחירת נקודה על לכלוך או פגם במוצר והשלמת המרקם המקורי באמצעות האלגוריתם.

• ניקוי שלטים מפריים

  בידוד שלטים או כיתובים לא רצויים בעזרת המודל והחלפתם ברקע אחיד.

איפה זה נופל

הבעיה המיידית היא שהדמו בכלל לא עובד כרגע בגלל תקלת מערכת בהרצה. מעבר לזה, אין כאן אפשרות להכניס הנחיית טקסט כדי להחליף את החלק שנמחק באובייקט אחר, אלא רק למחוק ולמלא ברקע קיים. דיוק המחיקה תלוי לחלוטין בלחיצה על נקודה בודדת ובבחירת גודל ההרחבה של המסיכה.

איך משתמשים

טוענים תמונה לחלון הקלט, לוחצים על הנקודה שבה נמצא העצם כדי לתעד את הקואורדינטות, ולוחצים על כפתור חיזוי המסיכה. לאחר מכן לוחצים על כפתור ההשלמה כדי להריץ את התיקון. כרגע האפליקציה במצב שגיאת ריצה, כך שאי אפשר להפעיל אותה ישירות בדפדפן בלי שהיוצרים יתקנו אותה. על הנייר היא מוגדרת על שרת עם שדרוג מעבד ללא כרטיס מסך, מה שהיה הופך ריצה תקינה לאיטית למדי.

הרישיון

הקוד מפורסם תחת רישיון apache-2.0, שמאפשר שימוש חופשי כולל שימוש מסחרי והתאמה של הקוד. אין מידע בקוד לגבי מדיניות שמירת התמונות שאתם מעלים או התוצרים שמתקבלים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗