yotamsapi/face-swap

מה זה

אתם מעלים תמונת מקור של פנים ותמונת יעד, והמערך מעביר את תווי הפנים של המקור לכל הדמויות שזוהו בתמונת היעד. הממשק כולל דוגמה מוכנה שמחליפה פנים בין ריק לאילון מאסק ומאפשרת הצגה של התוצאה לצד המקור.

מאחורי הקלעים רץ שילוב של RetinaFace לזיהוי הפנים יחד עם ArcFace לחילוץ מאפייני זהות, FaceDancer, identitypermuter ורשת reconstruction attack. הקוד משתמש בטנזורפלו, שכבות נרמול ועיבוד תמונה מקומי כדי ליישר את הפנים ולמזג אותן חזרה לתוך התמונה המקורית.

מתאים ל

• בדיקת העברת זהות

  בוחנים איך תווי פנים של אדם אחד יושבים על תמונה של אדם אחר לצורכי מחקר.

• החלפת פנים קבוצתית

  מעתיקים פנים ממקור יחיד לכל הפרצופים שמופיעים בתמונת יעד משותפת.

• השוואת תוצאות ויזואלית

  משתמשים במצב ההשוואה המובנה כדי לראות את ההבדלים בין המקור לתוצר הסופי.

איפה זה נופל

הבעיה המיידית היא שהאפליקציה שבורה ולא פועלת כרגע בענן. מעבר לזה, המודל מחליף פנים באופן עיוור בכל הדמויות שהוא מוצא בתמונת היעד, בלי בחירה ידנית של דמות מסוימת, ועיבוד מבוסס מעבד בלבד איטי מאוד בהשוואה לכרטיסי מסך ייעודיים.

איך משתמשים

בפועל אתם בוחרים את התמונות, קובעים פרמטרים מספריים שמופיעים בממשק ולוחצים על הפעלה כדי לקבל תמונה מעובדת. כרגע העמוד מוגדר עם שרת מסוג cpu-upgrade, אבל הוא נמצא במצב שגיאת ריצה (RUNTIME ERROR), כך שאי אפשר להריץ אותו ישירות בדפדפן עד שיוצר החלל יתקן את הקוד.

הרישיון

הפרויקט מפורסם תחת רישיון cc-by-nc-sa-4.0. מותר להשתמש בקוד, לשנות אותו ולשתף אותו הלאה תחת אותם תנאים, אך חל איסור מוחלט על שימוש מסחרי מכל סוג.

• שינוי הקוד
• חובת ייחוס
• שימוש מסחרי: לא

הרישיון המלא ב־Hugging Face ↗