fall

מה זה

מעלים תמונת מקור שממנה נלקחים הפנים, ותמונת יעד או קובץ וידאו שבו רוצים להשתיל אותם. הממשק מחולק ללשוניות לפי סוג המשימה, מתמונה בודדת ועד עיבוד קבוצתי של כמה תמונות מקור מול כמה תמונות יעד בו זמנית. התוצאה היא קובץ תמונה מעובד או סרטון וידאו מרונדר מחדש, לצד חלון יומן שמציג את פעולות העיבוד.

מאחורי הקלעים הקוד משתמש במודול פנימי בשם SinglePhoto FaceSwapper, לצד כלי עיבוד תמונה מבוססי OpenCV. המערכת כוללת אפשרויות למיפוי ידני לפי אינדקס של פנים, כך שאפשר לקבוע איזה פרצוף מתחלף באיזה, ובווידאו יש אפשרות לשמר את רצועת השמע המקורית.

מתאים ל

• החלפת פנים בתמונה בודדת

  מעלים תמונת מקור ותמונת יעד ומחליפים פרצוף ספציפי לפי מספר אינדקס.

• עיבוד וידאו עם שמירת קול

  מחליפים פנים בתוך סרטון יעד תוך שמירה על פס הקול המקורי של הקובץ.

• מיפוי פנים מרובה

  החלפה של כמה פרצופים שונים בו זמנית על בסיס רשימת מקורות ומיפוי מותאם.

איפה זה נופל

המגבלה הכי גדולה היא החומרה. הרצה של עיבוד וידאו פריים אחר פריים על מעבד בסיסי תהיה איטית מאוד על קבצים ארוכים. הממשק דורש לנחש או לדעת מראש את אינדקס הפנים בתמונה, בלי תצוגה מקדימה שמסמנת מי זה פנים מספר אחת ומי שתיים. אם המודל מזהה את הסדר אחרת ממה שחשבתם, ההחלפה תתבצע על האדם הלא נכון.

איך משתמשים

בוחרים בלשונית המתאימה, מעלים את קובצי המדיה ומגדירים את מספרי הפנים להחלפה. בווידאו אפשר לסמן שמירה של האודיו המקורי, ולאחר מכן לוחצים על כפתור ההפעלה.

העיבוד רץ על חומרת מעבד בסיסית בלבד ללא מאיץ גרפי. בתמונות בודדות זה עניין של שניות, אבל בווידאו או בריבוי תמונות זה ייקח זמן ממושך בגלל פירוק הפריימים והעיבוד הכבד על המעבד.

הרישיון

הרישיון מוגדר כלא ידוע. אין הצהרה רשמית על תנאי השימוש בקוד או בהגבלות מסחריות, והתמונות או הסרטונים שאתם מעלים עוברים דרך השרתים שעליהם הממשק מאוחסן.

הרישיון המלא ב־Hugging Face ↗