ro
רץ בדפדפןLUUULרישיון לא דווח2024-05-03
החלפת פנים בתמונות ובסרטונים ללא צורך באימון מודל מראש. הכלי מיועד למי שרוצה לעבד קבצי מדיה ישירות דרך הדפדפן עם ממשק גרפי פשוט.
- —הורדות בחודש
- 39לייקים
מה זה
הכלי מבוסס על המאגר roop-unleashed ומריץ את המודל CountFloyd/deepfake. אתם מעלים תמונת מקור של הפנים שרוצים להעתיק, ובוחרים תמונת יעד או קובץ וידאו שבהם רוצים לבצע את ההחלפה. התוצאה היא קובץ מדיה שבו הפנים הוחלפו, עם אפשרות לעבד מספר פנים בו-זמנית, לסנן לפי מגדר או לבחור פנים ספציפיות מתוך סצנה עמוסה.
מתחת למכסה המנוע יש שילוב של טכנולוגיות מפרויקטים כמו insightface, rope ו־GFPGAN. הממשק כולל כלים לשיפור ושחזור תווי פנים לאחר ההחלפה, מיסוך חסימות בעזרת הוראות טקסטואליות, עיבוד באצוות של קבצים מרובים, ואפילו תצוגה מקדימה מפריימים נבחרים בתוך סרטון לפני שמרנדרים את כל הקובץ.
מתאים ל
- החלפת פנים בתמונות
מעלים תמונת פנים ותמונת יעד, והכלי משתיל את הדמות החדשה בדיוק בפריים.
- עיבוד וידאו באצווה
טעינת סרטונים והחלפת דמויות לאורך כל הקובץ או לפי בחירת מגדר מוגדרת מראש.
- שחזור ושיפור פנים
הפעלת משפרי תמונה מובנים לתיקון טשטושים ושיפור החדות של תווי הפנים בתוצאה.
איפה זה נופל
הבעיה הגדולה ביותר כאן היא המהירות. הרצת deepfake על מעבד בסיסי הופכת עיבוד וידאו למשימה איטית להחריד, שלא מתאימה לשימוש שוטף. מעבר לזה, תכונות כמו שידור חי ממצלמת רשת לא באמת מעשיות דרך ענן כזה.
קחו בחשבון שההחלפה תלויה לחלוטין באיכות תמונת המקור ובזווית התאורה, כך שתוצאות עם פנים מוטות או מוסתרות חלקית עלולות להיראות מרוחות או מעוותות. אין כאן מנגנון קסם שמייצר התאמה מושלמת בלי בדיקה ידנית של התוצאה.
שאלות
נפוצות
האם השימוש באפליקציה עולה כסף?
לא, הגישה דרך הדפדפן פתוחה ואינה דורשת תשלום או הזנת פרטי אשראי. עם זאת, היא מוגבלת למשאבי החומרה הבסיסיים שהוקצו לה בענן.
מה קורה עם התמונות והסרטונים שאני מעלה?
הקבצים מעובדים על השרת שעליו רץ המרחב. מכיוון שמדובר בהדגמה ציבורית ללא רישיון או מדיניות פרטיות מפורטת, לא כדאי להעלות חומרים רגישים או אישיים.
האם אפשר להריץ את הכלי על המחשב האישי?
כן, המאגר המקורי כולל קובצי הפעלה ל־Windows ול־Linux ואפשר להוריד אותו מ־GitHub. בהפעלה הראשונה הוא יוריד מודלים בנפח של כשני גיגה-בייט, ואם יש לכם כרטיס מסך תואם זה יעבוד מהר בהרבה.
למה עיבוד הווידאו מתקדם כל כך לאט?
האפליקציה מוגדרת על חומרת מעבד בסיסית בלבד ללא מאיץ גרפי. חישובי deepfake לכל פריים בנפרד דורשים משאבים כבדים, ולכן תהליך הרינדור נמשך זמן רב.
איך משתמשים
נכנסים לעמוד ב־Gradio, מעלים את קובץ המקור עם הפנים, בוחרים תמונת יעד או וידאו, מגדירים את אופן הזיהוי ולוחצים על הפעלה. אין צורך בהרשמה או התחברות כדי להתחיל לעבוד.
ההדגמה הזו רצה על חומרת cpu-basic, וזה צוואר הבקבוק המרכזי כאן. החלפת פנים, ובמיוחד רינדור של סרטוני וידאו ושיפור תמונה, דורשים כוח מחשוב כבד של כרטיסי מסך. על מעבד בסיסי כזה, עיבוד של סרטון קצר ייקח זמן רב מאוד ביחס להרצה מקומית עם מאיץ גרפי ייעודי.
הרישיון
הרישיון לא דווח במאגר. המשמעות היא שאין הרשאה מפורשת לשימוש מסחרי, וכללי השימוש בקוד ובתוצרים לא מוגדרים. בנוסף, המפתחים מדגישים שהכלי מיועד לצרכים טכניים ואקדמיים בלבד, ודורשים לקבל הסכמה מכל אדם שפניו מעובדות.