חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
D

anhhayghen/DeepfakeFaceswap

רץ בדפדפן

anhhayghenapache-2.02024-08-03

  • gradio
  • not-for-all-audiences

החלפת פנים בתמונות וסרטוני וידאו בעזרת מודלים ייעודיים. היא מיועדת למי שרוצה לערוך תוכן ויזואלי ישירות מהדפדפן, בלי להתקין סביבות עבודה מורכבות.

  • —הורדות בחודש
  • 64לייקים

מה זה

מעלים תמונת מקור שממנה נלקחים תווי הפנים, ומגדירים את קובץ היעד שבו רוצים להשתיל אותם. הפלט שמתקבל הוא תמונה או סרטון מעודכן שבו הפנים הוחלפו, לצד אפשרות להפעיל עיבוד מקדים או שיפור איכות.

מאחורי הקלעים הקוד מתבסס על insightface ו־inswapper לזיהוי והחלפת הפנים, יחד עם Real-ESRGAN שמיועד לחידוד והגדלת הרזולוציה של התוצאה. הממשק חושף הגדרות מתקדמות שמאפשרות לשלוט בתנאי הזיהוי, להתאים מסכות חיתוך וטשטוש, ואפילו לכוון את גודל הפנים ומיזוג Laplacian כדי להגיע לשילוב טבעי יותר.

מתאים ל

  • החלפת פנים בתמונות

    טעינת פנים מתמונת מקור אחת והדבקתם על גבי דמות בתמונת יעד.

  • עריכת פנים בקטעי וידאו

    החלפת פנים לאורך פריימים של סרטון בעזרת שילוב מסכות ואלגוריתם inswapper.

  • שיפור איכות תווי פנים

    חידוד והעלאת רזולוציה של תוצאת ההחלפה באמצעות מודל Real-ESRGAN.

איפה זה נופל

הבעיה המיידית היא שהיא פשוט קורסת ולא פועלת כרגע בגרסה המקוונת. בנוסף, חומרת מעבד בסיסית לא מתאימה לניתוח וידאו מרובה פריימים, והתהליך עלול להיות אטי מאוד או להיעצר באמצע. ההבטחה לשימוש חופשי לא עוקפת את העובדה שנדרש כוח חישוב אמיתי בשביל לקבל תוצאות מהירות.

שאלות
נפוצות

האם האפליקציה עובדת כרגע בדפדפן?

לא, המצב הנוכחי שלה מוגדר כשגיאת ריצה והיא אינה זמינה לשימוש מיידי. כדי להשתמש בה יש לבדוק את הקוד או לחכות שיוצר המרחב יתקן אותו. עד שזה יקרה, לחיצה על כפתורי העיבוד פשוט לא תפיק דבר.

האם השירות הזה עולה כסף?

האפליקציה פתוחה תחת רישיון apache-2.0 ואינה דורשת תשלום על עצם השימוש. עם זאת, היא יושבת על חומרת מעבד בסיסית וחינמית שמוגבלת מאוד בכוח החישוב שלה. אם תרצו להריץ אותה מהר יותר על שרת משלכם, תצטרכו לשלם על חומרה מתאימה.

אפשר להריץ את הקוד באופן מקומי במחשב?

כן, הקוד כתוב בפייתון עם תלויות מוכרות כמו opencv ו־insightface, כך שניתן לשכפל אותו. ריצה מקומית על כרטיס מסך תהיה עדיפה בהרבה על מעבד הדפדפן הבסיסי שמסופק כאן. זה דורש התקנה ידנית של הספריות והמודלים שמופיעים בקוד.

מה קורה עם התמונות והסרטונים שמעלים לשם?

הקבצים מעובדים ישירות בתוך סביבת העבודה של הפרויקט לפי הלוגיקה שבקוד. אין כאן מנגנון אבטחה ייעודי או הצהרת פרטיות מותאמת אישית של המפתח. לכן לא מומלץ להעלות לשם תמונות רגישות או מידע פרטי.

איך משתמשים

בפועל, כרגע אי אפשר להריץ אותה בדפדפן כי היא מדווחת על שגיאת ריצה. מעבר לזה, המרחב מוגדר על חומרת מעבד בסיסית, מה שאומר שגם אם תתקנו אותה, עיבוד וידאו או החלפת פנים עם Real-ESRGAN ייקחו זמן רב ביחס לכרטיס מסך ייעודי.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמאפשר שימוש חופשי ושינוי של הקוד. לגבי המידע והתמונות שאתם מעלים, אין התחייבות מפורטת במסמכים מעבר למדיניות הכללית של הרצת מרחבים ציבוריים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗