Deepfacelive-DFM-Models
קוד פתוחdimanchkekgpl-3.02023-07-26
המאגר מרכז דגמי פנים מוכנים בפורמט dfm וערכות תמונות להחלפת פנים בזמן אמת. מי שמחפש להריץ דיפ פייק מוכן על סלבריטאים בלי להתחיל לאמן מאפס ימצא כאן נקודת זינוק.
- 2,885הורדות בחודש
- 35לייקים
מה זה
במקום מאגר נתונים קלאסי של טבלאות או תמונות גולמיות, יש כאן אוסף של 268 קבצים שנועדו ישירות לתוכנות DeepFaceLive ו־DeepFaceLab. הקבצים כוללים מודלים מאומנים מראש של מפורסמים שונים כמו אמינם, רוברט פטינסון, ואמיליה קלארק, ברזולוציות מוגדרות כמו 224, 256 ו־288 פיקסלים תחת תיקיות AMP.
התוכן לוקט מחברי קהילה בשרתי דיסקורד ובפורומים ייעודיים כמו mrdeepfakes ו־deepfakevfx. המאגר מחולק לקבצי dfm מוכנים לשימוש, מודלים מאומנים מראש שנועדו לקצר זמני אימון עצמאי, ותיקיות facesets שמכילות תמונות פנים חתוכות של הדמויות להחלפה. אין בכרטיס תיעוד על שיטות סינון, ניקוי רעשים, או אופן אחיד שבו המודלים אומנו.
מתאים ל
- החלפת פנים בשידור חי
טעינת קובץ dfm מוכן לתוך DeepFaceLive מאפשרת להחליף פנים בזמן אמת בשיחות וידאו או בהזרמת מדיה.
- האצת אימון מודלים
הצבת מודלים מאומנים מראש בתיקיית העבודה של DeepFaceLab כדי לקצר את הזמן הנדרש ליצירת מודל פנים מותאם.
- בדיקות תאימות ב־Facefusion
בדיקת תמיכה של קובצי dfm בגרסאות הבדיקה של Facefusion לצורך החלפת תווי פנים בסרטוני וידאו קיימים.
איפה זה נופל
זה לא מאגר שמתאים למחקר סטטיסטי מבוקר או לאימון מודלים גנריים מאפס. הנתונים מייצגים אנשים ספציפיים בלבד, לרוב שחקנים ואנשי ציבור מוכרים, מה שמייצר הטיה ברורה ואי התאמה מוחלטת לזיהוי או החלפה של אוכלוסיות אחרות. המפרסם מצהיר במפורש שאינו לוקח אחריות על החומרים שהועלו ושחלקם נוצרו על ידי משתמשים שונים ברשת. חסר כל מידע על גודל המדגמים, מקורות הצילום המקוריים, או תנאי התאורה וההבעות שקיימים בכל סט, כך שאין דרך לחזות את איכות התוצאה בלי לבדוק כל קובץ בנפרד.
שאלות
נפוצות
האם מותר להשתמש במאגר הזה למוצר מסחרי?
הרישיון המוצהר הוא gpl-3.0 שמציב מגבלות קוד פתוח על פרויקטים נגזרים, אך הבעיה העיקרית היא זכויות היוצרים. המאגר מכיל פנים ושמות של ידוענים שנאספו ללא אישור מפורש מהמצולמים. שימוש מסחרי בתוכן כזה חושף אתכם לתביעות קנייניות ולפגיעה בפרטיות, ולכן הוא אינו מתאים למוצר מסחרי.
כמה המאגר שוקל ואיך מורידים ממנו נתונים?
המאגר מורכב מ־268 קבצים עצמאיים, חלקם דחוסים בפורמט zip וחלקם שמורים כקובצי dfm ישירים. המשקל הכולל של כלל הקבצים אינו מצוין בכרטיס, אך אין צורך להוריד את כולו בבת אחת. משתמשים מורידים נקודתית רק את המודל או חבילת הפרצופים שדרושה לפרויקט הספציפי שלהם.
האם יש במאגר תמיכה בפנים או שמות בעברית?
שמות הקבצים והתיעוד כתובים באנגלית בלבד ואינם כוללים התייחסות לישראל או לעברית. הדמויות במאגר הן ברובן מפורסמים מהעולם המערבי והאסייתי, כמו רוברט פטינסון וצ'ן שו. אין בנמצא מודלים של דמויות מקומיות ישראליות בתוך התיקיות הקיימות.
איך נאסף המידע ומי עומד מאחוריו?
הקבצים לוקטו מפלטפורמות שיתוף קהילתיות כמו שרתי דיסקורד ופורומים mrdeepfakes ו־deepfakevfx. המשתמש שהעלה את המאגר ריכז עבודות של חברי קהילה שונים וציין חלק מכינויי היוצרים בתיאור. המקורות הראשוניים של סרטי הווידאו והתמונות ששימשו לבניית המודלים אינם מפורטים.
במה המאגר הזה שונה ממאגרי תמונות פנים רגילים?
מאגרים סטנדרטיים מספקים תמונות גולמיות כדי שתוכלו לאמן ארכיטקטורות ראייה ממוחשבת מכל סוג. כאן מדובר בקבצי משקלים מוכנים של מודלים שמיועדים ישירות להזרקה בתוכנת DeepFaceLive. המטרה היא להפעיל את ההחלפה מיד, ולא לבצע מחקר או הערכת ביצועים כללית של אלגוריתמים.
איך טוענים
אין צורך באישור גישה מיוחד כדי להוריד את הקבצים, והם פתוחים ישירות. משתמשים שמורידים קבצי ארכיון zip צריכים לחלץ את קבצי ה־dfm מתוכם ולהעביר אותם לתיקיית userdata/dfm_models בתוכנת DeepFaceLive, או לשלב אותם בגרסאות פיתוח של Facefusion. כדי לאמן מודל עצמאי מהר יותר, מניחים את המודלים המאומנים בנתיב workspace/data_dst/aligned של DeepFaceLab. הפורמטים העיקריים כאן הם dfm וארכיוני zip, כך שלא טוענים את הדאטהסט דרך ספריות פייתון סטנדרטיות אלא מורידים קבצים נקודתיים לפי הצורך.
from datasets import load_dataset
ds = load_dataset("dimanchkek/Deepfacelive-DFM-Models")הרישיון
המאגר מוגדר תחת רישיון gpl-3.0, שמחייב שיתוף באותו רישיון ופתיחת קוד מקור בפרויקטים שמשתמשים בו או נגזרים ממנו. עם זאת, היוצר מבהיר שאינו טוען לבעלות על הנתונים שהועלו מלבד אלו שיצר בעצמו, והקבצים כוללים דמויות של מפורסמים שנאספו מהרשת. שימוש מסחרי מלווה בסיכון משפטי כפול, גם מבחינת תנאי הרישיון של המודלים הנגזרים וגם בגלל היעדר זכויות יוצרים ואישורי שימוש בתמונות הפנים עצמן.