pixel3dmm

מה זה

אתם מעלים תמונת פנים יחידה דרך הדפדפן, ומקבלים מודל תלת ממדי אינטראקטיבי לצד תוצרי ביניים של העיבוד. המערכת חותכת את הפנים, מריצה עליהן חלוקה למקטעים, מחשבת מפות נורמלים, מייצרת מפת UV ומבצעת מעקב אחר תווי הפנים כדי להתאים את המבנה המרחבי.

הקוד מתבסס על מחקר Pixel3dmm ומריץ צנרת שמחברת בין חבילת facer לבין רשתות ייעודיות לחישוב נורמלים ופריסת טקסטורה. התוצאה הסופית מוצגת בתצוגת תלת ממד שמאפשרת לסובב את המבנה ולבחון את הדיוק שלו. בממשק יש גם דוגמאות מוכנות ששמורות במטמון ומאפשרות לבדוק את התוצאות מיד בלי להעלות קובץ משלכם.

מתאים ל

• שחזור פנים בתלת ממד

  יצירת מבנה תלת ממדי מפורט מתמונת ראש בודדת לשימוש בתוכנות גרפיקה.

• הפקת מפות גאומטריה

  חילוץ מפות נורמלים ומרקם UV מתוך צילום פנים רגיל.

• בדיקת איכות למודל

  בחינת יכולות השחזור של ארכיטקטורת Pixel3dmm על תמונות שונות.

איפה זה נופל

ההדגמה מוגבלת למצב של תמונה בודדת ומתמקדת אך ורק בפנים של אדם אחד מקרוב. אם תעלו תמונה עם זווית חדה מדי, תאורה בעייתית, פנים מוסתרות חלקית או כמה אנשים יחד, חיתוך הפנים והמעקב ייכשלו או ייצרו עיוותים קשים במודל. בנוסף, הדוגמאות המוכנות מראש מציגות מקרים אידיאליים שאינם משקפים בהכרח תמונות שצולמו בטלפון בתנאי שטח.

איך משתמשים

גוררים תמונה לחלון ההעלאה ולוחצים על כפתור השחזור. החישוב רץ על חומרת zero-a10g שמקצה מעבד גרפי לפי דרישה, כך שזמן העבודה תלוי בהקצאה הרגעית ובשלבי העיבוד השונים. אין צורך לפתוח חשבון, אבל בזמני עומס ייתכן שתמתינו בתור למשאבים.

הרישיון

הפרויקט מפורסם תחת רישיון cc-by-nc-4.0. המשמעות היא שהשימוש מותר למטרות מחקר, לימוד והתנסות אישית בלבד, ונאסר לחלוטין לשימוש מסחרי או להפקת רווחים.

• שינוי הקוד
• חובת ייחוס
• שימוש מסחרי: לא

הרישיון המלא ב־Hugging Face ↗