HairCLIP

מה זה

אתם מעלים תמונת פנים ומקבלים גרסה ערוכה עם תסרוקת או גוון אחר. התהליך מחולק לשניים, קודם מיישרים ומשחזרים את הפנים, ורק אחר כך בוחרים סוג עריכה לתסרוקת, לצבע, או לשניהם יחד. צבע השיער מוגדר באמצעות טקסט חופשי, בעוד שהתסרוקת נבחרת מתוך רשימה סגורה שכוללת למשל סגנון אפרו. הממשק כולל גם דוגמאות מוכנות מראש של תמונות שניתן לטעון בלחיצה.

מאחורי הקלעים רץ שילוב של שלושה מודלים שונים. הכלי משתמש ב dlib face landmark לזיהוי תווי הפנים ויישור התמונה, במודל e4e לצורך קידוד הפנים ושחזור שלהם במרחב הלטנטי, ובמודל HairCLIP שמבצע את המניפולציה על השיער בהתאם להנחיות.

מתאים ל

• הדמיית צבע שיער

  מקלידים תיאור צבע באנגלית ובודקים איך הגוון נראה על תמונת הפנים שלכם.

• בדיקת תסרוקות מוגדרות

  בוחרים סגנון שיער מתוך הרשימה ורואים את ההתאמה לפני שמסתפרים.

• ניסוי במודל עריכה

  בוחנים איך שילוב של יישור פנים ועריכת שיער מבוססת טקסט פועל במציאות.

איפה זה נופל

הבעיה המרכזית כרגע היא שהאפליקציה נמצאת במצב של שגיאת ריצה ולא עובדת בפועל בדפדפן. בנוסף, המודל דורש פנים ברורות שניתן ליישר, כך שתמונות בזוויות חדות, עם תאורה קשה או עם כיסויי ראש עלולות להיכשל כבר בשלב הראשון. בחירת התסרוקת מוגבלת רק לאפשרויות שמופיעות ברשימה הסגורה ולא ניתנת להגדרה חופשית.

איך משתמשים

טוענים תמונה ולוחצים קודם כל על Preprocess כדי ליישר את הפנים ולחלץ את הווקטור שלהם. בשלב השני בוחרים סגנון מהרשימה, מקלידים תיאור צבע באנגלית ולוחצים על Run לקבלת התוצאה. הממשק פתוח בדפדפן ולא דורש התחברות. עם זאת, הוא מוגדר על חומרת מעבד בסיסית, מה שהופך עיבוד כבד של רשתות כאלה לאיטי למדי.

הרישיון

הרישיון של היישום לא דווח בקוד או בתיעוד. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בתוצאות, ולא ידוע מהם תנאי הפרטיות בנוגע לתמונות שמעלים.

הרישיון המלא ב־Hugging Face ↗