PhotoMaker-Style

מה זה

מעלים תמונות פנים לקלט, בוחרים סגנון מתוך תפריט מוגדר, וכותבים תיאור טקסט שכולל מילת הפעלה ייעודית. הפלט מציג תמונות חדשות שמשמרות את תווי הפנים של האדם המקורי בתוך הסגנון והסצנה שבחרתם. הדוגמאות המוכנות כוללות תמונות פנים מוכרות כמו לנה או יאנג מי כדי להדגים איך תווי הפנים נשמרים בסגנונות שונים.

מאחורי הממשק רץ צינור שמשלב את PhotoMaker עם מודל הבסיס sdxlUnstableDiffusers ומשקולות לורה. המערכת מחלצת ייצוג של תווי הפנים מכמה תמונות קלט ומשלבת אותם ישירות בתהליך הציור של המודל, בלי תהליך אימון ארוך ומייגע.

מתאים ל

• החלפת סגנון לדיוקן

  לוקחים תמונת פנים אחת או יותר ומפיקים אותה כציור או באיור מותאם אישית.

• שילוב דמות בסצנה חדשה

  מגדירים תיאור טקסט חופשי ומציבים את האדם במיקום חדש לפי ההוראות.

• בדיקת שמירת זהות פנים

  מנסים כמה תמונות של אותו אדם כדי לבחון עד כמה המודל שומר על קווי המתאר.

איפה זה נופל

אם תשכחו לשלב את מילת ההפעלה המדויקת בטקסט, הממשק יזרוק שגיאה ולא יפיק דבר. יש להשתמש בה פעם אחת בלבד בתיאור, אחרת הריצה תיכשל מיד. בנוסף, חובה לספק תמונת פנים ברורה, והתוצאה תלויה באיכות הקבצים שהעליתם ובאיזון מדויק בין חוזק הסגנון לתווי הפנים.

איך משתמשים

גוררים את תמונות הפנים לגלריית ההעלאה, מנסחים תיאור עם מילת הטריגר, ולוחצים על כפתור השליחה. אפשר לשלוט על מספר הצעדים, יחס חוזק הסגנון, כמות הפלטים ומספר הסיד באפשרויות המתקדמות. הריצה מתבצעת על מעבד גרפי מדגם A10G דרך תשתית ענן, כך שזמן העיבוד תלוי בעומס המשתמשים ברגע הנתון.

הרישיון

הפרויקט מופץ תחת רישיון apache-2.0, שמאפשר שימוש חופשי ושינוי של הקוד. יש לבדוק את תנאי המודלים הנוספים הנטענים ברקע לפני שימוש מסחרי ישיר בתוצרים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗