PhotoMaker-V2 — הדגמה
קוד פתוחTencentARCapache-2.02024-07-11
הכלי מייצר תמונות חדשות של אדם ספציפי על בסיס צילומים קיימים ותיאור טקסטואלי. הוא מיועד למי שרוצה לשמור על תווי פנים עקביים בסגנונות ובהקשרים שונים.
- 1.7 GBמשקל הקבצים
- —הורדות בחודש
- 1,219לייקים
מה זה
אתם מעלים תמונות פנים ברורות של אדם וכותבים תיאור טקסטואלי שכולל מילת הפעלה מיוחדת. התוצאה היא תמונה חדשה שמשלבת את תווי הפנים של המקור בתוך הסצנה, הסגנון ויחס התצוגה שבחרתם. יש גם אפשרות לצייר סקיצה ידנית כדי לכוון את הקומפוזיציה.
מאחורי הקלעים רץ שילוב של מודל הבסיס RealVisXL V4 יחד עם PhotoMaker V2 ומתאם T2I Adapter לסקיצות, לצד מנגנון זיהוי פנים שמחלץ את מאפייני המשתמש. הדוגמאות המוכנות בממשק מציגות עיבודים של דמויות על בסיס תמונות קיימות, כמו אישה ג'ינג'ית או דיוקן גברי.
מתאים ל
- דיוקנאות בסגנונות שונים
יצירת תמונות פרופיל מגוונות לאותו אדם תוך שמירה על תווי הפנים שלו.
- הנחיית קומפוזיציה מסקיצה
שילוב שרבוט ידני כדי לקבוע את מיקום הדמות והעצמים בפריים החדש.
- בדיקת עיצוב לדמויות
הכנסת דמות קבועה לסביבות בדיוניות או היסטוריות לפי הנחיית טקסט.
איפה זה נופל
המודל תלוי לחלוטין בזיהוי פנים מוצלח בתמונות המקור. אם הפנים מטושטשות או לא מזוהות, התהליך ייעצר מיד בשגיאה. בנוסף, חובה להקפיד על תחביר מדויק בהנחיה, כולל הופעה בודדת של מילת ההפעלה, אחרת לא ייווצר פלט.
אותה משפחה
PhotoMaker יצא ב־2 גרסאות שיש להן עמוד כאן. אלה האחרות, לפי כמה מורידים אותן.
שאלות
נפוצות
האם השימוש עולה כסף?
הגישה לממשק הזה פתוחה ללא תשלום ישיר בדפדפן. אין צורך להזין אמצעי תשלום כדי להעלות תמונות ולייצר תוצאות. כל עוד משאבי החומרה הציבוריים זמינים, אפשר להשתמש בו חופשי.
כמה זמן לוקח לייצר תמונה?
זמן היצירה מושפע ישירות ממספר השלבים שהגדרתם ומהעומס על השרת. כרטיס המסך A10G מבצע את העבודה תוך שניות בודדות עד חצי דקה לריצה סטנדרטית. אם יש תור של משתמשים אחרים, ההמתנה תתארך בהתאם.
אפשר להריץ את זה על המחשב האישי?
כן, הקוד והמשקלים מבוססים על קוד פתוח תחת רישיון מתאים וניתנים להורדה. עם זאת, תצטרכו כרטיס מסך ייעודי וחזק כדי להריץ את המודלים של SDXL בצורה מקומית. ללא חומרה מתאימה התהליך יהיה אטי מאוד או ייכשל.
מה ההבדל בין הממשק הזה למודל הגולמי?
הממשק עוטף את המודל ומחבר אליו מנגנוני זיהוי פנים, סגנונות מוגדרים מראש ולוח לציור סקיצות. המודל עצמו דורש כתיבת קוד והגדרת פרמטרים ידנית בכל הרצה. כאן מקבלים סביבת עבודה מוכנה שבודקת שגיאות בקלט עוד לפני היצירה.
איך מריצים
מעלים קובץ תמונה אחד או יותר, מקלידים הנחיה שמכילה את מילת הטריגר, בוחרים סגנון ולוחצים על כפתור השליחה. העיבוד רץ על מאיץ A10G שמוקצה לפי דרישה, כך שזמן ההמתנה תלוי בעומס ובמספר שלבי הרינדור שהגדרתם, ללא צורך בהרשמה מראש.
pip install -U huggingface_hub hf download TencentARC/PhotoMaker-V2
הקבצים
3 קבצים במאגר, 1.7 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
הקוד והמודלים זמינים תחת רישיון apache 2.0 המאפשר שימוש נרחב, כולל מסחרי. המידע והתמונות שאתם מעלים נשלחים לשרת לצורך העיבוד הנוכחי ולא מצוין תנאי פרטיות ששומר עליהם מקומית.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש
- שימוש בפטנטים