ControlNetMediaPipeFaceSD21

מה זה

אתם מעלים תמונה מקובץ או מצלמים ישירות מהרשת, כותבים תיאור טקסטואלי, והמערכת מחלצת את תווי הפנים בעזרת MediaPipe. משם המידע עובר למודל ControlNet ייעודי שמנחה את מודל הבסיס Stable Diffusion 2.1, יחד עם קידוד טקסט של CLIP ומודלי T5, כדי לייצר גרסה חדשה לגמרי של הדמות ששומרת על אותה זווית בדיוק.

בממשק יש חמש תמונות לדוגמה שכוללות דיוקנאות שונים, כמו pedro-512 או תמונות עם שתי דמויות. בהגדרות המתקדמות אפשר לקבוע את כמות הדמויות לזיהוי, רמת הביטחון בזיהוי הפנים, עוצמת ההשפעה של התנוחה, כמות צעדי הדגימה והפרומפט השלילי.

מתאים ל

• שמירה על זווית פנים

  יצירת דמויות חדשות בסגנונות שונים תוך העתקה מדויקת של כיוון המבט והבעת הפנים מתצלום קיים.

• החלפת סגנון לדמות

  הפיכת צילום עצמי לאיור או דמות בדיונית בעזרת פרומפט מפורט בלי לאבד את תנוחת הראש המקורית.

• בדיקת יכולות קונטרול-נט

  בחינה מהירה של שילוב בין זיהוי פנים של מדיה-פייפ לגרסה 2.1 של סטייבל דיפיוז'ן ישירות בדפדפן.

איפה זה נופל

נכון לעכשיו אי אפשר להריץ את הדף כי הוא נמצא במצב של שגיאת ריצה. מעבר לזה, אם התמונה חשוכה מדי או שהפנים בזווית חדה, זיהוי תווי הפנים של מדיה-פייפ עלול להיכשל ולא תוכלו לייצר שום דבר. המודל מתמקד רק במיקום האיברים ולא בהעתקת הזהות עצמה.

איך משתמשים

לוחצים על כפתור ההפעלה אחרי בחירת קובץ וכתיבת פרומפט. הממשק מבוסס על תור של גראדיו ורץ על מעבד גרפי מסוג T4 medium, כך שייצור תמונה בודדת לוקח בדרך כלל כמה עשרות שניות, תלוי בעומס ובמספר הצעדים שתבחרו. אין צורך בהרשמה או התחברות כדי לנסות אותו ישירות בדפדפן.

הרישיון

הפרויקט מפורסם תחת רישיון openrail. הרישיון מאפשר להשתמש במודל ובפלט שלו כל עוד השימוש עומד בהגבלות השימוש ההוגן והבטיחות של הרישיון, ללא פעולות מזיקות או יצירת תוכן אסור. התמונות שאתם מעלים מועברות ישירות לשרת שמריץ את ההדגמה.

• שימוש מסחרי
• שינוי הקוד
• מגבלות שימוש ברישיון

הרישיון המלא ב־Hugging Face ↗