Flux.2-Klein-9B-SmartCharacterSwap
קוד פתוחnhathoangfotoapache-2.02026-06-01
מתאם לורה להחלפת פנים מורכבת שמתוכנן לשמור על תאורה מקורית ולהתמודד עם הסתרות כמו ידיים, שיער או הינומות. הוא מתלבש על מודל בסיס בגודל תשעה מיליארד פרמטרים ומיועד לצילום ריאליסטי בלבד.
- 165 MBמשקל הקבצים
- 2,479הורדות בחודש
- 66לייקים
מה זה
מדובר במתאם מסוג לורה במשקל של 165 מגה בייט, שנבנה מעל מודל הבסיס של פלוקס 2 קליין 9B. המטרה המרכזית שלו היא החלפת דמויות ופנים בתמונות קיימות, בדגש על מקרים שבהם כלים רגילים מדביקים פרצוף שטוח וחסר עומק. הוא מתמקד בשמירה על מרקם עור טבעי וצורת עצמות, בלי להחליק את הפרטים.
ההבדל המשמעותי מול החלפות פנים פשוטות מתבטא בהבנת עומק ובשילוב התאורה. לפי התיעוד, הוא מזהה אלמנטים שמסתירים חלק מהפנים כמו אצבעות, מיקרופונים או בדים שקופים, ומשלב את הזהות החדשה מתחתיהם. בנוסף, הוא מתאים את הגוונים והצללים לסצנת היעד, כולל תמונות שחור לבן קונטרסטיות במיוחד.
מתאים ל
- עמדות צילום ממוחשבות
שילוב זהויות של משתמשים בתמונות מוכנות מראש שדורשות עיבוד מהיר בארבעה צעדים.
- עיבוד פורטרטים מסחרי
החלפת פנים בסצנות עם הסתרות מורכבות כמו הינומות או ידיים על הפנים בלי להרוס את העומק.
- התאמת דמויות לתאורה קשה
השתלת פנים בתוך סצנות שחור לבן או צילומים עם צללים כבדים בלי לאבד את הגוון המקורי.
איפה זה נופל
המתאם הזה דוחה באופן מוחלט סגנונות מצוירים, איורים או מראה דיגיטלי מוחלק, אז אין מה לנסות להשתמש בו לאנימציה או לקונספט ארט. כל התיעוד מבוסס על הצהרות של היוצר עם שתי דוגמאות ויזואליות בלבד, בלי שום מדדי דיוק או בדיקות כמותיות עצמאיות על שמירת זהות מול תנוחות קיצוניות. בנוסף, חובה להחזיק תשתית מתאימה למודל הבסיס של תשעה מיליארד פרמטרים, כי הלורה עצמה לא פועלת לבד.
שאלות
נפוצות
האם הקובץ של 165 מגה בייט מספיק כדי לעבוד?
לא. זהו מתאם לורה בלבד, ולכן חייבים להוריד ולהריץ ברקע את מודל הבסיס המלא FLUX.2-klein-base-9B. הקובץ הקטן רק מכוונן את המודל הגדול לבצע החלפת פנים.
מה הערכים המומלצים לעבודה מהירה?
אם מחברים אותו למודל מזוקק או למודל מסוג לייטנינג, מגדירים 4 צעדי ריצה בדיוק, ערך CFG קשיח של 1.0, ומשקל לורה שנע בין 0.85 לבין 1.0.
האם אפשר להשתמש במתאם הזה ליצירת איורים או סגנון אנימה?
לא. היוצר הגדיר אותו באופן מפורש כך שידחה מראה מאויר, פלסטיקי או מצויר, והוא מתאים לתמונות פוטוריאליסטיות בלבד.
איך מריצים
אתם לא מריצים פה מודל מלא אלא מתאם קטן. טוענים את מודל הבסיס של פלוקס 2 קליין 9B בספריית דיפיוזרס בפייתון או בתוך ממשק נודים כמו קומפי יו איי, ואז טוענים את קובץ הסייפטנסורס לתוכו. חייבים להוסיף את מילת ההפעלה jhuangswap בתחילת הפרומפט כדי שההשפעה תיכנס לפעולה.
מבחינת חומרה, כרטיס המסך צריך להחזיק את מודל הבסיס של תשעה מיליארד פרמטרים בפורמט bfloat16, כך שצריך כרטיס חזק עם זיכרון גרפי מתאים. יש שתי צורות עבודה מומלצות, בין עשרים לשלושים צעדים במודל הבסיס הרגיל עם סי אף ג'י של 2.0 עד 4.0, או ארבעה צעדים בלבד עם סי אף ג'י קבוע של 1.0 אם עובדים מעל גרסת בזק מזוקקת.
from diffusers import DiffusionPipeline
pipe = DiffusionPipeline.from_pretrained("nhathoangfoto/Flux.2-Klein-9B-SmartCharacterSwap")
img = pipe("a photo").images[0]הקבצים
12 קבצים במאגר, 165 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
הפרויקט מופץ תחת רישיון אפאצ'י 2.0. הרישיון הזה מתיר שימוש מסחרי חופשי, שינוי של הקוד והמשקולות ושילוב בתוך מוצרים מסחריים בלי תשלום תמלוגים. התנאים העיקריים דורשים שמירה על הודעת זכויות היוצרים וציון הרישיון המקורי בקבצים שמפיצים הלאה.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש
- שימוש בפטנטים