FLUX.2-dev-Fun-Controlnet-Union

קוד פתוח

alibaba-paiother2025-12-01

videox_fun

מתאם שליטה מאוחד שמרכז שבעה סוגי התניות שונים לקובץ אחד. הוא מיועד למי שרוצה הכוונה מדויקת של קווי מתאר ותנוחות בלי להחליף משקולות בכל פעם.

15.4 GBמשקל הקבצים
7,176הורדות בחודש
49לייקים

מה זה

מדובר במודל שמולבש על ארבעה בלוקים כפולים של מודל הבסיס, ומאפשר להזין תמונות בקרה מסוגים שונים במקום להסתמך רק על טקסט או על יכולות העריכה הפנימיות. הוא תומך בזיהוי קצוות כמו קאני ו־HED, מפות עומק, תנוחות גוף, קווים ישרים של מבנים, שרבוטים, גווני אפור וגם מצב של עריכת אזורים מסוימים בתמונה.

היתרון המרכזי כאן הוא איחוד היכולות. במקום להוריד ולנהל קובץ נפרד לכל סוג התניה, קובץ אחד מכסה מגוון שימושים. מעבר לזה, המפתחים מסבירים שעריכה רגילה שמבוססת רק על תמונות קלט בבסיס מייצרת לעיתים בעיות של חוסר דמיון או התעלמות מההנחיות, בזמן שחיבור כזה נצמד בצורה עקבית יותר למבנה שביקשתם.

מתאים ל

שחזור תנוחות אנושיות
שומר על העמידה והמנח מהתמונה המקורית בדיוק גבוה, בזמן שהסגנון והדמות משתנים לפי הטקסט.
עבודה לפי קווי מתאר
מאפשר לייצר תמונות חדשות שנשענות על שרטוטים ידניים או קצוות שחולצו מתמונה קיימת.
שילוב תנוחה עם תיקון אזור
מתאים לתיקון חלק מסוים מתוך פריים תוך שמירה מחמבת על תנוחת הגוף בשאר התמונה.

איפה זה נופל

המפתחים מודים בפירוש שאימון ההתניות פוגע ביכולת הזיקוק של המודל, מה שגרם לגרסה המקורית להציג ביצועים ירודים, ורק בגרסה המאוחרת ניסו לפתור זאת באמצעות אימון על דאטה משופר ותהליך זיקוק נוסף. מעבר לזה, כדי לשמור על יציבות ולא לקבל תוצאות שבורות, חובה לספק פרומפט טקסטואלי מפורט מאוד, וצריך לכייל ידנית את עוצמת ההתניה לטווח צר שבין 0.65 ל־0.80.

שאלות
נפוצות

איזו מבין שתי גרסאות המשקולות כדאי להוריד?

עדיף לבחור בגרסה שמסומנת במספר 2602. המפתחים מציינים שהגרסה המוקדמת הציגה ביצועים ירודים בגלל בעיות בתהליך האימון, ובגרסה החדשה הם אימנו על נתונים טובים יותר, הוסיפו תמיכה בשרבוטים ובגווני אפור, וביצעו זיקוק מתקן.

איך מונעים מהמודל להתעלם מתמונת ההתניה?

הכרטיס מדגיש שחובה להשתמש בפרומפט מפורט במיוחד כדי לשמור על יציבות. בנוסף, מומלץ להגדיר את ערך עוצמת ההתניה בין 0.65 ל־0.80, שזה הטווח שבו מתקבל האיזון הנכון בין שמירה על הפרטים לבין כוח ההשפעה של הבקרה.

איך מריצים

כדי להריץ את העסק צריך לשכפל את המאגר הייעודי ולמקם את הקבצים במבנה תיקיות מסוים, כולל מודל הבסיס עצמו. משקל הקבצים כאן לבדו מגיע ל־15.4 גיגה-בייט שמחולקים בין הגרסאות, וזה עוד לפני שמחשבים את המשקל של מודל הבסיס עצמו. אתם תצטרכו כרטיס מסך חזק מאוד עם נפח זיכרון מכובד כדי להחזיק את שניהם יחד.

יש כאן שתי גרסאות של משקולות. הגרסה שמסומנת במספר 2602 כוללת תמיכה נוספת בשרבוטים ובגווני אפור, ועברה זיקוק מחדש אחרי האימון כדי לתקן ירידה בביצועים שהייתה בגרסה הקודמת. ההרצה נעשית דרך סקריפט ייעודי ולא דרך ממשק פשוט, כך שאם אין לכם תשתית מתאימה עדיף לפנות לפתרונות מנוהלים.

pip install -U huggingface_hub
hf download alibaba-pai/FLUX.2-dev-Fun-Controlnet-Union

הרישיון

הרישיון מוגדר תחת סיווג כללי ולא לפי רישיון קוד פתוח סטנדרטי ומוכר. אי אפשר לדעת מהכרטיס בלבד האם מותר להשתמש בו במוצרים מסחריים או מה המגבלות על הפצה. מי שמתכנן להכניס אותו למערכת פעילה חייב לבדוק את תנאי השימוש המדויקים במאגר המקורי לפני שמתחילים לפתח.

הרישיון המלא בעמוד המודל ↗