FLUX.1-dev-ControlNet-Union-Pro-2.0 — הדגמה
קוד פתוחShakker-Labsother2025-04-16
האפליקציה מייצרת תמונות מונחות באמצעות שילוב של מודל FLUX.1 dev ומספר בקרי ControlNet. היא מיועדת למי שרוצה שליטה מבנית מדויקת בגנרציה ולא רק תיאור טקסטואלי.
- 2.1Bפרמטרים
- 4.0 GBמשקל הקבצים
- —הורדות בחודש
- 94לייקים
מה זה
הממשק מקבל תמונת התניה מוכנה כמו מפת עומק או קווי קאני, או לחילופין תמונת מקור רגילה שממנה המערכת מחלצת את המאפיינים בעצמה. לצד זה מזינים הנחיה טקסטואלית, שברירת המחדל שלה היא best quality, ומכוונים פרמטרים כמו עוצמת הבקרה, סיום שלב ההנחיה, מספר צעדי הדגימה וסולם ההנחיה.
בצד המודלים, הקוד משלב את מודל הבסיס FLUX.1 dev יחד עם מתאמי בקרה של Shakker-Labs. לצורך חילוץ התניות מתמונות רפרנס נטענים כמה מודלים ייעודיים, ביניהם Depth Anything V2 למיפוי עומק, Openpose לזיהוי תנוחות גוף, ו־Anyline של MistoLine לזיהוי קווים מדויק. הפלט מציג לצד התוצאה הסופית גם את תמונת ההתניה שעובדה בפועל.
מתאים ל
- יצירה לפי מפת עומק
הפקת תמונה חדשה ששומרת על הגאומטריה והמרחקים של סצנה קיימת באמצעות Depth Anything V2.
- שחזור תנוחת גוף
בניית דמות חדשה שמעתיקה במדויק פוזה מתמונת מקור בעזרת מודל Openpose.
- איור מבוסס קווי מתאר
שליטה במבנה התמונה החדשה על בסיס קווים שחולצו מתמונה מקורית דרך מודל Anyline.
איפה זה נופל
הבעיה המיידית היא שהאפליקציה פשוט מושהית ולא פועלת כרגע בעמוד. מעבר לכך, הקוד מבוסס על מודלים כבדים מאוד כמו FLUX.1 dev ו־Depth-Anything Large, כך שגם אם המקום יופעל מחדש, הרצה על מעבד בסיסי בלי מאיץ גרפי חזק של ZeroGPU לא תספק זמני תגובה סבירים. אין בעמוד דוגמאות מובנות לבדיקה מהירה, ולכן חייבים להביא תמונות והגדרות משלכם.
שאלות
נפוצות
האם אפשר להשתמש באפליקציה כרגע?
לא, הסטטוס שלה מוגדר כ־PAUSED. המפרסמים השביתו את פעילותה, כך שלחיצה על כפתור ההרצה לא תניב תוצאה.
האם חייבים להכין מראש מפת עומק או קווי קאני?
לא בהכרח. הממשק כולל שדה להעלאת תמונת התניה מוכנה, אך יש גם שדה אופציונלי שמאפשר להעלות תמונה רגילה ולתת למודלים כמו Anyline או Depth-Anything לחלץ את המידע לבד.
האם אפשר להריץ את זה מקומית?
כן, קוד ה־app.py גלוי ומשתמש בספריות Diffusers של פייתון. כדי להריץ אותו עצמאית תצטרכו חומרה חזקה מאוד עם כרטיס מסך שמסוגל להחזיק את FLUX.1 dev ואת מודלי ה־ControlNet בו זמנית.
איך מריצים
בממשק מעלים תמונה לאחד מתיבות הקלט, כותבים הנחיה ולוחצים על Submit. ברירת המחדל עומדת על 24 צעדים וסולם הנחיה של 3.5, עם אפשרות לקבוע סיד ידני או אקראי. בפועל לא ניתן להריץ את הדמו כרגע בדפדפן, משום שהמקום נמצא במצב PAUSED ומוגדר על חומרת cpu-basic בסיסית.
pip install -U huggingface_hub hf download Shakker-Labs/FLUX.1-dev-ControlNet-Union-Pro-2.0
הקבצים
12 קבצים במאגר, 4.0 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
הרישיון מוגדר כ־other, ומודל הבסיס הוא FLUX.1 dev. רישיון זה אינו חופשי לחלוטין ומגביל שימושים מסחריים ישירים, לכן השימוש בתמונות שנוצרות מותנה בתנאי הרישיון המקוריים של Black Forest Labs.