FLUX.1-Fill-dev — הדגמה
קוד פתוחblack-forest-labsother2024-11-25
הדגמה בדפדפן לעריכת תמונות ומילוי שטחים לפי טקסט. אתם מעלים קובץ, צובעים במברשת את האזור שרוצים לשנות, ומקבלים תמונה חדשה שמשתלבת ברקע.
- 12Bפרמטרים
- 54.1 GBמשקל הקבצים
- —הורדות בחודש
- 321לייקים
מה זה
אתם מעלים תמונה לעורך המובנה ומסמנים במברשת לבנה את החלק שתרצו להחליף או להשלים. מתחת כותבים תיאור טקסטואלי של מה שצריך להופיע שם, ולוחצים על כפתור ההפעלה כדי לקבל תמונה בגודל של עד 1024 על 1024 פיקסלים.
מאחורי הקלעים הקוד טוען את מודל FLUX.1-Fill-dev של חברת Black Forest Labs באמצעות ספריית diffusers בפורמט bfloat16. המערכת מריצה כברירת מחדל 28 צעדי דגימה עם guidance scale של 3.5, כשהיא מחברת בין התמונה המקורית, המסכה שציירתם וההנחיה הכתובה כדי לייצר את התוצאה הסופית. יש בממשק גם דוגמאות מוכנות מראש למי שרוצה לראות את הביצועים בלי להעלות קבצים משלו.
מתאים ל
- החלפת אובייקטים בתמונה
מסמנים פריט בתוך תמונה קיימת, כותבים מה לשים במקומו, והמודל שותל אותו בהתאם לתאורה.
- מחיקת פרטים ומילוי רקע
צובעים אלמנטים שמפריעים בצילום ומבקשים לתאר את הרקע שמסביב כדי להעלים אותם.
- בדיקת המודל לפני הטמעה
בוחנים איך האלגוריתם מתמודד עם מסכות וסגנונות שונים ישירות בדפדפן בלי להרים שרת.
איפה זה נופל
המברשת בממשק מוגבלת לצבע לבן קבוע בלבד, בלי אפשרות לטשטוש קצוות או כוונון עדין של שקיפות המסכה ישירות בעורך. המודל דורש הנחיות באנגלית, כך שכתיבה בעברית לא תעבוד טוב. בנוסף, חומרת ההדגמה מוגבלת לרוחב וגובה של 1024 פיקסלים, מה שאינו מאפשר בדיקה של קבצים ברזולוציה גבוהה יותר.
שאלות
נפוצות
האם השימוש בעמוד עולה כסף?
לא, השימוש בעמוד פתוח בדפדפן ללא תשלום. אין צורך להזין פרטי אשראי או להירשם לחשבון בתשלום כדי לבדוק אותו. עם זאת, מכיוון שמדובר במשאב שיתופי, זמינות המעבד הגרפי תלויה בעומס הכללי באותו רגע.
מה קורה לתמונות שאני מעלה?
הקבצים נשלחים לעיבוד על גבי השרת שמריץ את הממשק כדי לייצר את התוצאה. הממשק לא כולל גלריה ציבורית ששומרת ומציגה את מה שהעליתם לכולם. למרות זאת, לא מומלץ להעלות לשם תמונות פרטיות או מידע רגיש.
האם אפשר להריץ את זה על המחשב שלי?
כן, הקוד משתמש בספריית diffusers הרגילה של פייתון ובצינור FluxFillPipeline. אם יש לכם מחשב עם מעבד גרפי חזק של אנבידיה ומספיק זיכרון וידאו, תוכלו להוריד את המשקולות ולהריץ הכל מקומית. בסביבה ביתית חלשה יותר התהליך ייקח זמן רב או ייכשל.
במה הדף הזה שונה מהרצת המודל ישירות בקוד?
הדף מציע מעטפת גרפית פשוטה שמקבעת מראש חלק מהפרמטרים כמו מספר הצעדים ורזולוציית התמונה. בקוד יש לכם שליטה מלאה על כל פרמטר, על גודל הקובץ ועל אופן יצירת המסכה. כאן אתם מוגבלים לכלי הציור הבסיסי של הדפדפן ולחומרה המוקצית.
איך מריצים
טוענים תמונה, צובעים עליה את המסכה עם המברשת, מקלידים תיאור ולוחצים Run. מי שרוצה שליטה עדינה יכול לפתוח את ההגדרות המתקדמות ולשנות את מספר הצעדים, הסיד ומידות התמונה. הריצה מתבצעת על מעבד גרפי מסוג zero-a10g שמקצה משאבים לפי דרישה, כך שייתכן שתמתינו מעט בתור כשיש עומס.
pip install -U huggingface_hub hf download black-forest-labs/FLUX.1-Fill-dev
הקבצים
28 קבצים במאגר, 54.1 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
- flux1-fill-dev.safetensors23.8 GB
- transformer/diffusion_pytorch_model-00001-of-00003.safetensors10.0 GB
- transformer/diffusion_pytorch_model-00002-of-00003.safetensors9.9 GB
- text_encoder_2/model-00001-of-00002.safetensors5.0 GB
- text_encoder_2/model-00002-of-00002.safetensors4.5 GB
- transformer/diffusion_pytorch_model-00003-of-00003.safetensors3.9 GB
- vae/diffusion_pytorch_model.safetensors335.3 MB
- ae.safetensors335.3 MB
- text_encoder/model.safetensors246.1 MB
- tokenizer_2/tokenizer.json2.4 MB
- tokenizer/vocab.json1.1 MB
- tokenizer_2/spiece.model791.7 KB
- tokenizer/merges.txt524.6 KB
- transformer/diffusion_pytorch_model.safetensors.index.json121.3 KB
- tokenizer_2/tokenizer_config.json20.8 KB
- text_encoder_2/model.safetensors.index.json19.9 KB
- LICENSE.md18.6 KB
- README.md4.1 KB
- tokenizer_2/special_tokens_map.json2.5 KB
- .gitattributes1.6 KB
- vae/config.json774 B
- text_encoder_2/config.json741 B
- tokenizer/tokenizer_config.json705 B
- tokenizer/special_tokens_map.json588 B
- text_encoder/config.json561 B
- model_index.json540 B
- transformer/config.json393 B
- scheduler/scheduler_config.json299 B
הרישיון
הקוד של היישום מופץ ברישיון mit פתוח ומתירני. עם זאת, המודל שרץ ברקע הוא גרסת dev של פלוקס, ולכן יש לבדוק את תנאי השימוש הישירים של היוצרים לגבי תוצרים ושימושים מסחריים.