GPT
F

flux-IP-adapter

רץ בדפדפן

InstantXother2024-11-01

  • gradio

מעלים תמונה וטקסט, ומקבלים תמונה חדשה שמשלבת את הסגנון או הדמות מתוכה. זה מיועד למי שרוצה להנחות את מודל פלאקס באמצעות תמונת מקור ולא רק מילים.

  • הורדות בחודש
  • 170לייקים

מה זה

מזינים תמונת מקור בשדה הקלט, כותבים תיאור טקסטואלי, ומכוונים את עוצמת ההשפעה של התמונה באמצעות סליידר. בנוסף אפשר לקבוע בהגדרות המתקדמות את הממדים של התוצאה, כמו רוחב וגובה, וכן לשלוט בסיד.

מאחורי הקלעים רץ שילוב של מודל הבסיס FLUX.1-dev יחד עם מתאם IP-Adapter של InstantX. הקוד טוען גם מודלים של גוגל כמו siglip לעיבוד התמונה ו־t5 לטקסט, לצד clip של OpenAI, כך שהמערכת מנתחת את התמונה הוויזואלית ומזריקה אותה ישירות לתהליך היצירה של פלאקס.

מתאים ל

  • יצירה בהשראת סגנון

    מעלים תמונה עם סגנון אמנותי ומבקשים בטקסט סצנה חדשה לגמרי באותו קו.

  • שמירה על מאפייני דמות

    משתמשים בתמונת פנים או דמות כדי להפיק תמונות חדשות ששומרות על המראה המקורי.

  • בדיקת מתאם התמונות

    בוחנים איך IP-Adapter משפיע על מודל פלאקס בהשוואה להנחיית טקסט בלבד.

איפה זה נופל

ההדגמה מיועדת בעיקר לבדיקת השפעת תמונת הקלט על פלאקס, ולא כוללת אפשרויות עריכה מתקדמות מעבר לקביעת ממדים וסיד. בנוסף, מודל FLUX.1-dev כבד מאוד ודורש משאבים, כך שעל חומרת A10G שיתופית עשויים להיות זמני המתנה בין יצירה ליצירה.

שאלות
נפוצות

האם השימוש בעמוד עולה כסף?

לא, הגישה לממשק באתר Hugging Face היא בחינם. הוא רץ על חומרת ZeroGPU שמוקצית לכל משתמש ללא תשלום.

כמה זמן לוקח לייצר תמונה?

הזמן תלוי בזמינות של כרטיס ה־A10G ובתור באותו רגע. בדרך כלל היצירה אורכת מספר שניות מרגע שהמעבד מתחיל לעבוד.

במה זה שונה משימוש רגיל בפלאקס?

פלאקס הרגיל נשען על טקסט בלבד. כאן המתאם של InstantX קורא את התמונה שהעליתם ומשלב את המאפיינים שלה ביצירה הסופית.

האם אפשר להריץ את זה מקומית?

כן, הקוד והמשקלים של המודלים זמינים להורדה. תצטרכו מחשב עם כרטיס מסך חזק שמסוגל להחזיק את FLUX.1-dev יחד עם רכיבי הראייה והמתאם.

איך משתמשים

טוענים תמונה, כותבים תיאור ולוחצים על Generate. ההרצה מתבצעת על מעבד גרפי מדגם A10G דרך תשתית ZeroGPU, מה שאומר שהמעבד מוקצה לפי דרישה. ייתכן שתמתינו בתור קצר אם יש עומס, אבל ברגע שהחישוב מתחיל התוצאה מתקבלת ישירות בחלון התוצאה לצד שדות הקלט.

הרישיון

הרישיון של המרחב מוגדר כ־other. כיוון שנעשה שימוש במודל FLUX.1-dev ובמתאם ייעודי, חלות מגבלות הרישיון המקוריות של המודלים הללו, ולכן אסור להניח שמותר להשתמש בתוצרים לצרכים מסחריים חופשיים בלי לבדוק את תנאי השימוש שלהם.

הרישיון המלא ב־Hugging Face ↗