GPT
F

FLUX.1-dev-LoRA-Vector-Journey

קוד פתוח

Shakker-Labsother2024-08-30

  • diffusers
  • text-to-image
  • stable-diffusion
  • lora
  • image-generation

מתאם משקלים שמייצר שילוב ספציפי של דמות מאוירת על גבי רקע ריאליסטי. הוא מתלבש ישירות על תשתית התמונות של פלוקס ומכוון לסגנון ויזואלי היברידי מדויק.

  • 589 MBמשקל הקבצים
  • 291הורדות בחודש
  • 212לייקים

מה זה

מדובר בהרחבת משקלים שפותחה כדי לתת פתרון לסגנון עיצובי מוגדר, שבו הדמות המרכזית מקבלת מראה של איור וקטורי בעוד שאר הסצנה שומרת על מראה ריאליסטי. במקום לנסות להנדס פרומפטים ארוכים ומפותלים כדי להפריד בין אופי הרקע לאופי האובייקט, המתאם מכריח את מודל הבסיס לייצר את הניגודיות הזו באופן עקבי.

הקובץ שוקל 589 מגה בייט, כך שהוא לא תופס מקום חריג ביחס לתוספי משקלים דומים, והוא בנוי לעבודה ישירה עם ספריית דיפיוזרס. כדי לקבל את האפקט המלא צריך לשלב בפרומפט ביטוי הפעלה ייעודי, ולהגדיר את עוצמת ההשפעה של השכבה בטווח שבין 0.8 לבין 1.0. מי שמחפש רק איור שטוח או רק תמונות פוטוריאליסטיות לא ימצא בו עניין, כי כל המטרה שלו היא דווקא הערבוב בין שני העולמות.

מתאים ל

  • פוסטרים היברידיים

    הפקת פוסטרים שמשלבים דמות קומיקס על רקע סביבה עירונית חיה ואמיתית.

  • קונספט ארט לפרסום

    יצירת סקיצות ויזואליות שבהן בולט הניגוד בין איור דו ממדי לרקע מצולם.

  • תמונות קונספט לעטיפות

    עיצוב עטיפות וגרפיקה הדורשים שילוב ברור בין גרפיקה וקטורית לעולם האמיתי.

איפה זה נופל

המתאם תלוי לחלוטין בביטוי ההפעלה הספציפי שלו, ובלי הניסוח המדויק באנגלית הסגנון פשוט לא מופיע בעוצמה הרצויה. הוא אומן עבור שפה אחת בלבד, כך שפרומפטים בעברית או תיאורים מורכבים שלא באנגלית לא יספקו תוצאות טובות. בנוסף, הוא כבול לסגנון הפיקס הזה של דמות מאוירת על רקע מציאותי, ואם תנסו להפוך את היוצרות ולקבל רקע מאויר עם דמות אמיתית, זה לא יעבוד כמצופה.

שאלות
נפוצות

האם המודל תומך בהנחיות בעברית?

לא, המודל מוגדר ומאומן באנגלית בלבד. כדי לקבל את הסגנון המבוקש צריך לכתוב את הפרומפט וביטוי ההפעלה באנגלית.

אפשר להשתמש בו במוצר מסחרי?

לא, הרישיון כפוף להסכם השימוש הלא מסחרי של פלוקס דב. אפשר להשתמש בו לניסויים, למחקר או ליצירה אישית בלבד.

איך מריצים

טוענים את מודל הבסיס של פלוקס דרך ספריית דיפיוזרס בפורמט bfloat16, ואז מחברים את קובץ המשקלים ומפעילים איחוד שלהם עם סקייל של 1.0. ההרצה דורשת כרטיס גרפי כבד שמתאים למודל הבסיס עצמו, עם צריכת זיכרון משמעותית בעבודה על כרטיסי נווידיה.

בכרטיס ממליצים על 24 צעדים ורמת הנחיה של 3.5, ברזולוציה בסיסית של 768 על 1024. אם אין לכם חומרה מקומית חזקה שמסוגלת להחזיק את פלוקס דב בזיכרון, אפשר להשתמש בממשק הרשת שהיוצרים מציעים באתר שלהם במקום להרים שרת ייעודי.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("Shakker-Labs/FLUX.1-dev-LoRA-Vector-Journey")
img = pipe("a photo").images[0]

הרישיון

הרישיון מוגדר כמותאם אישית וכפוף לתנאי הרישיון הלא מסחרי של פלוקס דב. המשמעות היא שאי אפשר לשלב אותו במוצרים מסחריים, למכור את הפלטים שלו ישירות או להציע אותו כשירות בתשלום בלי להפר את תנאי השימוש שהכתיבו היוצרים המקוריים.

הרישיון המלא בעמוד המודל ↗