boreal-flux-dev-v2

קוד פתוח

kudzueyeרישיון לא דווח2024-09-05

diffusers
text-to-image
stable-diffusion
lora
flux

התאמת LoRA קלה למודל פלקס דב שמתמקדת בריאליזם של תמונות. היוצר ניסה לתקן כאן בעיות גרפיות שהיו בגרסה הקודמת בעזרת שיטת אימון אחרת.

180 MBמשקל הקבצים
725הורדות בחודש
165לייקים

מה זה

מדובר במתאם LoRA ששוקל 180 מגה בייט בלבד, שנבנה מעל המודל Flux Dev ומיועד ליצירת תמונות מטקסט. השם שלו נגזר מניסיון להביא מציאות לתמונות, והמטרה המרכזית בגרסה השנייה הזו הייתה לתקן באג מעצבן של נקודות שמקורן בהיסט לטנטי שהופיע בגרסה הקודמת. הוא עובד ישירות דרך ספריית diffusers ומשתמש במילת ההפעלה photo כדי לכוון את הפלט לסגנון המבוקש.

היוצר עצמו מודה שהגרסה הזו אומנה יתר על המידה, מה שהופך את השליטה בה למעט שונה ממתאמים רגילים. במקום להשתמש במשקל המלא כברירת מחדל, תצטרכו להוריד את המשקל שלו משמעותית מתחת לאחד כדי לא לשרוף את התמונה. בנוסף, הוא מתוכנן לעבוד בצמוד לסף דינמי בשילוב הנחיה שלילית גבוהה מאוד, כך שהוא דורש כוונון ידני ולא עובד בצורה עיוורת ישר מהקופסה.

מתאים ל

רינדור תמונות דמויות צילום
הוא מיועד להוסיף חספוס ומראה של מצלמה לפלטים של פלקס דב, כל עוד מקפידים להשתמש במילת ההפעלה photo.
עבודה נקייה מנקודות לטנטיות
למי שהשתמש בגרסה הראשונה וסבל מבעיות של היסט לטנטי, הגרסה הזו פותרת את אותם כתמים ונקודות מיותרות.
ניסויי תמונות עם סף דינמי
מתאים למי שמנוסה בשימוש בהנחיה שלילית גבוהה ובכוונון מדויק של פרמטרים לייצוב תמונות.

איפה זה נופל

המתאם סובל מאימון יתר מובהק, ולכן שימוש במשקל רגיל של 1.0 פשוט יהרוס לכם את התמונה. היוצר מצהיר בפירוש שהגרסה הזו איבדה חלק מהיצירתיות שהייתה בגרסה הראשונה בגלל שינויים בנתוני האימון. אם אתם מחפשים מגוון סגנוני או יצירתיות רחבה, זה כנראה לא הכלי המתאים, ותצטרכו לבזבז זמן על משחק עם סף דינמי וערכי הנחיה שלילית כדי לקבל תוצאה שמישה בלי ארטיפקטים.

שאלות
נפוצות

באיזה משקל כדאי להריץ את המתאם הזה?

אל תרוצו על משקל 1.0 כי המודל סובל מאימון יתר. תתחילו מערכים נמוכים משמעותית ותרדו למטה עד שהתוצאה מפסיקה להיראות שרופה או מוגזמת.

האם הוא יכול לפעול בלי מודל בסיס?

לא. מדובר בקובץ LoRA ששוקל 180 מגה בייט בלבד, והוא חייב להיטען מעל מודל הבסיס המלא של Flux Dev דרך diffusers.

איך מריצים

כדי להריץ אותו צריך בסיס פעיל של Flux Dev בספריית diffusers, ואליו טוענים את משקלי ה־Safetensors של ה־LoRA. מכיוון שהמתאם עצמו שוקל רק 180 מגה בייט, הוא לא מוסיף כמעט עומס, אבל מודל הבסיס פלקס דורש כרטיס מסך חזק עם לפחות 16 עד 24 גיגה בייט של זיכרון וידאו להרצה מקומית סבירה.

אם אין לכם חומרה כזו זמינה מקומית, עדיף להעלות אותו למכונה ייעודית בענן או לצרוך אותו דרך תשתית שרתים שמחזיקה כבר את פלקס דב. המתאם הזה לא רץ לבד בשום צורה, הוא רק שכבת משקלים שמתלבשת על מודל הבסיס.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("kudzueye/boreal-flux-dev-v2")
img = pipe("a photo").images[0]

הקבצים

14 קבצים במאגר, 180 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

היוצר לא הגדיר רישיון כלל בעמוד המודל. במצב כזה ברירת המחדל המשפטית היא שאין לכם הרשאה להשתמש בו לצרכים מסחריים, להפיץ אותו או להטמיע אותו במוצר שלכם. לשימוש עצמי ובדיקות אפשר להריץ אותו, אבל לכל פעילות עסקית זה סיכון מיותר.

הרישיון המלא בעמוד המודל ↗