follow-the-mean

מה זה

מזינים פרומפט טקסטואלי ומעלים לפחות תמונת רפרנס אחת לגלריה. מקבלים שתי תוצאות להשוואה זו לצד זו, אחת שמבוססת על הטקסט בלבד ואחת שמשלבת את ההכוונה מסט הרפרנסים, לצד תצוגה של הרפרנסים עצמם. הממשק כולל דוגמאות מוכנות מראש כמו פילים ורודים ואגרטלים סיניים.

מאחורי הקלעים רץ המודל FLUX.2-klein-4B בשילוב טכניקת Reference-Mean Guidance מתוך מחקר עדכני. השיטה מתערבת ישירות בתהליך הדיגום של המודל הקפוא ודוחפת אותו לעבר הממוצע של תמונות הרפרנס, בלי לשנות משקולות ובלי תהליך אימון מקדים.

מתאים ל

• הכוונת סגנון ללא אימון

  יצירת תמונות מותאמות לסגנון ויזואלי מסוים בעזרת סט תמונות קיים, בלי להמתין לאימון LoRA או לשנות משקולות.

• השוואת השפעת רפרנס

  בדיקת ההבדל המדויק בין תוצאת טקסט נקייה לבין תוצאה מוכוונת רפרנס מאותו סיד בדיוק.

• מחקר אלגוריתמי

  בחינת ההשפעה של פרמטרי RMG וטופ-k על שדות המהירות בתהליכי flow-matching.

איפה זה נופל

חייבים להעלות לפחות תמונת מקור אחת ולכתוב פרומפט, אחרת הממשק זורק שגיאה ועוצר. השיטה מכוונת את הדיגום הכללי אך לא שומרת על זהות מדויקת של דמויות, והיא תלויה מאוד באיכות ובאחידות של סט הרפרנסים שתבחרו. הדוגמאות השמורות מראש נטענות מהר, אבל יצירה חדשה דורשת חישוב מלא של שתי תמונות במקביל.

איך משתמשים

בוחרים פרומפט, מוסיפים תמונות רפרנס ולוחצים Generate. תחת תפריטי ההגדרות אפשר לכוונן את עוצמת ההנחיה, לוחות הזמנים של ההתערבות, מידות התמונה בין 512 ל־1280 פיקסלים ומספר צעדי הדגימה. ההרצה מתבצעת על מאיץ מסוג zero-a10g שמקצה משאבים לפי דרישה, כך שייתכן זמן המתנה קצר בעליית המודל לפני תחילת הרינדור.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0 שמאפשר שימוש חופשי ושינוי קוד. הקוד והספרייה retrieval_guidance_core זמינים במאגרים המקושרים, אך השימוש בתמונות שאתם מעלים ויוצרים כפוף למדיניות של הדפדפן והשרת המארח.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗