lora-ease

מה זה

אתם מזינים שם ייחודי לאימון, משפט קונספט שכולל מילת מפתח ייעודית, ומעלים קובצי תמונות שמייצגים את מה שתרצו ללמד. הממשק כולל כפתור שמפעיל את BLIP-2 לצורך כתיבת תיאורים אוטומטיים לכל תמונה, עם אפשרות לערוך את הכיתובים ידנית לפני תחילת הריצה.

מאחורי הקלעים רץ תסריט אימון מתקדם מסוג Dreambooth עם Pivotal Tuning שמבוסס על Diffusers. התהליך מתבצע על גבי Stable Diffusion XL Base 1.0 בשילוב מודל תיקון VAE של madebyollin, ונעזר במאגר תמונות פנים מוכן לצורך שמירה על מאפיינים מקוריים בזמן האימון. בסיום מקבלים קובץ משקולות שמתאים לשימוש ישיר בכלים כמו ComfyUI או Automatic1111.

מתאים ל

• אימון דמות עקבית

  מעלים מספר תמונות של אדם כדי להפיק משקולות LoRA שמייצרות את אותם תווי פנים בסיטואציות חדשות.

• הטמעת סגנון ציור

  מזינים דוגמאות של סגנון אמנותי ספציפי כדי לאמן את המודל לחקות את הטכניקה הזו.

• תיוג תמונות מהיר

  משתמשים במנגנון המובנה של BLIP-2 לקבלת כיתובים מהירים לכל התמונות באוסף.

איפה זה נופל

חובה להשתמש בטוקן מסוג Write ולא מספיק טוקן קריאה רגיל, מה שעלול לחשוף הרשאות אם לא נזהרים. בנוסף, הסרת מילת המפתח מהקונספט פוגעת ישירות בתוצאה הסופית עקב דרישות של היפוך טקסטואלי. התלות בשרת שיתופי עם הקצאה דינמית עלולה להביא לעיכובים בזמני התחלת הריצה.

איך משתמשים

כדי להתחיל מזינים שם ייחודי, מגדירים את הקונספט ומעלים את התמונות. בשלב הזה צריך לספק טוקן בעל הרשאות כתיבה מחשבון Hugging Face, אחרת התהליך לא יופעל. אפשר להשאיר את הגדרות ברירת המחדל או לפתוח את האפשרויות המתקדמות כדי לשנות אופטימייזר, קצב למידה או רמת דיוק. השרת פועל על חומרת A10G שמוקצית דינמית, ויש מעקב התקדמות שמוצג על המסך בזמן האימון.

הרישיון

הפרויקט מופץ תחת רישיון MIT שמאפשר שימוש חופשי בקוד, כולל התאמה לצרכים מסחריים ופרטיים. התמונות שאתם מעלים והמודלים שנוצרים מנוהלים דרך החשבון שלכם באמצעות הטוקן האישי.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗