EasyControl_Ghibli

מה זה

אתם מעלים תמונת פנים, מקלידים תיאור טקסטואלי, ומקבלים איור בסגנון אנימה. הממשק דורש לשלב בפרומפט מילות מפתח מוגדרות כדי לקבל את האפקט הרצוי, ומציע דוגמאות מובנות להרצה מהירה כדי לראות איך המערכת מגיבה לקלטים שונים.

מאחורי הקלעים רץ המודל FLUX.1-dev יחד עם מתאם EasyControl ואימון LoRA ייעודי. האימון התבסס על מאגר קטן של 100 פנים אסייתיות אמיתיות שהותאמו לתמונות בסגנון ג'יבלי שנוצרו ב־GPT-4o, במטרה להעביר את הסגנון בלי למחוק את זהות המצולם.

בנוסף לשליטה במידות ובסיד, הקוד משלב את שיטת CFG Zero כתיבת סימון לבחירה. המטרה היא לייצר תוצאה מדויקת יותר מול התמונה שהעליתם, כשכל עיבוד הטנזורים מתבצע בדיוק של bfloat16.

מתאים ל

• המרת דיוקן לסגנון ג'יבלי

  מעלים תמונת פנים ומייצרים גרסה מאוירת ששומרת על מאפייני הפנים המקוריים בסגנון האנימה המוכר.

• בדיקת מתאמי EasyControl

  בוחנים איך שכבת הבקרה עובדת על מודל פלאקס לפני שמחליטים להוריד את הקוד ולאמן מודל עצמאי.

• ניסוי עם מנגנון CFG Zero

  בודקים ישירות בממשק את ההשפעה של טכניקת האופטימיזציה הזו על איכות התמונה המתקבלת.

איפה זה נופל

בגלל מגבלות החומרה בממשק הרשת, אפשר לייצר רק תמונות ברזולוציה נמוכה ובינונית. מעבר לכך, האימון נעשה על 100 פנים אסייתיות בלבד, כך שמבני פנים אחרים, גווני עור שונים או תאורה לא שגרתית עלולים לתת תוצאות פחות עקביות. אם אתם צריכים תמונות חדות מעל 1024 פיקסלים, תצטרכו להוריד את הקוד ולהריץ אותו במחשב שלכם.

איך משתמשים

נכנסים לעמוד, מעלים תמונה, מוודאים שהפרומפט כולל את מילות המפתח הנדרשות, ולוחצים על Generate Image. המערכת מופעלת על חומרת zero-a10g שמקצה משאבים לפי דרישה, ולכן ייתכן שתמתינו כמה שניות עד שהמעבד הגרפי ייכנס לפעולה אם הוא היה במצב שינה. הממשק חוסם יצירה מעל רזולוציה של 1024 על 1024 כדי לא לחנוק את השרת, וברירת המחדל עומדת על 768 פיקסלים.

הרישיון

הקוד של היישום מופץ תחת רישיון apache-2.0, שמאפשר שימוש חופשי ושינוי הקוד. עם זאת, המודל עצמו נשען על FLUX.1-dev, שמגיע עם תנאי שימוש והגבלות מסחריות משלו שצריך לבדוק בנפרד לפני כל שימוש בתוצרים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗