CoAdapter

מה זה

מעלים תמונת מקור ומגדירים תנאי הכוונה, לצד פרומפט טקסטואלי רגיל ופרומפט שלילי. הממשק מאפשר לקבוע פרמטרים כמו משקל התנאי, ערך סיד, מספר צעדי דגימה מ־10 עד 100, ורזולוציה שבין 320 ל־1024 פיקסלים. בסיום התהליך מקבלים גלריה עם התמונה שנוצרה ותצוגה של תנאי הבקרה שחולצו ממנה.

מאחורי הקלעים רץ שילוב של מודל הבסיס Stable Diffusion גרסה 1.5 יחד עם רכיבי T2I-Adapter ומודול CoAdapterFuser. הארכיטקטורה הזו מחברת בין תנאי קלט שונים, תוך שימוש במודלי שפה ממשפחת T5 ומקודד CLIP לעיבוד הטקסט והתמונה.

מתאים ל

• שליטה במבנה תמונה

  יצירת תמונות חדשות שנשענות על קומפוזיציה ותנאי הכוונה מתמונה קיימת.

• שילוב תנאי בקרה

  הפעלת מספר מתאמים במקביל כדי להשפיע על המבנה והסגנון בו זמנית.

• בדיקת פרמטרים

  בחינת השפעת משקלי תנאי שונים ושינויי רזולוציה על מודל דיפוזיה.

איפה זה נופל

הבעיה המרכזית היא שהאפליקציה במצב תקול ולא עובדת ברשת. מעבר לזה, הממשק מגביל את הפלט לדגימה אחת בלבד בכל לחיצה, ולא ניתן לבקש סדרת תמונות במקביל. מי שרוצה לבדוק את היכולות של המודל יצטרך להוריד את הקוד ולהריץ אותו באופן עצמאי.

איך משתמשים

לוחצים על כפתור Generate כדי להתחיל את הרינדור, ללא צורך בהרשמה או התחברות לחשבון. ההדגמה מוגדרת לייצר תמונה בודדת בכל הרצה, על גבי חומרת a10g-small. עם זאת, נכון לעכשיו העמוד מדווח על שגיאת ריצה כללית, כך שאי אפשר להריץ את התהליך בפועל דרך הדפדפן.

הרישיון

הפרויקט מפורסם תחת רישיון openrail, שמאפשר שימוש ומחקר חופשיים אך כולל מגבלות שימוש לרעה והפצה אחראית. התמונות שאתם מעלים והתוצרים שנוצרים כפופים לתנאי הרישיון הזה, ומומלץ לבדוק את המגבלות שלו לפני כל שימוש חיצוני.

• שימוש מסחרי
• שינוי הקוד
• מגבלות שימוש ברישיון

הרישיון המלא ב־Hugging Face ↗