CommonCanvas

מה זה

מקלידים תיאור טקסטואלי ומקבלים תמונה שנוצרה מאפס. הממשק מחולק לארבע לשוניות לפי גרסאות המודל, CommonCanvas S ו־CommonCanvas XL, בחלוקה לגרסה מסחרית C וגרסה לא מסחרית NC. המודלים נבנו כחלופה ישירה לסטייבל דיפיוז'ן 2 וסטייבל דיפיוז'ן XL, אך אומנו מבראשית על מאגר תמונות ברישיון פתוח בלבד.

מתחת למכסה המנוע יש שימוש בטכניקת perturbed attention guidance שמופעלת דרך שכבות המודל. בהגדרות המתקדמות אפשר לשלוט על מדד ההנחיה, להוסיף הנחיה שלילית, לכוונן את עוצמת ה־PAG, לבחור לאילו שכבות להחיל אותו ולשלוט בסיד.

מתאים ל

• בדיקת חלופות אימון פתוחות

  השוואת איכות התמונה של מודל שאומן על Creative Commons לעומת מודלים מסחריים רגילים.

• הפקת תמונות לשימוש מסחרי

  יצירת גרפיקה נקייה מסיכוני זכויות יוצרים באמצעות גרסאות ה־C של המודל.

• בחינת מנגנון PAG

  כוונון שכבות תשומת הלב בהגדרות המתקדמות כדי לראות איך ההנחיה משפיעה על התוצאה.

איפה זה נופל

הבעיה המרכזית היא שההדגמה פשוט מושבתת כרגע בגלל שגיאת ריצה פנימית. מעבר לזה, רשימת הדוגמאות שהוכנה מראש מנוטרלת בקוד, כך שאי אפשר לראות תוצאות מוכנות מראש בלי לטעון את המודלים. חשוב לדעת שחלק משכבות ה־PAG, ספציפית בלוקי העלייה והירידה, מוגדרים בקוד כלא יציבים ומיועדים לבדיקה זהירה בלבד.

איך משתמשים

בוחרים את הלשונית של המודל הרצוי, מקלידים הנחיה בתיבת הטקסט ולוחצים על Generate. אם רוצים שליטה בתוצאה, פותחים את ההגדרות המתקדמות ומשנים את הערכים של ההנחיה והסיד. אין כאן דרישת התחברות לחשבון, והקוד מוגדר לרוץ על מעבד גרפי מסוג zero-a10g שמקצה משאבים לפי דרישה. יחד עם זאת, כרגע האפליקציה נמצאת במצב של שגיאת ריצה, ולכן אי אפשר להפיק בה תמונות בפועל דרך הדפדפן עד שהמפתחים יתקנו את השרת.

הרישיון

האפליקציה מפורסמת תחת רישיון MIT, שמאפשר שימוש חופשי בקוד. לגבי המודלים עצמם, גרסאות ה־C מיועדות לשימוש מסחרי וגרסאות ה־NC מוגבלות לשימוש שאינו מסחרי.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗