stablediffusion-infinity

מה זה

אתם מגדירים גודל קנבס, גודל בחירה, ומזינים תיאור טקסטואלי רגיל ושלילי. הממשק מאפשר גם להעלות תמונה קיימת כדי להתחיל ממנה, לקבוע את עוצמת השינוי, מספר הצעדים שעומד כברירת מחדל על 25, ורמת ההיצמדות לטקסט שמוגדרת מראש על 7.5. התוצאה היא תמונה רחבה שנבנית בחלקים ישירות על משטח העבודה.

מאחורי הקלעים הקוד מריץ צנרת של דיפיוזרס עם מודלים של סטייבל דיפיוז'ן בגרסאות 1.4 או 1.5, יחד עם מודל אינפיינטינג ייעודי של ראנוויי. המערכת כוללת גם מפענח תמונות של סטביליטי, מנגנון סינון תכנים של קומפוויז, ובודק התאמת טקסט של קליפ וברט כדי לחבר את החלקים החדשים לקצוות של התמונה המקורית.

מתאים ל

• הרחבת גבולות תמונה

  הוספת שטח חדש מסביב לתמונה קיימת לפי תיאור טקסט תוך שמירה על רצף חזותי.

• תיקון מקטעים פנימיים

  החלפה או ציור מחדש של אזורים ספציפיים על גבי הקנבס באמצעות מודל אינפיינטינג.

• שילוב סצנות רחבות

  בניית פנורמות ארוכות מחלקים נפרדים על ידי הנחיית המודל בכל מקטע מחדש.

איפה זה נופל

החיסרון הברור ביותר הוא שהיישום נמצא במצב שגיאת ריצה, ולכן אי אפשר להשתמש בו ישירות בדפדפן כרגע. מעבר לזה, הממשק דורש טוקן אישי כבר בשלב הטעינה הראשוני ולא נותן להתנסות מיידית. מודלי הבסיס הם גרסאות מוקדמות וישנות יחסית משנת 2022, כך שרמת הדיוק בפרטים מורכבים תהיה נמוכה משמעותית ממה שמקובל לקבל במודלים מודרניים.

איך משתמשים

בשלב הראשון צריך להזין טוקן, לבחור מודל ומידות קנבס, וללחוץ על כפתור ההגדרה הראשוני. הקוד עצמו מזהיר שזה עשוי לקחת זמן. לאחר שהסביבה מוכנה נפתח הקנבס, שבו מזינים את הטקסט, מכוונים פרמטרים ומייצרים. כרגע הריצה אונליין תקועה בגלל שגיאה והממשק לא מגיב. אם הוא היה רץ על מאיץ L4 המוקצה לו, היצירה הייתה לוקחת שניות בודדות לכל מקטע.

הרישיון

הקוד מופץ תחת רישיון אפאצ'י 2.0, שמאפשר שימוש חופשי, שינוי והרצה כולל לצרכים מסחריים. שימוש בתמונות שנוצרות תלוי גם ברישיונות של מודלי הבסיס שהורצו, ובפרט מגבלות השימוש המקובלות של סטייבל דיפיוז'ן.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗