PixArt-LCM

מה זה

כותבים תיאור טקסטואלי ומקבלים תמונה בגלריה שבממשק. יש אפשרות לפתוח הגדרות מתקדמות כדי להוסיף הנחיה שלילית, לקבוע סגנון, לשנות את מידות הרוחב והגובה, להגדיר סיד קבוע או לבחור את מספר צעדי ההרצה.

מאחורי הקלעים הקוד משתמש בצינור של PixArtAlpha יחד עם מתזמן LCMScheduler, וטוען את המודל PixArt-LCM-XL-2-1024-MS. כדי לפענח את התוצאה הסופית הוא מריץ את consistency-decoder של OpenAI ברמת דיוק של float16, שילוב שנועד לייצר תמונה מפורטת במעט צעדים ביחס לדיפוזיה רגילה. הממשק כולל גם דוגמאות מובנות שאפשר לטעון בלחיצה אחת.

מתאים ל

• בדיקת מהירות של LCM

  מזינים פרומפט ובוחנים כמה צעדים נדרשים כדי לקבל תמונה סבירה בהשוואה לדיפוזיה רגילה.

• השוואת פענוח תמונה

  בדיקת ההשפעה של המפענח של OpenAI על החדות ועל הפרטים הקטנים בפלט.

• ניסויי רזולוציה שונים

  שינוי ערכי הגובה והרוחב בממשק כדי לראות איך המודל מתמודד עם יחסי תמונה מגוונים.

איפה זה נופל

הבעיה המיידית היא שההדגמה נמצאת במצב של תקלת ריצה, כך שאי אפשר להשתמש בה כרגע בדפדפן בלי לתקן את הקוד או לשכפל אותה לסביבה תקינה. בנוסף, מודלים מסוג LCM מקצרים את זמן היצירה על חשבון גמישות, ולפעמים מפספסים פרטים עדינים לעומת הרצה מלאה. מי שבונה על איכות מקסימלית או על עבודה יציבה בעברית צריך לבדוק את זה קודם מקומית עם הקוד שבגיטהאב.

איך משתמשים

מקלידים הנחיה בשורת הטקסט, ואם רוצים פותחים את ההגדרות המתקדמות כדי לקבוע מידות או צעדים, ולוחצים על Run. הממשק מציג פס התקדמות בזמן העבודה. לפי ההגדרות הוא אמור לרוץ על מאיץ גרפי מסוג a10g-small, שזה חומרה מהירה יחסית למשימות כאלה, אבל נכון לעכשיו לא תצליחו להריץ כלום כי המערכת מדווחת על שגיאת ריצה.

הרישיון

הפרויקט מפורסם תחת רישיון openrail. הרישיון הזה מתיר שימוש ומחקר, אך כולל מגבלות שימוש שמטרתן למנוע פגיעה או הפצת תכנים אסורים. לגבי התמונות שנוצרות או הטקסט שמוזן, מומלץ לוודא שהשימוש שלכם תואם את תנאי הרישיון של המודלים המקוריים.

• שימוש מסחרי
• שינוי הקוד
• מגבלות שימוש ברישיון

הרישיון המלא ב־Hugging Face ↗