celeba-latent-diffusion
רץ בדפדפןCompVisרישיון לא דווח2022-07-18
הדגמה שמייצרת פרצופים אקראיים באמצעות מודל דיפוזיה, ללא הנחיית טקסט. היא מיועדת למי שרוצה לראות הדגמה ישירה של ספריית diffusers בפעולה.
- —הורדות בחודש
- 44לייקים
מה זה
הממשק מבוסס כולו על תהליך יצירה לא מותנה, כלומר אתם לא כותבים שום תיאור טקסטואלי ולא מעלים תמונה. הקלט כולל רק שני סרגלים פשוטים: מספר צעדי ההרצה מ־1 עד 100, ובחירת סיד מספרי שמתחיל בערך אקראי כדי לשלוט בשחזור של התוצאה.
הפלט שמתקבל הוא תמונה בודדת של פנים ברזולוציה של 256 על 256 פיקסלים. מאחורי הקלעים הקוד טוען את המודל ldm-celebahq-256 של CompVis באמצעות הצינור LDMPipeline של ספריית diffusers, ומזרים את שלבי הדיפוזיה ישירות אל המסך באמצעות yield בזמן החישוב.
המטרה המוצהרת של הקוד היא פשוט להציג את היכולות הבסיסיות של diffusers על מודל שאומן על מאגר CelebA-HQ. אין פה דוגמאות מוכנות מראש בממשק, אלא רק אפשרות לשנות את מספר הצעדים והסיד ולצפות בפרצוף שנוצר.
מתאים ל
- בדיקת ספריית diffusers
צפייה באופן שבו LDMPipeline מייצר תמונות בשלבים ישירות מתוך קוד פייתון פשוט.
- הפקת פנים אקראיות
יצירה של תמונות פנים אקראיות ברזולוציית 256 על 256 לצורכי בדיקות או מחקר.
- בחינת השפעת מספר הצעדים
השוואת איכות התוצאה והשינוי בפרצוף כאשר מזיזים את הסרגל מצעד אחד ועד 100 צעדים.
איפה זה נופל
הבעיה המרכזית כרגע היא שההדגמה מדווחת על RUNTIME_ERROR, כך שאי אפשר לקבל ממנה תמונה כלל דרך האתר. מעבר לזה, המודל אינו מודל טקסט לתמונה, אלא כלי שמייצר רק פרצופים אקראיים ברזולוציה נמוכה של 256 על 256. מי שמחפש שליטה בתווי הפנים, בהבעות או בסגנון יגלה שאין פה שום ממשק כזה, ואי אפשר להכווין את היצירה מעבר להחלפת הסיד.
שאלות
נפוצות
האם אפשר להשתמש באפליקציה כרגע בדפדפן?
לא. האפליקציה מדווחת על מצב RUNTIME_ERROR, מה שאומר שהקוד קרס בהרצה על השרת ולא מציג ממשק עובד עד שיתוקן.
האם צריך להעלות תמונה או להזין טקסט?
לא מעלים קבצים ולא מקלידים הנחיות. הממשק מבוסס רק על בחירת מספר צעדי הרצה וערך סיד מספרי לקבלת פנים אקראיות.
האם אפשר להריץ את הקוד הזה מקומית?
כן. הקוד מסתמך על פייתון, PyTorch והספרייה diffusers של Hugging Face, וטוען את המשקלים של ldm-celebahq-256 ישירות מהרשת.
במה ההדגמה הזאת שונה מ־Stable Diffusion?
זהו מודל דיפוזיה מוקדם יותר שאומן רק על פרצופים ממאגר CelebA-HQ. הוא אינו מבין טקסט ומוציא תמונות קטנות בגודל 256 על 256 פיקסלים בלבד.
איך משתמשים
בפועל אתם גוררים את סרגל הצעדים שברירת המחדל שלו היא 5, קובעים סיד ולוחצים על הפעלה כדי לראות את התמונה מתעדכנת. ההדגמה מוגדרת לרוץ על חומרת t4-small, אבל נכון לעכשיו היא נמצאת במצב של שגיאת ריצה, ולכן אי אפשר להריץ אותה בדפדפן בלי שהיוצרים יתקנו את הקוד או את התלויות.
הרישיון
הרישיון של החלל לא דווח. המשמעות היא שאין תנאי שימוש ברורים לגבי התמונות שנוצרות או לגבי שימוש מסחרי בקוד, ולכן מומלץ לבדוק את הרישיון הישיר של המודל המקורי לפני שמשתמשים בו.