dpmsolver_sdm
רץ בדפדפןLuChengTHUרישיון לא דווח2022-11-07
הדגמה שמייצרת תמונות מטקסט או מתמונה קיימת בעזרת דוגם מהיר. היא מתאימה למי שרוצה לבחון את DPM-Solver על מודלים ישנים של Stable Diffusion.
- —הורדות בחודש
- 66לייקים
מה זה
הממשק מציע יצירת תמונות בשני מסלולים. אפשר להקליד תיאור טקסטואלי, להוסיף פרומפט שלילי, ולכוונן פרמטרים מוכרים כמו מספר צעדים, Guidance Scale, מידות התמונה וסיד אקראי. המסלול השני מיועד לעיבוד תמונה קיימת, ומאפשר להעלות קובץ, לערוך אותו בעורך בסיסי, ולקבוע את עוצמת השינוי.
מאחורי הקלעים רץ הדוגם DPMSolverMultistepScheduler מעל שני מודלים לבחירה, CompVis/stable-diffusion-v1-4 הכללי ו־hakurei/waifu-diffusion שמכוון לסגנון אנימה. הדוגם הזה נבנה כדי להגיע לתוצאה טובה במעט צעדים ביחס לדוגמים המסורתיים של אותה תקופה, סביב 25 צעדים כברירת מחדל.
מתאים ל
- בדיקת DPM-Solver
בחינה של איכות התמונה במספר צעדים נמוך של 25 צעדים ומטה.
- יצירת דמויות אנימה
שימוש במודל waifu-diffusion להפקת איורים מטקסט או מעיבוד תמונה.
- עיבוד תמונה לתמונה
שינוי סגנון של תמונה קיימת לפי הנחיה מילולית ודרגת השפעה.
איפה זה נופל
הבעיה המיידית היא שהחלל מדווח על RUNTIME_ERROR, כך שאי אפשר להריץ אותו כלל בדפדפן כרגע. מעבר לזה, המודלים הנתמכים ישנים מאוד, גרסה 1.4 מול מה שקיים היום בשוק. אין בממשק דוגמאות מובנות לבדיקה מהירה, ולא ניתן להגדיל את כמות התמונות שנוצרות בבת אחת מעבר לתמונה בודדת.
שאלות
נפוצות
האם השימוש בממשק עולה כסף?
הגישה למרחב חופשית לחלוטין ואין דרישת תשלום. עם זאת, נכון לעכשיו הוא נמצא במצב תקלה ולא ניתן להשתמש בו בדפדפן. אם הוא יחזור לפעול, ההרצה היא בחינם.
מה קורה לתמונות שמעלים לכלי?
התמונות נשלחות אל השרת שעליו רץ הקוד לצורך עיבוד בלבד. אין בממשק תיעוד על שמירה ארוכת טווח של הקבצים שלכם. למרות זאת, לא מומלץ להעלות מידע רגיש להדגמות ציבוריות.
כמה זמן לוקח לייצר תמונה?
החומרה המוקצית היא מאיץ T4, ובשילוב עם הדוגם הזה תמונה אמורה לצאת תוך שניות ספורות. בפועל כרגע שום דבר לא עובד בגלל שגיאת הריצה. אם הקוד יתוקן, זה יהיה מהיר יחסית לגרסאות הבסיס של 2022.
האם אפשר להריץ את הקוד הזה מקומית במחשב?
כן, הקוד מבוסס על ספריות פתוחות וסטנדרטיות של diffusers ו־gradio. אפשר לקחת את הקבצים, להתקין את התלויות ולהריץ אותם על כרטיס מסך מתאים. זה גם יפתור את בעיית ההרצה שיש כרגע בעמוד.
איך משתמשים
בפועל בוחרים מודל מתוך הרשימה, כותבים תיאור בשדה הטקסט ולוחצים על Generate. אין צורך בחשבון או בהתחברות כדי לגשת לממשק. המערכת מוגדרת על מעבד גרפי t4-medium, שאמור לספק ריצה תוך שניות בודדות לכל תמונה בגלל הדוגם היעיל, אבל כרגע הדף תקוע במצב שגיאת ריצה ולא מבצע חישובים.
הרישיון
הרישיון של המרחב עצמו לא דווח. שני המודלים שבפנים פועלים תחת תנאי השימוש המקוריים שלהם, אך בהיעדר רישיון מוגדר לקוד הממשק לא ברור אם מותר להשתמש בו מסחרית.