sdxl-dpo
רץ בדפדפןfffiloniרישיון לא דווח2023-12-19
הדגמת רשת שמייצרת תמונות מטקסט בעזרת גרסה מכווננת של SDXL. היא מתאימה למי שרוצה לבדוק איך שיטת DPO משפיעה על התוצאה בלי להתקין סביבת פיתוח.
- —הורדות בחודש
- 119לייקים
מה זה
מקלידים תיאור טקסטואלי בתיבת הפרומפט, לוחצים על כפתור השליחה ומקבלים תמונה אחת. כברירת מחדל מופיע שם תיאור של איש זקן עם ציפור על הראש, ויש גם דוגמאות מוכנות מראש שאפשר להריץ בלחיצה כדי לראות את היכולות מיד.
מאחורי הקלעים רץ המודל Stable Diffusion XL בגרסת הבסיס שלו, אבל רכיב ה־UNet הוחלף במשקולות של dpo-sdxl-text2image-v1. הכוונון הזה משתמש באופטימיזציית העדפות ישירה כדי לשפר את ההיענות להוראות ואת איכות התמונה לעומת המודל הרגיל.
מתאים ל
- בדיקת איכות של SDXL DPO
הרצת פרומפטים כדי לראות אם כוונון ה־DPO מייצר תמונות טובות יותר מגרסת הבסיס.
- השוואת סגנונות מטקסט
הזנת תיאורים קצרים באנגלית לקבלת תוצאה ויזואלית מהירה לפי הדוגמאות הקיימות.
- בחינת קוד להחלפת UNet
עיון בדרך שבה הממשק טוען משקולות חלופיות לתוך הצינור של דיפיוזרס.
איפה זה נופל
האפליקציה נמצאת כעת במצב מושהה, ולכן היא פשוט לא תרוץ כרגע. בנוסף, הקוד כולל רכיב בטיחות שמקפיץ שגיאה אם מבקשים תכנים לא הולמים, ואין כאן הגדרות מתקדמות כמו שליטה בשליליים, במספר הצעדים או בגודל התמונה. מקבלים רק תמונה בודדת לפי ברירות המחדל שהוגדרו בקוד.
שאלות
נפוצות
האם אפשר להשתמש באפליקציה הזאת עכשיו?
לא באופן ישיר. המצב של המרחב מוגדר כרגע כמושהה, ולכן הדף לא מייצר תמונות עד שבעל המרחב יפעיל אותו שוב או שתשכפלו אותו לחשבון שלכם.
האם האפליקציה עולה כסף?
הגישה להדגמה באתר פתוחה ללא תשלום, ואין צורך במנוי כדי לראות את הממשק והקוד. אם תרצו לשכפל את המרחב ולהריץ אותו בעצמכם, ייתכן שתצטרכו משאבי חומרה מתאימים.
האם אפשר להריץ את המודל הזה מקומית במחשב?
כן, הקוד פתוח ומראה בדיוק איך לטעון את המודלים דרך ספריית diffusers בפייתון. תצטרכו כרטיס מסך מתאים עם תמיכה ב־CUDA וזיכרון מספק כדי להריץ SDXL.
מה ההבדל בין זה לבין SDXL רגיל?
ההבדל נמצא בשיטת האימון של ה־UNet. כאן שילבו משקולות שאומנו בשיטת DPO, שנועדה להתאים את הפלט טוב יותר להעדפות אנושיות בהשוואה למודל הבסיס הרגיל.
איך משתמשים
בממשק יש רק שדה להזנת פרומפט וכפתור Submit. מזינים טקסט באנגלית, לוחצים וממתינים לקובץ התמונה. הקוד משתמש בהקצאת חומרה של זירו-GPU עם פקודת spaces, אבל כרגע העמוד עצמו מוגדר במצב מושהה ולא פעיל, כך שאי אפשר לייצר בו תמונות ישירות בדפדפן בלי להפעיל אותו מחדש.
הרישיון
הרישיון של המרחב עצמו לא דווח. המשמעות היא שאין הרשאה ברורה לגבי שימוש מסחרי או שימוש חוזר בקוד של האפליקציה, וכדאי לבדוק בנפרד את תנאי הרישיון המקוריים של SDXL ושל משקולות ה־DPO לפני שעושים שימוש בתוצרים.