lora-roulette
רץ בדפדפןmultimodalartרישיון לא דווח2023-09-11
היא מגרילה שני מודלי LoRA וממזגת אותם ליצירת תמונה אחת. זה מיועד למי שרוצה להתנסות בשילובים מוזרים ולא צפויים בתוך Stable Diffusion XL.
- —הורדות בחודש
- 126לייקים
מה זה
הרעיון פשוט. אתם מקבלים שני מתאמי LoRA שנבחרים באקראי מתוך רשימת המאגר של LoraTheExplorer, יחד עם מילות ההפעלה שלהם ותמונות דוגמה שמציגות את הסגנון של כל אחד. הטקסט בתיבה מתעדכן אוטומטית עם מילות המפתח, ואתם יכולים לערוך אותו למשפט שלם לפני היצירה.
מאחורי הקלעים רץ המודל הבסיסי stabilityai/stable-diffusion-xl-base-1.0. הקוד טוען את משקלי ה־LoRA, ממזג את שכבות ה־state dict לפי משקל ברירת מחדל, ומייצר תמונה חדשה שמנסה להכיל את שני הסגנונות במקביל. לאחר התוצאה אפשר לדרג עם כפתורי אגודל למעלה או למטה, והנתונים נשמרים לדאטהסט בשם lora-fusing-preferences.
מתאים ל
- השראה ויזואלית אקראית
הגרלת שילובים של שני סגנונות עיצוב כדי לקבל רעיונות גרפיים חדשים בלי לבחור מתאמים ידנית.
- בדיקת מיזוג מתאמים
הערכה מהירה של האופן שבו שני מודלי LoRA מגיבים למיזוג שכבות ישיר מעל מודל הבסיס SDXL.
- איסוף נתוני העדפה
יצירה ודירוג של תוצאות מיזוג כדי לסייע באיסוף דאטה על שילובים מוצלחים או כושלים.
איפה זה נופל
האפליקציה נמצאת כרגע במצב של תקלת ריצה, כך שאי אפשר להשתמש בה כלל עד שהיוצר יתקן אותה. מעבר לכך, אין לכם שליטה על בחירת המודלים עצמם אלא רק אפשרות להגריל מחדש. שילוב בין שני מתאמים אקראיים מוביל לעיתים קרובות להתנגשויות סגנוניות או לתמונות מעוותות, במיוחד אם מילות ההפעלה סותרות זו את זו.
שאלות
נפוצות
האם אפשר להשתמש בה כרגע?
לא. היא נמצאת במצב של תקלת ריצה ולא מגיבה בדפדפן. תצטרכו להמתין לעדכון קוד מצד המפתח כדי שהיא תחזור לעבוד.
האם אפשר לבחור את המודלים בעצמי?
לא, הממשק מבוסס כולו על הגרלה עיוורת מתוך רשימת קבצים מוגדרת מראש. אתם יכולים רק ללחוץ על כפתור הערבוב מחדש עד שתגיעו לשילוב שנראה לכם מעניין.
איפה נשמרות התמונות שמייצרים?
הקוד משתמש במנגנון התחייבות לדאטהסט חיצוני בשם lora-fusing-preferences. הדירוגים והתוצאות שלכם מיועדים להישמר במאגר הציבורי הזה לצורכי ניתוח ומחקר.
האם אפשר להריץ את זה על המחשב?
כן, אם תורידו את קובץ app.py ותתקינו את הספריות הנדרשות כמו diffusers ו־torch. תצטרכו כרטיס מסך עם מספיק זיכרון כדי לטעון את SDXL ואת שני המתאמים יחד.
איך משתמשים
לוחצים על reroll כדי להגריל שני מתאמים חדשים, מסדרים את הטקסט בתיבת הפרומפט, ולוחצים על Run. תהליך המיזוג וההפקה תלוי בחומרת zero-a10g שמקצה משאבים לפי דרישה, כך שזמן היצירה תלוי בזמינות המעבד הגרפי בענן. כרגע לא תצליחו להריץ אותה בדפדפן, כי העמוד מדווח על תקלת ריצה שמונעת את טעינת הממשק.
הרישיון
הרישיון של הקוד לא דווח במאגר. בהיעדר רישיון מוגדר לא ברור אילו זכויות שימוש מסחרי מותרות בקוד עצמו. התמונות שנוצרות והמשוב שאתם מספקים בדירוג נשמרים במאגר הציבורי של המפתח לצורך מחקר העדפות.