GPT
P

Protogen_x5.8_Official_Release

קוד פתוח

darkstorm2150creativeml-openrail-m2023-01-06

  • diffusers
  • stable-diffusion
  • stable-diffusion-diffusers
  • text-to-image
  • art

מיזוג משקלים מבוסס סטייבל דיפיוז'ן 1.5 שמשלב מדע בדיוני ואנימה עם בסיס פוטו ריאליסטי. הוא מתאים למי שמחפש סגנון מאויר ומלוטש בלי לאמן מודל מאפס.

  • 22.7 GBמשקל הקבצים
  • 639הורדות בחודש
  • 203לייקים

מה זה

הבסיס כאן הוא Stable Diffusion v1.5 שעבר שרשרת מיזוגים. הגרעין המרכזי מורכב מ־dreamlikePhotoRealV2 שמחזיק 48.64% מהתערובת, יחד עם hasdx בשיעור של 20%, moistmix ב־16%, roboDiffusion v1 ב־12.8%, ותוספת קטנה של modelshoot v1 שעומדת על 2.56%.

במקום אימון רגיל על דאטה סט חדש, המפתח השתמש במיזוג משקלים ומה שהוא מכנה Granular Adaptive Learning כדי לחבר סגנונות שונים לכדי תוצר אחד. התוצאה נותנת מראה של מדע בדיוני עם נגיעות אנימה, ומגיבה למילות הפעלה ספציפיות כמו modelshoot style, analog style, mdjrny-v4 style ו־nousr robot.

מתאים ל

  • איורי מדע בדיוני

    שילוב המודלים מפיק רקעים מכניים וחלליות ברמת פירוט גבוהה באמצעות מילת ההפעלה nousr robot.

  • דמויות אנימה חצי ריאליסטיות

    האיזון בין photoreal ל־hasdx מייצר דמויות מאוירות עם תאורה והצללות מורכבות.

  • פורטרטים בסגנון רטרו

    שימוש בטריגר analog style על גבי בסיס המיזוג מוסיף גרעיניות וצבעים של צילום פילם.

איפה זה נופל

המודל נשען על אנגלית בלבד ולא יבין פרומפטים בעברית. מעבר לכך, מדובר במיזוג של מיזוגים, מה שגורם לעיתים קרובות לחוסר יציבות בתוצאות, אנטומיה שבורה בידיים וקושי לחרוג מסגנון האנימה המובנה. מילות ההפעלה משפיעות מאוד על התוצר, ובלי להשתמש בהן קשה לשלוט באסתטיקה המדויקת.

שאלות
נפוצות

אפשר להטמיע את המודל במוצר SaaS מסחרי?

לא בלי אישור בכתב. תנאי הרישיון אוסרים במפורש על אינפרנס באתרים או אפליקציות, ומחייבים פנייה למפתחים של dreamlike.art כדי לקבל היתר.

באיזה קובץ כדאי להשתמש, CKPT או Safetensors?

עדיף לבחור ב־safetensors המכווץ ב־fp16 ששוקל 1.72GB. הוא בטוח יותר להרצה מפני קוד זדוני, תופס פחות מקום על הדיסק וצורך פחות זיכרון בכרטיס המסך.

איך מריצים

המודל מגיע בכמה גרסאות להורדה, ממשקל מלא של 7.7GB ועד קובץ safetensors מכווץ של 1.72GB בפורמט fp16 pruned. לקוחות בדרך כלל יורידו את קובץ ה־safetensors המכווץ כדי לחסוך זיכרון ולטעון אותו ישירות לתוך ממשק כמו AUTOMATIC1111 או דרך ספריית diffusers בפייתון.

מבחינת חומרה, קובץ ה־fp16 רץ בקלות על כרטיסי מסך ביתיים עם 6GB או 8GB של VRAM. אם אתם מתכננים להרים שירות ענן או מוצר עם קריאות API, הרישיון המצורף חוסם הרצה כזו באופן מפורש, כך שהרצה עצמית מקומית היא ברירת המחדל.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("darkstorm2150/Protogen_x5.8_Official_Release")
img = pipe("a photo").images[0]

הרישיון

הרישיון הוא גרסה מותאמת ומגבילה מאוד של CreativeML OpenRAIL-M שמקורה ב־Dreamlike Photoreal 2.0. אסור להריץ אינפרנס, לאחסן או לבצע פיין טיונינג באפליקציות ובאתרים מסחריים בלי אישור במייל. שימוש מסחרי בתמונות עצמן מותר רק לצוותים של עד עשרה אנשים.

  • שימוש מסחרי
  • שינוי הקוד
  • מגבלות שימוש ברישיון

הרישיון המלא בעמוד המודל ↗