woolitize

מה זה

מדובר בהתאמה אישית של סטייבל דיפיוז'ן 1.5, שאומנה במיוחד על מרקמים של צמר ולבד. היוצר השתמש ב־117 תמונות אימון לאורך 8,000 צעדים, כשחמישית מטקסט האימון נכתב ידנית כדי לכוון את הסגנון במדויק. הוא לא מתיימר להיות מודל כללי אלא כלי שמתמקד כולו באסתטיקה ספציפית מאוד.

כדי שהתוצאה תקבל את המראה הסרוג, אתם חייבים לכלול את מילת ההפעלה woolitize בתוך הפרומפט. המאגר כולל את גרסה 1.0 המקורית, אך היוצר כבר הוציא גרסה 1.2 עם שיפורים ברקעים ובפרטים ברזולוציה של 768 על 768.

מתאים ל

• איורי צמר לספרי ילדים

  הוא נותן מראה סרוג ומזמין לדמויות, מושלם לאיורים חמים שלא צריכים ריאליזם.

• עיצוב דמויות לאנימציה

  יצירת קונספטים מהירים לבובות צמר לפני שבונים אותן פיזית או בתלת מימד.

• גרפיקה למשחקי קז'ואל

  יצירת נכסים ויזואליים שנראים כמו חפצי בד וסריגה ישירות מתוך טקסט.

איפה זה נופל

האימון התבסס על 117 תמונות בלבד, שזה מאגר קטן מאוד. בגלל המגבלה הזו, כל סטייה מהסגנון הסרוג כמעט בלתי אפשרית, ואם תנסו לייצר סצנות מורכבות עם המון פרטים תקבלו עיוותים. בנוסף, גרסת הבסיס היא מ־2022, כך שקשה לצפות ממנה לאיכות של מודלים מודרניים. גרסת ה־SD 2.0 שהוזכרה לא תואמת לכל הכלים הנפוצים.

איך מריצים

אתם יכולים לטעון את המשקלים דרך ספריית diffusers או להוריד את קובץ ה־ckpt ישירות לממשקים כמו אצל Automatic111. כדי להריץ משקלים של סטייבל דיפיוז'ן 1.5 מקומית תצטרכו כרטיס מסך עם לפחות שמונה גיגה זיכרון וידאו, אחרת תתקלו בחוסר זיכרון.

סך כל הקבצים במאגר שוקל 11.9 גיגה בגלל ריבוי גרסאות וקבצים שונים. אם אתם רק בודקים רעיון ולא רוצים להוריד גיגות למחשב, כדאי קודם להרים קוד פשוט בענן או להשתמש בסביבה שכוללת כבר מאיץ גרפי מתאים.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("plasmo/woolitize")
img = pipe("a photo").images[0]

הקבצים

41 קבצים במאגר, 11.9 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• unet/diffusion_pytorch_model.bin3.4 GB
• woolitize_sd2ben.ckpt2.6 GB
• woolitize_sd2shiv.ckpt2.6 GB
• woolitize.ckpt2.1 GB
• safety_checker/pytorch_model.bin1.2 GB
• text_encoder/pytorch_model.bin492.3 MB
• vae/diffusion_pytorch_model.bin334.7 MB
• concept_images/wool.jpg2.0 MB
• tokenizer/vocab.json1.1 MB
• concept_images/goth4.jpg701.1 KB
• concept_images/boat.jpg683.9 KB
• concept_images/pagoda.jpg638.2 KB
• concept_images/goth3.jpg524.8 KB
• tokenizer/merges.txt524.6 KB
• concept_images/spidey.jpg461.3 KB
• concept_images/woolitize_(1).png446.8 KB
• concept_images/woolitize_(2).png437.0 KB
• concept_images/lady.jpg435.4 KB
• concept_images/goth2.jpg430.7 KB
• concept_images/fight.jpg364.9 KB
• concept_images/sanchez.jpg354.3 KB
• concept_images/sam2.jpg349.7 KB
• concept_images/goth1.jpg344.8 KB
• concept_images/sam1.jpg309.6 KB
• concept_images/yoda.jpg297.3 KB
• concept_images/totoro.jpg288.5 KB
• concept_images/ww.jpg270.4 KB
• concept_images/woolitize_(1).jpg39.5 KB
• concept_images/woolitize_(2).jpg35.6 KB
• safety_checker/config.json4.7 KB
• README.md1.8 KB
• .gitattributes1.5 KB
• unet/config.json929 B
• tokenizer/tokenizer_config.json817 B
• vae/config.json638 B
• text_encoder/config.json613 B
• model_index.json541 B
• tokenizer/special_tokens_map.json472 B
• feature_extractor/preprocessor_config.json342 B
• scheduler/scheduler_config.json313 B

הרישיון

הרישיון הוא openrail-m. הוא מתיר שימוש מסחרי, אבל מחייב אתכם לא להשתמש במודל לפעולות מזיקות, לא חוקיות או פוגעניות, ומחייב להעביר את אותן הגבלות הלאה למשתמשי הקצה שלכם אם תפיצו אותו במוצר.

• שימוש מסחרי
• שינוי הקוד
• מגבלות שימוש ברישיון

הרישיון המלא בעמוד המודל ↗