SD_PixelArt_SpriteSheet_Generator

מה זה

מדובר בהתאמה של סטייבל דיפיוז'ן שמכוונת ספציפית ליצירת דמויות בפיקסל ארט מזוויות קבועות: פנים, גב, שמאל וימין. השליטה בזווית מתבצעת בעזרת מילות מפתח מוגדרות מראש בפרומפט, כמו זיהוי ייעודי לחזית או לצד, במקום להסתמך על ניסוחים חופשיים שבדרך כלל נכשלים במשימה הזו.

בניגוד למודלי תמונה כלליים שפולטים סגנונות מעורבבים ולא עקביים, כאן יש ניסיון לתת מענה לצורך של מפתחי משחקים בספרייט שיטס. עם זאת, היוצר מציין מראש שכדי לקבל דמות עקבית באמת בכל הכיוונים, צריך למזג את המשקלים שלו עם מודל נוסף שאומן על הדמות הספציפית, ולא להסתמך עליו לבד.

מתאים ל

• בסיס לספרייטים למשחקים

  יצירת זוויות בסיס לדמויות דו מימדיות, שחוסכת שרטוט ראשוני מאפס.

• מיזוג עם מודלים מותאמים

  חיבור המשקלים למודל דמות קיים כדי להלביש עליה סגנון פיקסל ארט.

• אב טיפוס ויזואלי מהיר

  בדיקת כיוונים עיצוביים לדמויות משחק ישירות מתוך טקסט.

איפה זה נופל

התוצאות הגולמיות רחוקות מלהיות מוכנות למשחק. היוצר עצמו מבהיר שהפלט כולל עכירות בצבעים ורקע שחובה להסיר ידנית בכלים כמו פוטושופ או קריטה, יחד עם פעולות של הקטנה והגדלה כדי לנקות את הפיקסלים. בנוסף, הוא ממליץ לייצר רק צד אחד ולשקף אותו כדי לשמור על דיוק, ועדיין נדרש משחק בהגדרות img2img כדי להגיע למשהו שמיש.

איך מריצים

טוענים אותו ישירות דרך ספריית diffusers של פייתון עם פייפליין סטנדרטי של סטייבל דיפיוז'ן בפורמט float16. כדי להריץ את 9.1 הג'יגה בייט של הקבצים מקומית ובמהירות סבירה תצטרכו כרטיס מסך של אנבידיה עם לפחות 8 עד 12 ג'יגה בייט זיכרון וידאו, אם כי אפשר לייצא אותו גם לפורמטים כמו ONNX או MPS למק.

אם אין לכם חומרה ייעודית מקומית או שאתם רק רוצים לבדוק כמה פרומפטים, שווה לשקול הרצה על שרת ענן פשוט לפי שעה במקום להוריד את כל הנפח הזה למחשב האישי.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("Onodofthenorth/SD_PixelArt_SpriteSheet_Generator")
img = pipe("a photo").images[0]

הקבצים

18 קבצים במאגר, 9.1 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• PixelartSpritesheet_V.1.ckpt4.3 GB
• unet/diffusion_pytorch_model.bin3.4 GB
• safety_checker/pytorch_model.bin1.2 GB
• text_encoder/pytorch_model.bin492.3 MB
• vae/diffusion_pytorch_model.bin334.7 MB
• tokenizer/vocab.json1.1 MB
• tokenizer/merges.txt524.6 KB
• safety_checker/config.json4.8 KB
• README.md2.9 KB
• .gitattributes1.5 KB
• tokenizer/tokenizer_config.json806 B
• unet/config.json743 B
• text_encoder/config.json612 B
• vae/config.json576 B
• model_index.json541 B
• tokenizer/special_tokens_map.json472 B
• feature_extractor/preprocessor_config.json342 B
• scheduler/scheduler_config.json308 B

הרישיון

הפרויקט מפורסם תחת רישיון אפאצ'י 2.0. הרישיון הזה מתיר שימוש מסחרי מלא, שינוי של הקוד והמשקלים והפצה שלהם, כל עוד שומרים על הודעת זכויות היוצרים המקורית ומצרפים את נוסח הרישיון. אפשר לשלב אותו במוצר מסחרי בלי לשלם תמלוגים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗