All-In-One-Pixel-Model

מה זה

הפרויקט הזה הוא כוונון של סטייבל דיפיוז'ן באמצעות דרימבות', שמטרתו העיקרית היא ייצור תמונות בסגנון פיקסל ארט. במקום לנסות לכוון מודל תמונה בסיסי עם פרומפטים מורכבים בתקווה לקבל מראה רטרו עקבי, כאן המודל מאומן להגיב ישירות לשתי מילות הפעלה ברורות. המילה pixelsprite מייצרת דמויות ואלמנטים בודדים, והמילה 16bitscene מייצרת סביבות ונופים שלמים בסגנון של משחקי 16 ביט.

בניגוד למודלי בסיס שבהם צריך להיאבק כדי לקבל אסתטיקה של משחקי עבר בלי פילטרים מודרניים, החיבור הזה מקבע את השפה החזותית מראש. החבילה תופסת 7.1 ג'יגה בייט ורצה מעל diffusers, כך שלא צריך כלים מיוחדים כדי לשלב אותה בפייפליין קיים. אין כאן מדידות ביצועים מספריות או מבחני השוואה בכרטיס, והערך מגיע בעיקר מהחיסכון בזמן האימון על סגנון רטרו מובהק.

מתאים ל

• ספרייטים למשחקים

  יצירת דמויות ואובייקטים בודדים לסגנון משחקי עבר באמצעות מילת ההפעלה pixelsprite.

• רקעים וסביבות רטרו

  בניית סצנות שלמות של משחקי 16 ביט עם מילת ההפעלה 16bitscene.

• אמנות קונספט מהירה

  גיבוש כיוון אמנותי לפרויקטים בסגנון פיקסל ארט לפני שלב העיבוד הידני.

איפה זה נופל

התוצאה שהמודל פולט אינה מדויקת ברמת הפיקסל הבודד. היוצר מבהיר במפורש שהתוצרים אינם pixel perfect, ולכן תצטרכו להעביר את התמונות דרך כלי פיקסליזציה חיצוני כדי לסדר קווים מטושטשים ומעברי צבע לא נקיים. אם אתם מצפים לקבל ספרייטים מוכנים למשחק בלחיצת כפתור בלי עיבוד נוסף, זה לא יעבוד בלי שלב ניקוי.

איך מריצים

כדי להריץ אותו אצלכם תצטרכו להוריד 7.1 ג'יגה בייט ולהשתמש בספריית diffusers של פייתון. מודל בגודל כזה של סטייבל דיפיוז'ן דורש כרטיס מסך עם לפחות 8 עד 12 ג'יגה בייט זיכרון גרפי כדי לייצר תמונות בקצב סביר ובלי שגיאות זיכרון.

אם יש לכם כרטיס מתאים במחשב המקומי או שרת ייעודי, ההרצה פשוטה מאוד ומקומית לחלוטין. אם אין לכם חומרה כזו, או שאתם בונים שירות שצריך לייצר תמונות רק פעם בכמה שעות, עדיף לפנות לנקודת קצה חיצונית שמתמחרת לפי שימוש במקום להחזיק שרת יקר באוויר.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("PublicPrompts/All-In-One-Pixel-Model")
img = pipe("a photo").images[0]

הקבצים

18 קבצים במאגר, 7.1 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• unet/diffusion_pytorch_model.bin3.4 GB
• Public-Prompts-Pixel-Model.ckpt2.1 GB
• safety_checker/pytorch_model.bin1.2 GB
• text_encoder/pytorch_model.bin492.3 MB
• vae/diffusion_pytorch_model.bin334.7 MB
• tokenizer/vocab.json1.1 MB
• tokenizer/merges.txt524.6 KB
• safety_checker/config.json4.8 KB
• README.md1.6 KB
• .gitattributes1.5 KB
• tokenizer/tokenizer_config.json806 B
• unet/config.json748 B
• text_encoder/config.json612 B
• vae/config.json581 B
• model_index.json546 B
• tokenizer/special_tokens_map.json472 B
• feature_extractor/preprocessor_config.json342 B
• scheduler/scheduler_config.json313 B

הרישיון

הרישיון הוא creativeml-openrail-m. הוא מאפשר שימוש מסחרי והפצה של התוצרים, בתנאי שאתם לא משתמשים במודל למטרות פוגעניות, מזיקות או לא חוקיות שמוגדרות ברישיון, ומצרפים עותק שלו אם אתם מעבירים את המשקלים הלאה.

• שימוש מסחרי
• שינוי הקוד
• מגבלות שימוש ברישיון

הרישיון המלא בעמוד המודל ↗