GTA5_Artwork_Diffusion

מה זה

מדובר במודל שנוצר באמצעות Dreambooth על בסיס מסכי טעינה, עלילת המשחק והרחבות האונליין של GTA 5. הדאטה־סט מכיל דמויות, חפצים, רקעים ואת הכלב צ'ופ, כשהמטרה היא לחקות את סגנון האיור המזוהה עם המשחק. כדי להפעיל את האפקט בפועל, מוסיפים לפרומפט את הטוקן gtav style באנגלית.

בניגוד לפתרונות ישנים יותר של אותו סגנון שהשתמשו בטקסטואל אינוורסיה, כאן נעשה אימון ישיר על משקולות המודל. התוצאה יודעת להפיק פורטרטים, אנשים, רכבים ומבנים בצורה פשוטה יחסית, אבל מוגבלת לשפה האנגלית בלבד ולא מתאימה לטקסטים בעברית.

מתאים ל

• פורטרט בסגנון GTA

  יצירת תמונות פרופיל ודמויות עם מראה האיור המחוספס מהמשחק בעזרת הטוקן המובנה.

• קונספט לרכבים ומבנים

  הפקת רעיונות עיצוביים למכוניות ובתים עירוניים באווירה של עולם פשע בדיוני.

• בדיקת סגנון ב־Gradio

  התנסות מהירה ביצירת תמונות מבוססות טקסט באנגלית בלי להוריד 13 גיגה למחשב.

איפה זה נופל

הבעיה הבולטת ביותר מופיעה בנופים. היוצר מציין במפורש שהמודל נוטה לערבב בתוכם צילומי מסך ישירים מתוך המשחק, ולכן רקעים ונופים נראים לפעמים כמו רינדור תלת־ממד מיושן ולא כמו איור שטוח ונקי. בנוסף, הוא אומן בסוף 2022 כניסוי בידורי בלבד, כך שאין כאן אופטימיזציה מקצועית לפרומפטים מורכבים.

איך מריצים

המשקל הכולל של הקבצים מגיע ל־13.1 גיגה־בייט הפרוסים על פני 22 קבצים, והוא עובד עם ספריית diffusers. בריצה מקומית תצטרכו כרטיס מסך ייעודי עם מספיק זיכרון וידאו כדי לטעון משקולות בגודל כזה בלי לקרוס.

אם אין לכם חומרה מתאימה, היוצר פתח ספייס של Gradio שמאפשר לבדוק את התוצאות ישירות בדפדפן. ההמלצה בדף המודל היא לעבוד עם דוגם DDIM ב־65 צעדים ו־Guidance סביב 7 כדי לקבל תוצאה יציבה.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("ItsJayQz/GTA5_Artwork_Diffusion")
img = pipe("a photo").images[0]

הקבצים

22 קבצים במאגר, 13.1 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• unet/diffusion_pytorch_model.bin3.4 GB
• unet/diffusion_pytorch_model.safetensors3.4 GB
• GTA5_Artwork_Diffusion_gtav_style.ckpt2.1 GB
• GTA5_Artwork_Diffusion_gtav_style.safetensors2.1 GB
• safety_checker/pytorch_model.bin1.2 GB
• text_encoder/pytorch_model.bin492.3 MB
• model.safetensors492.3 MB
• vae/diffusion_pytorch_model.bin334.7 MB
• vae/diffusion_pytorch_model.safetensors334.6 MB
• tokenizer/vocab.json1.1 MB
• tokenizer/merges.txt524.6 KB
• safety_checker/config.json4.9 KB
• README.md3.1 KB
• .gitattributes1.5 KB
• unet/config.json901 B
• tokenizer/tokenizer_config.json806 B
• text_encoder/config.json612 B
• model_index.json577 B
• vae/config.json577 B
• feature_extractor/preprocessor_config.json518 B
• tokenizer/special_tokens_map.json472 B
• scheduler/scheduler_config.json341 B

הרישיון

הרישיון הוא creativeml-openrail-m, שמאפשר שימוש חופשי מתמלוגים והפצה מחדש תחת מגבלות שימוש הוגן. עם זאת, היוצר מצהיר שאינו קשור לרוקסטאר, שאין לו כוונה להפוך את המודל למוצר מסחרי, ושהוא אוסר על שימוש בו להפרת זכויות יוצרים או סימנים מסחריים. מבחינה משפטית במוצר מסחרי, מדובר בסיכון שנובע משימוש בחומרים של מותג קיים.

• שימוש מסחרי
• שינוי הקוד
• מגבלות שימוש ברישיון

הרישיון המלא בעמוד המודל ↗