MV-Adapter-Text2Texture

מה זה

מזינים קובץ מש תלת-ממדי והוראת טקסט באנגלית, או בוחרים מתוך דוגמאות מוכנות של קובצי 001.glb ו־002.glb שמגיעות בממשק. בצד הפלט מקבלים גלריית תמונות מזוויות שונות, תצוגה אינטראקטיבית של המודל בגרסת GLB עם הטקסטורה שהולבשה עליו, וכפתור ייעודי להורדת הקובץ.

מאחורי הקלעים הקוד משלב כמה מודלים כבדים יחד. הבסיס נשען על המודל של huanngzh/mv-adapter יחד עם SDXL של Stability AI ותיקון ה־VAE שלו, לצד שימוש ב־Stable Diffusion v1.5, מודל להסרת רקע ומודל dtarnow/UPscaler. השרשרת הזו מייצרת היטלים ממספר זוויות ומבצעת פריסת UV ישירות על גבי הגאומטריה.

מתאים ל

• צביעת מודלים קיימים

  הלבשת טקסטורה חדשה על גבי קובץ GLB קיים לפי תיאור טקסט, בלי לפתוח תוכנת צביעה ידנית.

• בדיקת כיווני עיצוב

  יצירת כמה גרסאות חזותיות לאותו מודל תלת-ממדי במהירות, על ידי שינוי הפרומפט וה־Seed.

• הכנת נכסים לאבטיפוס

  הפקת מודלים צבועים עם פריסת UV מוכנה עבור משחקים או הדמיות בשלבי פיתוח מוקדמים.

איפה זה נופל

הבעיה המיידית היא שההדגמה שבורה ולא מגיבה בגלל שגיאת הריצה בשרת. גם אם היא תחזור לעבוד, מודלים כאלה מתקשים לעיתים קרובות להתאים טקסטורות מורכבות סביב תפרים נסתרים, ובשביל לקבל תוצאה סבירה חייבים קובץ תלת-ממד נקי יחסית.

איך משתמשים

לוחצים על כפתור Generate Texture לאחר העלאת המודל והקלדת הפרומפט. אפשר לכוונן בהגדרות את צעדי ההסקה, ערכי ה־Guidance, גודל מפת ה־UV ופריסת ה־UV האוטומטית. כרגע לא תצליחו להריץ את זה בדפדפן, כי החלל מוגדר במצב של תקלת זמן ריצה, RUNTIME_ERROR, למרות שהוא משויך לחומרת A10G.

הרישיון

הקוד מפורסם תחת רישיון MIT, מה שנותן חופש רחב מאוד לשימוש, כולל פרויקטים מסחריים. לגבי הקבצים שמעלים או מורידים, תנאי השימוש נגזרים גם מרישיונות משקלי המודלים שרצים ברקע, כמו SDXL.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗