TRELLIS.2-Text-to-3D

מה זה

בממשק אפשר לבחור בין כתיבת תיאור טקסטואלי לבין העלאת תמונה קיימת בפורמט פיקסלים רגיל. אם מתחילים מטקסט, מודל בשם Z-Image-Turbo מייצר תמונה דו מימדית, ורק אז ממשיכים לשלב הבא. אם מעלים תמונה ישירות, המערכת מדלגת על יצירת התמונה וניגשת ישר להפקה התלת מימדית.

מאחורי הקלעים רץ המודל TRELLIS.2-4B של מיקרוסופט לצד רכיבי ראייה ממוחשבת כמו BiRefNet להסרת רקעים ודינו של מטא. התהליך מתבצע בשלושה שלבים ברורים של מבנה בסיסי דליל, עיצוב הצורה הגיאומטרית, ולבסוף הלבשת החומר והטקסטורה. התוצאה הסופית שמתקבלת היא קובץ GLB שאפשר להוריד למחשב.

מתאים ל

• יצירת אובייקטים למשחקים

  הפקת קובצי GLB של חפצים פשוטים ובדיקת התאמתם בתוך מנוע משחק במהירות.

• המרת איורים לתלת מימד

  העלאת תמונות קונספט או שרבוטים כדי לקבל מודל נפחי ראשוני בלי למדל אותו.

• בדיקת כיווני עיצוב

  בחינת פרומפטים שונים לטקסטורה וצורה כדי לקבל רפרנס תלת מימדי בסיסי.

איפה זה נופל

בגלל שהתהליך הטקסטואלי תלוי קודם כל ביצירת תמונה דו מימדית מוצלחת, כל עיוות או חוסר הבנה בשלב הציור ייכנסו ישירות למודל התלת מימדי. בנוסף, חומרת zero-a10g לא תמיד פנויה באופן מיידי בעומסים כבדים, ועיבוד של שלוש רמות שונות ידרוש סבלנות עד להשלמת קובץ ה־GLB.

איך משתמשים

בוחרים לשונית לפי סוג הקלט, כותבים תיאור ולוחצים על יצירת תמונה, או פשוט מעלים קובץ תמונה. לאחר מכן מגדירים פרמטרים כמו רזולוציה, כמות פוליגונים וגודל טקסטורה, ולוחצים על הכפתור להפקת תלת מימד. האפליקציה רצה על חומרת zero-a10g, מה שאומר שהמעבד הגרפי מוקצה לפי דרישה ועשוי לקחת רגע להתעורר אם הוא היה כבוי.

הרישיון

הקוד מופץ תחת רישיון apache-2.0 שמאפשר שימוש חופשי, עריכה והפצה. עם זאת, רצים כאן מודלים שונים ברקע שחלקם עשויים להחזיק תנאי שימוש נפרדים לגבי התוצרים המסחריים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗