TRELLIS.2-4B

קוד פתוח

microsoftmit2025-12-01

trellis2
image-to-3d
en

microsoft עומדים גם מאחורי Sho, ויש עליו סקירה כאן.

הופך תמונה בודדת למודל תלת ממדי שלם עם טקסטורות וחומרים מתקדמים. פתרון חזק למי שחייב גאומטריה מורכבת ומשטחים פתוחים שכלים ישנים יותר פשוט הרסו.

15.1 GBמשקל הקבצים
1,791,948הורדות בחודש
1,191לייקים

מה זה

הארכיטקטורה כאן נשענת על מודל זרימה בגודל 4 מיליארד פרמטרים ומבנה נתונים בשם O-Voxel, שמחליף את שיטות ה־SDF הישנות. במקום להתעקש על גופים סגורים הרמטית, הוא מתמודד ישירות עם גאומטריה לא אחידה, משטחים פתוחים ואפילו חומרים שקופים ברמת PBR מלאה. הקבצים שוקלים כ־15.1 גיגה בייט, והוא מייצר רשתות תלת ממד ברזולוציות של עד 1536³. המרת המרחב מתבצעת בעזרת Sparse 3D VAE שמכווץ את הנפח פי 16, כך שנכס של 1024³ נדחס לכ־9,600 טוקנים ללא איבוד איכות נראה לעין.

מבחינת זמני ריצה על כרטיס H100, פלט ברזולוציית 512³ יוצא תוך כ־3 שניות, 1024³ לוקח כ־17 שניות, והרזולוציה המקסימלית של 1536³ דורשת כ־60 שניות שלמות. מעבר ליצירה מאפס מתמונה, ניתן להשתמש בו כדי ליצור טקסטורות בלבד על גבי מודלים קיימים בהתבסס על תמונת מקור. זה כלי רציני למי שמחפש פרטים חדים ואיכות חומרים אמיתית ולא רק קירובים מעוגלים.

מתאים ל

יצירת נכסים למשחקים
מייצר מודלים עם חומרי PBR ושקיפויות מתמונה אחת, שמתאימים מיד למנועי רינדור.
טקסטור למודל קיים
מאפשר להלביש טקסטורות עשירות על גאומטריה נתונה לפי תמונת רפרנס.
פרוטוטייפינג לעיצוב
הופך סקיצות דו ממדיות לאובייקטים תלת ממדיים מורכבים תוך שניות בודדות.

איפה זה נופל

המודל פולט לפעמים רשתות גולמיות עם חורים קטנים או נתקים טופולוגיים, כך שהוא לא מתאים ישר מהקופסה להדפסה בתלת ממד בלי הרצת סקריפטים לתיקון החורים. בנוסף, הוא לא עבר יישור מול העדפות אנושיות, ולכן התוצאות משקפות ישירות את דאטה האימון וסובלות מחוסר עקביות בסגנון האמנותי.

שאלות
נפוצות

האם אפשר להריץ את המודל על ווינדוס או מק?

הקוד נבדק ונתמך כרגע בלינוקס בלבד ומסתמך על תלויות CUDA ספציפיות. ללא שרת לינוקס וכרטיס אנבידיה מתאים, לא תצליחו לקמפל את הספריות הנדרשות.

האם הפלט מתאים ישירות להדפסת תלת ממד?

לא תמיד. הרשתות הגולמיות עלולות לכלול חורים קטנים ואינן בהכרח אטומות לחלוטין, ולכן חובה להעביר אותן דרך סקריפטים לסגירת חורים לפני ההדפסה.

איך מריצים

ההרצה דורשת לינוקס בלבד וכרטיס מסך של אנבידיה עם לפחות 24 גיגה בייט זיכרון. הקוד נבדק על A100 ו־H100, ומחייב התקנת ערכת CUDA בגרסה 12.4 לצורך קומפילציה של חבילות ייעודיות, לצד פייתון 3.8 ומעלה וסביבת קונדה.

אם אין לכם שרת ייעודי בענן עם החומרה הזו והסבלנות לקמפל ספריות ידנית, אין שום טעם לנסות להריץ אותו מקומית. עדיף בהרבה לפנות לפתרונות מנוהלים או ל־API חיצוני כשזה יהיה זמין.

pip install -U huggingface_hub
hf download microsoft/TRELLIS.2-4B

הקבצים

22 קבצים במאגר, 15.1 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

רישיון MIT פתוח ומתירני לחלוטין. מותר להשתמש בו לצרכים מסחריים, לשנות את הקוד ולהטמיע אותו בתוך מוצרים סגורים, כל עוד שומרים על הודעת זכויות היוצרים המקורית.

שימוש מסחרי
שינוי הקוד
הפצה מחדש

הרישיון המלא בעמוד המודל ↗