TRELLIS-text-xlarge
קוד פתוחmicrosoftmit2025-03-24
microsoft עומדים גם מאחורי Sho, ויש עליו סקירה כאן.
מודל שמייצר אובייקטים תלת ממדיים ישירות מתיאור טקסטואלי. הוא מיועד למי שרוצה לדלג על שלב התמונה ולייצר נכסי תלת ממד ישר מהפרומפט.
- 3.8 GBמשקל הקבצים
- 11,622הורדות בחודש
- 74לייקים
מה זה
מדובר בגרסת ה־XL של TRELLIS מבית מיקרוסופט, שמייצרת מבנים תלת ממדיים ישירות מטקסט באנגלית לפי ארכיטקטורה של ייצוגים חביוניים מובנים. במקום להסתמך על מודל ביניים שמייצר תמונה דו ממדית ורק אז מנסה להרים אותה לתלת ממד, הוא ניגש ישר למשימת הגיאומטריה מהפרומפט.
המשקל הכולל של הקבצים עומד על 3.8 גיגה בייט בערך, שזה קומפקטי יחסית למודל שמוגדר כ־XL בתחום הג'נרטיבי. אם אתם מחפשים לשלב יצירת נכסים מהירה בתהליך העבודה שלכם בלי לנהל פייפליין כפול של תמונה ואז רשת תלת ממד, הגרסה הזו מנסה לפתור בדיוק את הנקודה הזו.
מתאים ל
- אבטיפוס מהיר למשחקים
יצירת מודלים ראשוניים ישירות מרעיונות כתובים, בלי לחכות לאמן תלת ממד בשלבי הבדיקה.
- פיתוח סביבות וירטואליות
בנייה מהירה של חפצים פשוטים לרקע של עולמות תלת ממד לפי תיאור טקסט באנגלית.
- מחקר גנרטיבי בתלת ממד
בסיס נוח לניסויים ובדיקות של ארכיטקטורת TRELLIS בזכות קוד מקור פתוח ומשקל קבצים נגיש.
איפה זה נופל
הקלט מוגבל לאנגלית בלבד, כך שאי אפשר להזין פרומפטים בעברית ולצפות לתוצאה הגיונית. בנוסף, כרטיס המודל לא חושף נתוני ביצועים, זמני ריצה, או פירוט לגבי מגבלות הגיאומטריה והטקסטורות, כך שתצטרכו לבדוק בעצמכם אם הוא מתמודד טוב עם צורות מורכבות או טקסטים עמוסים בפרטים.
שאלות
נפוצות
אפשר לכתוב לו פרומפטים בעברית?
לא. המודל אומן ותועד לעבודה בשפה האנגלית בלבד. אם תזינו עברית הוא כנראה ייכשל לחלוטין או ייצר פלט מעוות, ולכן חובה לתרגם את הפרומפט לאנגלית לפני השליחה.
האם צריך כרטיס מסך חזק מאוד בשביל להריץ אותו?
הקבצים שוקלים בסך הכול 3.8 גיגה בייט, שזה לא ענק, אבל לייצור תלת ממד צריך זיכרון וידאו פנוי. כרטיס ייעודי למפתחים עם זיכרון גרפי מודרני יעשה את העבודה, ועל מעבד רגיל זה יהיה אטי מכדי להיות שימושי.
איך מריצים
המודל דורש התקנה של ספריית trellis הייעודית מהקוד הפתוח של מיקרוסופט. עם משקל קבצים של כמעט ארבעה גיגה בייט, תצטרכו כרטיס מסך מודרני עם כמות זיכרון סבירה כדי לטעון אותו ולבצע הסקה בלי לחנוק את המערכת.
אם יש לכם שרת עם מעבד גרפי מתאים, ההרצה העצמאית תיתן לכם שליטה מלאה על התהליך ועל הזמנים. אם אין לכם חומרה כזו זמינה, שווה לבדוק פתרונות ענן או שירותים מנוהלים שמריצים מודלים כאלה לפי קריאה, במיוחד אם הצורך בתלת ממד הוא לא שוטף.
pip install -U huggingface_hub hf download microsoft/TRELLIS-text-xlarge
הקבצים
7 קבצים במאגר, 3.8 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
הרישיון כאן הוא MIT, אחד הרישיונות הכי פתוחים שיש. מותר לקחת את המשקולות, להשתמש בהן במוצרים מסחריים, לשנות את הקוד ולהפיץ אותו כמעט בלי הגבלות, כל עוד משאירים את הצהרת זכויות היוצרים המקורית.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש