TRELLIS

מה זה

אתם מספקים תמונה בודדת או סדרה של תמונות בפורמט PNG עם שקיפות, ומקבלים תצוגת וידאו מסתובבת של האובייקט יחד עם אפשרות לחלץ קובץ GLB או נתוני Gaussian Splatting.

מאחורי הקלעים רץ המודל TRELLIS-image-large של מיקרוסופט דרך צינור ייעודי. התהליך מתבצע בשני שלבים, יצירת מבנה דליל ולאחריו יצירת ייצוג לטנטי מובנה, כאשר ניתן לשלוט בעוצמת ההנחיה ובמספר צעדי הדגימה לכל שלב, כמו גם ברמת פישוט הרשת וגודל הטקסטורה של קובץ התלת ממד הסופי.

הממשק כולל מאגר דוגמאות מובנה של עשרות תמונות בודדות וגלריות של תמונות מרובות, שמדגימות את סוג הקלט הנדרש להרצה תקינה.

מתאים ל

• יצירת מודלים ממשחקים

  המרת תמונות קונספט למודלים ראשוניים בפורמט GLB לשילוב מהיר במנועי משחקים.

• הפקת Gaussian Splatting

  חילוץ ייצוגי גאוסיאן ישירות מתמונות דו ממדיות לצורכי רינדור בזמן אמת.

• שחזור תלת ממד מרובה זוויות

  יצירת נכס תלת ממדי מדויק יותר באמצעות הזנה של מספר צילומים מאלגוריתמים ייעודיים.

איפה זה נופל

המערכת מוגבלת לתמונות בעלות רקע שקוף מסוג RGBA, כך שתמונות רגילות לא יעבדו בלי עיבוד מקדים. שדות ההזנה בקוד מוגדרים כלא אינטראקטיביים ומסתמכים בעיקר על בחירה מתוך דוגמאות מובנות.

בנוסף, הסטטוס הנוכחי מציג שגיאת קונפיגורציה שמונעת עבודה יציבה בענן. לצורך שימוש מעשי עדיף להריץ את הקוד ישירות מהמאגר.

איך משתמשים

בוחרים תמונה, מכוונים פרמטרים אם רוצים, ולוחצים על כפתור Generate ליצירת התצוגה המקדימה. לאחר מכן לוחצים על כפתורי החילוץ כדי להוריד את קובצי ה־GLB או הגאוסיאן.

הקוד מוגדר לרוץ על מעבד גרפי מסוג zero-a10g שמקצה משאבים לפי דרישה, אך סטטוס ההרצה מדווח כרגע כשגיאת קונפיגורציה, כך שהדמו עשוי שלא לפעול ברשת.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי כולל שימוש מסחרי ושינוי קוד. הקבצים שנוצרים מבוססים על הקלט שלכם, אך הממשק מוחק את המטמון באופן אוטומטי כל עשר דקות.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗