חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
T

TRELLIS-Multiple3D

רץ בדפדפן

cavargas10mit2025-02-06

  • gradio

הדגמה שמייצרת מודל תלת ממד מכמה תמונות של אותו אובייקט במקביל. מתאימה ליוצרים ומפתחים שרוצים לבדוק חילוץ קבצי GLB מתמונות בלי לכתוב קוד.

  • —הורדות בחודש
  • 61לייקים

מה זה

אתם מעלים גלריה של תמונות דרך הממשק, והמערכת מריצה צינור עיבוד של TrellisImageTo3DPipeline כדי לייצר נכס תלת ממדי. התהליך מחולק לשני שלבים עיקריים, יצירת מבנה דליל ולאחר מכן יצירת מבנה לטנטי, כשאפשר לבחור בין שני אלגוריתמים למיזוג התמונות, stochastic או multidiffusion.

בסיום מקבלים תצוגת וידאו של האובייקט המסתובב, ואפשר לבצע חילוץ של קובץ GLB סופי עם שליטה על פישוט הרשת וגודל הטקסטורה. התוצאה מוצגת בנגן תלת ממד ייעודי וניתנת להורדה ישירה.

מתאים ל

  • המרת תמונות מרובות למודל

    מעלים מספר זוויות של חפץ ומקבלים תצוגה תלת ממדית מסתובבת.

  • ייצוא נכסי GLB

    מחלצים קובץ רשת עם טקסטורה מותאמת ישירות לשימוש בתוכנות גרפיקה.

  • בדיקת אלגוריתמי שילוב

    משווים בין stochastic לבין multidiffusion באיכות הפלט הסופי.

איפה זה נופל

החיסרון המיידי הוא שהממשק פשוט מושבת כרגע בגלל שגיאת קוד בהפעלה. מעבר לכך, הדגמות תלת ממד שרצות על מעבד בסיסי בדרך כלל קורסות מחוסר זיכרון או זוחלות. אין בממשק דוגמאות מובנות מוכנות מראש, כך שחייבים לספק קבצים מתאימים בעצמכם.

שאלות
נפוצות

האם היישום עובד כרגע בדפדפן?

לא. היישום מדווח כרגע במצב של תקלת ריצה ולא נטען באופן תקין. כדי להשתמש בו צריך לחכות שהמפתח יתקן את ההרצה או להעתיק את הקוד אליכם.

האם השימוש בחינם?

כן, הממשק פתוח לחלוטין ואין דרישת תשלום. גם קוד המקור פתוח תחת רישיון MIT.

האם אפשר להריץ את זה מקומית על המחשב?

כן, הקוד מתבסס על ספריית Trellis וקוד Gradio פתוח. תצטרכו סביבת פייתון ותמיכה מתאימה להרצת מודלים כדי להריץ את הצינור הזה עצמאית.

מה קורה לקבצים שאני מעלה?

הקוד מוחק את זיכרון המטמון בסיום ההפעלה או אחרי זמן קצוב. המידע אינו נשמר במאגר קבוע באתר מעבר לעיבוד עצמו.

איך משתמשים

נכון לעכשיו אי אפשר להריץ אותה בדפדפן כי היא נמצאת במצב של שגיאת ריצה. כשהיא פעילה, מעלים תמונות, משנים פרמטרים של שלבי הדגימה אם רוצים, ולוחצים על כפתור ההפקה. לאחר שנוצר הווידאו, לוחצים על הפקת GLB ומורידים את הקובץ. היישום מוגדר על מעבד בסיסי, מה שאומר שגם כשהוא עובד, פעולות כבדות כאלה ייקחו זמן רב ללא כרטיס מסך ייעודי.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי בקוד, שינוי שלו והפצה לכל מטרה. הקבצים שאתם מעלים מנוהלים מקומית בזיכרון ההפעלה של היישום ונמחקים עם סגירת החיבור.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗