חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
3

3dai

רץ בדפדפן

broyangapache-2.02024-12-19

  • gradio

מעלים תמונה דו ממדית ומקבלים מודל תלת ממדי עם טקסטורה להורדה. הכלי מיועד ליוצרי משחקים, מעצבים ומשתמשי רחפנים שצריכים סריקה גיאומטרית מהירה.

  • —הורדות בחודש
  • 36לייקים

מה זה

אתם מעלים תמונת סטילס רגילה, צילום חפץ בודד או פריים בודד מרחפן, ומקבלים תצוגה מקדימה תלת ממדית ישירות בדפדפן לצד קובצי GLB וקובצי STL להורדה. המערכת מנקה קודם את הרקע מהתמונה בעזרת מודלים ייעודיים כמו RMBG-2.0 או BiRefNet, ומשם מעבירה את החפץ לשחזור נפח.

מאחורי הקלעים רצים מודלי TRELLIS של מיקרוסופט, כולל גרסת TRELLIS.2-4B וגרסת TRELLIS-image-large. המודלים משלבים שדות קרינה עצביים והערכת גיאומטריה מבוססת דיפיוזיה כדי להפוך פיקסלים שטוחים לענן נקודות, לרינדור גאוסיאני ולרשת פוליגונים סופית.

מתאים ל

  • הפקת נכסים למשחקים

    יצירה מהירה של חפצים ואביזרים בפורמט GLB מוכן מראש לייבוא במנועי יוניטי או בלנדר.

  • הכנה להדפסת תלת ממד

    המרת תמונת חפץ יחידה לרשת פוליגונים והורדת קובץ STL שמיועד לתוכנות פריסה והדפסה.

  • בדיקת שטח מצילומי רחפן

    שחזור מהיר של פריים בודד מרחפן למודל נפחי לפני שמשקיעים זמן במיפוי מורכב.

איפה זה נופל

הכלי מיועד לתצוגות מקדימות מהירות בלבד ולא מספק דיוק הנדסי של מילימטרים. בנוסף, חומרת ה־A10G השיתופית מוגבלת בזיכרון, ואם תעלו תמונות מורכבות מדי תקבלו שגיאות של חוסר זיכרון שמחייבות להקטין את גודל הטקסטורה. הקוד גם חושף שתמיכה בהעלאת מספר תמונות במקביל נוטרלה, כך שאי אפשר לשלב כמה זוויות באותו רינדור.

שאלות
נפוצות

האם השימוש באפליקציה כרוך בתשלום?

הגישה לעמוד בחינם לחלוטין ואין צורך במנוי בתשלום. המשאבים מגיעים מהקצאת ZeroGPU שיתופית של Hugging Face, ולכן השימוש פתוח לכולם כל עוד השרת פנוי.

מה קורה עם התמונות והקבצים שמעלים?

הקבצים נשלחים לשרת לצורך הסרת הרקע ורינדור הרשת התלת ממדית. הממשק שומר אותם זמנית להצגת התלת ממד וההורדה, אך מומלץ לא להעלות חומרים רגישים או סודיים לשרתים ציבוריים.

כמה זמן לוקח לייצר מודל בודד?

החישוב עצמו על ה־GPU נמשך לרוב שניות ספורות עד כחצי דקה. עם זאת, אם המעבד הגרפי תפוס על ידי משתמשים אחרים או שצריך להמתין להקצאת זיכרון, תצטרכו להמתין בתור עד תחילת העיבוד.

במה הכלי הזה שונה מהרצת המודל המקורי?

האפליקציה עוטפת את מודלי TRELLIS בממשק גרפי פשוט שכולל ניקוי רקע אוטומטי ותצוגת רשתות בדפדפן. בהרצה עצמאית בקוד תקבלו שליטה מלאה בפרמטרים ויכולת להריץ מספר זוויות, בעוד שההדגמה כאן מקובעת להגדרות ספציפיות כדי לא לקרוס על ה־GPU.

איך משתמשים

גוררים תמונה יחידה לחלון הקלט, לוחצים על כפתור הייצור וממתינים. הריצה מתבצעת על חומרת Zero-A10G של Hugging Face שמקצה כרטיס גרפי לפי דרישה, ולכן אם השרת עמוס תצטרכו להמתין שהמעבד הגרפי יתפנה. לאחר סיום התהליך מופיע דגם ה־GLB בחלון תצוגה אינטראקטיבי, וממנו אפשר להפיק בלחיצה נוספת גם קובץ STL שמתאים ישירות להדפסה.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0 שמתיר שימוש מסחרי, שינוי והפצה של הקוד. עם זאת, התמונות שאתם מעלים והמודלים שנוצרים מעובדים על שרתי Hugging Face ולכן כפופים לתנאי השימוש הכלליים של הפלטפורמה.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗