GPT
G

GaussianAnything-AIGC3D

רץ בדפדפן

yslanmit2024-11-26

  • gradio

היישום ממיר תמונה בודדת של חפץ למודל תלת ממד ומציג סרטון מרונדר שלו. הוא מתאים ליוצרים ומפתחים שרוצים לבדוק שחזור גאוסיאני מתמונות ללא התקנה מקומית.

  • הורדות בחודש
  • 90לייקים

מה זה

מעלים תמונה של אובייקט בודד, או בוחרים מתוך הדוגמאות המוכנות מראש בממשק. המערכת כוללת תיבת סימון להסרת הרקע באמצעות rembg, ומשאירה רק את החפץ המרכזי לעיבוד. אפשר גם לכוון ערכי seed ו scale של cfg לפני הלחיצה על כפתור ההפקה.

התוצאה מחולקת לשני שלבים. בלשונית של השלב הראשון מקבלים מודל תלת ממד בסיסי, ובלשונית של השלב השני מופקים מודל תלת ממד מתקדם, קובץ גאוסיאן וסרטון סיבוב מרונדר ברזולוציית 384 פיקסלים בשתי רמות פירוט. הקוד נשען על ספריות כמו pytorch3d ו open3d יחד עם שיטות דיפוזיה תלת ממדית, ומתקשר למודלים רחבים יותר בתחום כמו shap e ו InstantMesh.

מתאים ל

  • יצירת מודלים לתלת ממד

    המרת תמונת מוצר או חפץ למודל ראשוני ולקובץ גאוסיאן לצורך בחינה בתוכנות גרפיקה.

  • רינדור סרטוני תצוגה

    הפקת סרטון סיבוב מרונדר של אובייקט כדי לבדוק זוויות צפייה שונות בלי לבנות סצנה מאפס.

  • ניסוי מחקרי בתחום ה 3D

    בדיקה מעשית של איכות שחזור בשני שלבים מול מודלים קיימים כמו InstantMesh ו Shap E.

איפה זה נופל

המודל מיועד לחפצים בודדים בלבד ולא יתמודד טוב עם סצנות שלמות, חדרים או קומפוזיציות מורכבות של כמה פריטים. אם התמונה המקורית כוללת רקע עמוס מדי שהסרת הרקע האוטומטית מפספסת, התוצאה התלת ממדית תסבול מעיוותים קשים. בנוסף, הדוגמאות בממשק אינן שמורות מראש בזיכרון מטמון, כך שכל בדיקה דורשת חישוב מלא מחדש.

שאלות
נפוצות

האם השימוש בחינם?

כן, היישום זמין בדפדפן בחינם לחלוטין ואינו דורש הרשמה או תשלום. המשאבים מוקצים על בסיס שיתופי בחומרת ZeroGPU של Hugging Face.

כמה זמן לוקח לייצר מודל?

אם היישום ישן, תצטרכו להמתין כדקה להתעוררות החומרה והקצאת מעבד ה A10G. לאחר שהסביבה פעילה, תהליך הסרת הרקע והחישוב התלת ממדי לוקח בדרך כלל בין חצי דקה למספר דקות בודדות.

האם אפשר להריץ את היישום מקומית?

כן, הקוד פתוח ברישיון MIT וזמין במאגר. עם זאת, ההרצה המקומית דורשת כרטיס מסך חזק של Nvidia והתקנת חבילות מורכבות כמו open3d, pytorch3d ו xformers.

מה קורה לתמונות שאני מעלה?

הקבצים נשלחים לעיבוד ישירות על גבי התשתית של Hugging Face ואינם נשמרים לשימוש מסחרי חיצוני. למרות זאת, זו פלטפורמה שיתופית ולכן מוטב להימנע מהעלאת תמונות פרטיות או מסווגות.

איך משתמשים

גוררים תמונה, מוודאים שתיבת ניקוי הרקע מסומנת במידת הצורך, ולוחצים על כפתור Generate. היישום רץ על מאיץ מסוג A10G דרך חומרת ZeroGPU. מאחר שהסטטוס שלו כרגע במצב שינה, הטעינה הראשונית תיקח דקה או שתיים להתעוררות והקצאת המשאבים, ולאחר מכן העיבוד מתבצע ללא צורך בהתחברות או תשלום.

הרישיון

הקוד מפורסם ברישיון MIT הפתוח, שמאפשר שימוש חופשי כולל שימוש מסחרי, שינוי והפצה של הקוד. עם זאת, התמונות שאתם מעלים מעובדות על גבי השרתים הציבוריים של Hugging Face, ולכן לא מומלץ להעלות חומרים מסחריים סודיים או מידע רגיש.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗