GPT
M

MeshAnything

רץ בדפדפן

Yiwen-ntuother2024-06-16

  • gradio

מעלים מודל תלת ממדי ומקבלים גרסת רשת מעובדת בפורמט OBJ. הפתרון מיועד למי שצריך לעבד גיאומטריה תלת ממדית ישירות בדפדפן.

  • הורדות בחודש
  • 167לייקים

מה זה

האפליקציה מקבלת קובץ תלת ממדי כקלט, מעבירה אותו המרה לענן נקודות, ומייצרת פלט של מודל תלת ממדי בפורמט OBJ שמוצג לצד רינדור תמונה. הממשק כולל דוגמאות מוכנות מתיקיית דוגמאות מקומית שנטענות בעמודים של עשרה פריטים.

מאחורי הקלעים רצים המודלים MeshAnything וגם MeshAnythingV2 לצד מודלי שפה וראייה ממוחשבת כמו opt 350m של פייסבוק, שני מודלי CLIP של OpenAI ודגם BERT בסיסי של גוגל. הקוד משתמש בספריות trimesh ועיבוד מקדים של Marching Cubes כדי לחלץ את המבנה הגיאומטרי.

מתאים ל

  • עיבוד מודל תלת ממדי

    מעלים קובץ רשת קיים ומריצים עיבוד גיאומטרי לקבלת מודל OBJ מעודכן.

  • בדיקת דגימה עם סיד שונה

    מגדירים ערכי סיד ודגימה אקראית כדי לבחון גרסאות גיאומטריות שונות של אותו קובץ.

  • עיבוד מקדים במרצ'ינג קיובס

    מסמנים את אפשרות הקיובס בקלט כדי לחלץ ולבנות מחדש מעטפת של מודל.

איפה זה נופל

המגבלה המרכזית כרגע היא שהאפליקציה במצב PAUSED ולכן אי אפשר להריץ עליה שום קובץ בזמן אמת. בנוסף, הקוד דורש קלט תלת ממדי קיים ולא מייצר מודל מטקסט או מתמונה בודדת, כך שמי שמחפש יצירה יש מאין לא יקבל כאן מענה. איכות התוצאה תלויה מאוד בערך הסיד ובמבנה הרשת המקורית.

שאלות
נפוצות

האם השימוש באפליקציה כרוך בתשלום?

האפליקציה נמצאת בחינם במרחב הציבורי ולא דורשת מנוי. עם זאת, נכון לעכשיו היא נמצאת במצב מושהה ולכן אי אפשר להפעיל אותה בפועל בדפדפן עד שהיא תוחזר לפעילות.

מה קורה לקבצים שמעלים לעיבוד?

הקבצים נשלחים אל שרת המריץ את הממשק לצורך העיבוד והרינדור. הרישיון מוגדר כלא ידוע, כך שאין פירוט רשמי לגבי שמירה או מחיקה של המידע שהעליתם.

כמה זמן לוקח תהליך היצירה?

האפליקציה מוגדרת לרוץ על כרטיס גרפי מסוג zero a10g שמספק כוח עיבוד ייעודי. בפועל, בגלל שהיא במצב מושהה אין כרגע זמני ריצה שניתן למדוד.

האם אפשר להריץ את זה באופן עצמאי?

הקוד משתמש בספריות פייתון פתוחות ובמודלים שפורסמו במאגר כמו MeshAnything ומשקלי CLIP וברט. מי שרוצה יכול להוריד את הקוד והמשקלים ולהרים אותם על חומרה מקומית מתאימה.

איך משתמשים

טוענים קובץ תלת ממדי לתוך הממשק, בוחרים אם לסמן עיבוד מקדים של Marching Cubes או דגימה אקראית עם ערך סיד מספרי, ולוחצים על Generate. העמוד מוגדר לחומרת zero a10g שמשתמשת במשאבים לפי דרישה, אבל כרגע המצב שלו מוגדר כמושהה כך שלא ניתן להריץ אותו ישירות עד שיחזור לפעילות.

הרישיון

הרישיון מוגדר בתור other. הגדרה זו לא מפרטת תנאי שימוש ברורים, ולכן אי אפשר לדעת אם מותר להשתמש בקבצים שנוצרים למטרות מסחריות או מה הזכויות על התוכן שאתם מעלים.

הרישיון המלא ב־Hugging Face ↗