InstantMesh — הדגמה

מה זה

אתם מעלים תמונה אחת של חפץ או דמות, ומקבלים מודל תלת ממד להורדה בקובץ OBJ או GLB, לצד תצוגה מקדימה של זוויות הראייה שנוצרו ממנה. הממשק כולל דוגמאות מוכנות שמאפשרות לבדוק את התהליך בלי להעלות קובץ משלכם.

מאחורי הקלעים פועל צינור עיבוד שמנקה את הרקע מהתמונה בעזרת rembg, מייצר זוויות צילום חדשות באמצעות zero123plus ומשתמש ב־DINO של פייסבוק לחילוץ מאפיינים. משם המודל של InstantMesh משחזר את הרשת הגיאומטרית ומייצא את קובץ התלת ממד.

מתאים ל

• יצירת פרוטוטייפ למשחקים

  המרת איור קונספט או ציור בודד למודל ראשוני שניתן לבחון במנוע פיתוח.

• חילוץ מודל מנכס דו ממדי

  בניית קובץ רשת בסיסי מתמונת מוצר מבודדת להמשך פיסול ומידול.

• בדיקת זוויות לחפצים

  הפקת תצוגה היקפית מהירה של אובייקט מתמונה יחידה לצורך בחינה ויזואלית.

איפה זה נופל

אם מייצאים קובץ OBJ, המודל יוצא הפוך ודורש היפוך ידני בתוכנת תלת ממד. קובצי GLB נראים כהים מדי בתצוגה המקדימה בדפדפן, כך שחייבים להוריד אותם כדי לראות את התוצאה התקינה. בנוסף, חפצים מורכבים עם הסתרות עלולים להניב רשת מרוחה, ובמקרים כאלה צריך לשנות את ערך הסיד ולנסות שוב.

איך מריצים

גוררים תמונה לממשק, בוחרים אם להסיר רקע באופן אוטומטי, קובעים מספר צעדים וסיד, ולוחצים על כפתור ההפקה. לפי ההצהרה בעמוד התהליך לוקח כעשר שניות, והוא רץ על מעבד גרפי מסוג A10G שמוקצה לפי דרישה. אין צורך בהרשמה או התחברות כדי להפעיל את ההדגמה ישירות בדפדפן.

pip install -U huggingface_hub
hf download TencentARC/InstantMesh

הקבצים

7 קבצים במאגר, 6.8 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• diffusion_pytorch_model.bin1.7 GB
• instant_mesh_large.ckpt1.5 GB
• instant_nerf_large.ckpt1.5 GB
• instant_mesh_base.ckpt1.3 GB
• instant_nerf_base.ckpt1.3 GB
• .gitattributes1.5 KB
• README.md1.3 KB

הרישיון

הפרויקט מופץ תחת רישיון Apache 2.0 המאפשר שימוש חופשי וגם מסחרי בקוד ובמשקלים. התמונות שאתם מעלים והמודלים שנוצרים מעובדים על גבי השרתים שמארחים את הממשק.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗