ReconViaGen
רץ בדפדפןStable-Xmit2025-09-03
הכלי מייצר מודלים תלת מימדיים מקבצי וידאו או מכמה תמונות של אותו חפץ. הוא מתאים ליוצרי תוכן ומפתחי תלת מימד שרוצים לחלץ קובץ גיאומטרי בלי לבנות אותו ידנית.
- —הורדות בחודש
- 185לייקים
מה זה
אתם מעלים סרטון קצר או גלריית תמונות מזוויות שונות. בצד השני אתם מקבלים סרטון תצוגה מקדימה להורדה, קובץ רשת תלת מימדי בפורמט GLB וקובץ Gaussian Splatting נפרד אם אתם בוחרים לחלץ אותו.
מאחורי הקלעים רץ שרשור מודלים מורכב. הוא כולל את MASt3R להבנת הגיאומטריה והזוויות, את BiRefNet להסרת רקעים, ומודלים ייעודיים של Trellis ו־VGGT להפקת המבנה המרחבי והטקסטורה. תהליך היצירה מחולק לשני שלבים של דיפוזיה, מבנה דליל ומבנה לטנטי, כאשר המשתמש יכול לשלוט בכמות הצעדים, חוזק ההנחיה ואלגוריתם שילוב התמונות. הממשק כולל דוגמאות מרובות תמונות מוכנות מראש שמאפשרות לבחון את החילוץ עוד לפני שמעלים קבצים משלכם.
מתאים ל
- יצירת נכסי תלת מימד
המרת צילום וידאו של חפץ לקובץ GLB שמוכן להכנסה למנועי משחקים או הדמיות.
- חילוץ Gaussian Splatting
הפקת ייצוג גאוסיאני מרובה זוויות מתוך אוסף תמונות לצורכי תצוגה אינטראקטיבית.
- בדיקת איכות אלגוריתמים
השוואת תוצאות בין אלגוריתם stochastic לבין multidiffusion ישירות מהממשק.
איפה זה נופל
הכלי מיועד לחפצים בודדים ואינו מתאים לסריקת חללים שלמים, סביבות פתוחות או סצנות מורכבות עם מספר רב של אלמנטים. אם תמונות הקלט אינן מכסות זוויות מספקות או שהווידאו כולל תנועה מהירה ומטושטשת, המודל יתקשה לבודד את העצם וייצור גיאומטריה מעוותת או שבורה. בנוסף, חילוץ הגאוסיאנים מנוטרל עד לסיום הפקת המודל הראשי.
אותה משפחה
ReconViaGen יצא ב־2 גרסאות שיש להן עמוד כאן. אלה האחרות, לפי כמה מורידים אותן.
שאלות
נפוצות
האם השימוש באפליקציה כרוך בתשלום?
הגישה פתוחה ואינה דורשת תשלום. השימוש מתבצע על גבי תשתית ענן שיתופית במגבלות המכסה הרגילות.
כמה זמן לוקח התהליך?
משך היצירה תלוי בכמות צעדי הדגימה ובעומס על כרטיס ה־A10G. כיוון שהחומרה מוקצת דינמית, ייתכן זמן המתנה קצר לתחילת הריצה מעבר לעיבוד עצמו.
האם אפשר להריץ את הכלי מקומית?
כן, קוד המקור זמין במאגר הפרויקט תחת רישיון MIT. להרצה עצמאית נדרש מחשב עם מעבד גרפי תואם ותמיכה בספריות התלויות של Trellis.
במה הממשק שונה מהרצת המודלים ישירות בקוד?
הממשק מאגד את מודלי הראייה והדיפוזיה לשרשרת עבודה גרפית אחת. הוא מנהל אוטומטית את הסרת הרקע, בניית המרחב וחילוץ הקבצים הסופיים בלי כתיבת סקריפטים.
איך משתמשים
בוחרים דוגמה או מעלים וידאו ותמונות בלשונית הקלט. אם רוצים, פותחים את ההגדרות המתקדמות ומשנים את צעדי הדגימה, רמת פישוט הרשת או גודל הטקסטורה. לוחצים על Generate and Extract GLB וממתינים. החישוב מתבצע על גבי מעבד גרפי מדגם A10G במתכונת ZeroGPU, מה שאומר שהשרת מוקצה ונדלק לפי דרישה, ולכן זמני העיבוד תלויים בעומס ובתור הפעיל. בסיום התהליך אפשר להוריד את קובץ ה־GLB או ללחוץ על כפתור נוסף כדי לחלץ את ייצוג הגאוסיאנים.
הרישיון
הפרויקט מפורסם תחת רישיון MIT. הרישיון חופשי ומתיר שימוש מסחרי, שינוי והפצה של הקוד. המידע שאתם מעלים מעובד בתיקיות זמניות בשרת לפי סשן, אך מומלץ להימנע מהעלאת חומרים רגישים לחומרה שיתופית.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש