MASt3R
רץ בדפדפןnaverרישיון לא דווח2024-07-19
הכלי מייצר שחזור תלת ממדי של סצינה מתוך תמונות ומחשב התאמות גיאומטריות מדויקות. הוא מיועד למי שחוקר ראייה ממוחשבת או בודק התאמת נקודות בתמונות.
- —הורדות בחודש
- 58לייקים
מה זה
מעלים תמונות של סצינה ומקבלים שחזור גיאומטרי מבוסס ענן נקודות או מפת עומק, כולל התאמות בין אזורים מקבילים בתמונות. הממשק מבוסס על קוד הדגמה שמייצר את התוצאה הגולמית ישירות מהקלט הוויזואלי.
מאחורי הקלעים רץ המודל AsymmetricMASt3R בגרסת ViTLarge עם מפענח בסיס ותמיכה במטריקה מפורשת, תוך שימוש בספריות התשתית של dust3r. המודל מנתח את התמונות ללא צורך בכיול מצלמה מוקדם ומחשב את מיקום הנקודות במרחב.
הממשק כולל דוגמאות מובנות מראש בטעינה עצלה, כך שאפשר להריץ אותן מיד ולראות איך נראית התוצאה לפני שמעלים קבצים עצמאיים מהמחשב.
מתאים ל
- בדיקת התאמת נקודות
השוואת שתי תמונות של אותו אובייקט כדי לבחון איך המודל מזהה נקודות דמיון גיאומטריות.
- שחזור תלת ממד מהיר
הפקת ענן נקודות ראשוני מסצינה מצולמת ללא כיול מקדים של עדשת המצלמה.
- הערכת עומק בסצינה
קבלת תפיסה מרחבית ומבנה יחסי של אובייקטים מתוך תמונות סטילס בודדות.
איפה זה נופל
ההדגמה מיועדת בעיקר לבדיקת זוגות תמונות או סצינות קטנות, ולא למיפוי של סביבות שלמות ומורכבות. היא לא מחליפה תוכנת פוטוגרמטריה מלאה שמפיקה מודלים נקיים לשימוש מיידי בהפקה. בנוסף, חומרת שיתוף זמנית עלולה להיעצר באמצע ריצות כבדות אם חורגים ממכסת הזמן שהוקצתה.
שאלות
נפוצות
האם השימוש באפליקציה עולה כסף?
השימוש בדפדפן חופשי לגמרי ואינו דורש תשלום. המשאבים מוקצים על גבי חומרה ציבורית שיתופית של הפלטפורמה. כל עוד המרחב פעיל, אפשר להשתמש בו ללא עלות.
מה קורה לתמונות שאני מעלה לכאן?
הקבצים נשלחים לעיבוד על שרת מרוחק שבו רץ המודל. הקוד שומר קבצים זמניים לצורך החישוב ומנקה את המטמון. למרות זאת, עדיף לא להעלות מידע רגיש או תמונות פרטיות.
כמה זמן לוקח לקבל תוצאה?
על מאיץ מדגם A10G החישוב לוקח שניות בודדות לזוג תמונות רגיל. אם המאיץ היה כבוי, תהיה המתנה קצרה להפעלת הסביבה לפני תחילת העבודה. עומס משתמשים במקביל עשוי להוסיף עיכוב מסוים.
האם אפשר להריץ את המערכת על המחשב שלי?
כן, הקוד מסתמך על חבילת mast3r ומשקלי המודל הזמינים במאגר. עם זאת, תצטרכו מחשב עם מעבד גרפי חזק של אנבידיה כדי לעבד את הנתונים במהירות סבירה. ההרצה המקומית דורשת גם התקנת סביבת פייתון ותלויות מתאימות.
איך משתמשים
טוענים את התמונות לממשק ולוחצים על כפתור ההרצה כדי להתחיל בעיבוד. אין צורך בהרשמה או בהתחברות לחשבון, והכל עובד ישירות מהדפדפן.
העיבוד מתבצע על גבי מעבד גרפי מסוג zero-a10g שמוקצה לפי דרישה. כשהמאיץ זמין החישוב מסתיים תוך שניות בודדות, אבל אם יש עומס ייתכן שתמתינו להקצאת החומרה.
הרישיון
הרישיון של המרחב לא דווח בדף המקורי, ולכן מעמדם המשפטי של השימוש והקוד לא מוגדר רשמית. כל תמונה שאתם מעלים מועברת לשרתים של האפליקציה לצורך העיבוד, ואי אפשר להסתמך עליה לפרויקטים מסחריים בלי בדיקת זכויות המודל עצמו.