LightGlue

מה זה

אתם מעלים שתי תמונות נפרדות, והיישום מנתח אותן ומייצר תרשים אינטראקטיבי שמראה אילו נקודות בצילום אחד מקבילות בדיוק לנקודות בצילום השני. הממשק מאפשר לבחור בין שני גלאים שונים להפקת המאפיינים, SuperPoint או DISK, שמחוברים ישירות לאלגוריתם ההתאמה.

מאחורי הקלעים רצים המודלים המקוריים של קבוצת המחקר, תוך שימוש במעבדי תמונה מספריית transformers כדי להכין את הקלטים. התוצאה לא מוחזרת כתמונה רגילה להורדה אלא כגרף ויזואלי של ספריית Plotly, שמציג את קווי ההתאמה בין האובייקטים. בממשק יש גם סט דוגמאות מובנה שמטעין זוגות צילומים כדי לבדוק איך החישוב עובד לפני שמעלים קבצים פרטיים.

מתאים ל

• בדיקת התאמת נקודות

  השוואה מהירה של נקודות מפתח בין שני צילומים מזוויות שונות לבחינת עמידות המודל.

• השוואת גלאים

  בדיקה מעשית של ביצועי SuperPoint מול DISK על אותן התמונות בדיוק.

• המחשה לראייה ממוחשבת

  הצגה ויזואלית אינטראקטיבית של צימוד תמונות באמצעות גרף ללא צורך בכתיבת קוד.

איפה זה נופל

ההדגמה מתאימה לבדיקה של זוג תמונות בודד בכל פעם. אי אפשר לייצא כאן מערך נתונים של קואורדינטות לצורך עיבוד המשכי, ואין תמיכה בהתאמה של סרטוני וידאו או מאגרי ענק. בנוסף, הממשק לא חושף את כל הפרמטרים הפנימיים של המודל, כמו ספי רגישות או כמות נקודות מקסימלית, כך שהתוצאה המוצגת לא בהכרח מייצגת את מלוא הדיוק שניתן להפיק בהרצה מקומית מותאמת.

איך משתמשים

טוענים תמונה לכל אחת משתי התיבות, בוחרים את הגלאי המועדף עליכם ברדיו ולוחצים על Match Images. אין צורך בהרשמה או התחברות כדי להתחיל. הריצה מתבצעת על חומרת Nvidia A10G שמוקצית לפי דרישה, כך שהעיבוד מהיר מאוד, אבל זמני התגובה עלולים להתארך מעט אם יש עומס שמשאיר אתכם בתור קצר להקצאת המשאבים.

הרישיון

הקוד מופץ תחת רישיון apache-2.0, שמאפשר שימוש חופשי וגם מסחרי בקוד עצמו. הנתונים והתמונות שאתם מעלים נשלחים לשרת לצורך העיבוד, ואין מידע לגבי שמירה או מחיקה שלהם לאחר סיום החישוב.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗