חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
S

SuperGlue-Image-Matching

רץ בדפדפן

Pinwheelרישיון לא דווח2022-10-31

  • gradio

העמוד משווה בין שתי תמונות ומוצא נקודות חיבור זהות ביניהן. הוא מיועד למי שרוצה לבדוק התאמת מאפיינים חזותיים בלי להרים סביבת פיתוח.

  • —הורדות בחודש
  • 44לייקים

מה זה

אתם מעלים שתי תמונות לממשק ובוחרים האם המבט צולם בתוך מבנה או בחוץ, תחת אפשרות indoor או outdoor. מאחורי הקלעים הקוד טוען את המודל של SuperGlue יחד עם מודול Matching, ומעבד את התמונות בעזרת PyTorch ופונקציות עזר ייעודיות לזיהוי נקודות עניין.

בסיום הריצה מקבלים תמונה מאוחדת עם קווי התאמה צבעוניים בין הנקודות הדומות בשני הפריימים. לצד הגרפיקה, התוצאה מציגה תיבות טקסט עם כמות נקודות המפתח שהותאמו ואחוז ההתאמה שחושב בין התמונות. הממשק כולל גם דוגמאות מובנות להרצה מהירה.

מתאים ל

  • בדיקת חפיפה בין צילומים

    השוואת שתי זוויות של אותו אתר כדי לבדוק אם המודל מזהה ביניהן נקודות דמיון משותפות.

  • הערכת תנאי תאורה וסביבה

    בחינה כיצד המודלים המובנים לפנים ולחוץ מתמודדים עם תמונות שצולמו בתנאי שטח שונים.

  • חילוץ מדד התאמה מספרי

    קבלת כמות נקודות המפתח ואחוז ההתאמה לצורך השוואה מהירה בין זוגות קבצים.

איפה זה נופל

הבעיה המיידית היא סטטוס התקלה שמונע שימוש בפועל. מעבר לכך, הממשק דורש מכם לבחור ידנית בין מודל פנים למודל חוץ בלי לתת אינדיקציה מה מתאים לתמונות מעורבות, ולא חושף פרמטרים עדינים כמו ספי זיהוי נקודות או רזולוציית עיבוד מקסימלית.

שאלות
נפוצות

האם השימוש בעמוד עולה כסף?

לא, הגישה בדפדפן פתוחה לגמרי ללא תשלום וללא צורך להזין אמצעי חיוב. עם זאת, נכון לעכשיו העמוד נתקל בשגיאת ריצה ולא מבצע חישובים.

כמה זמן לוקח לקבל תוצאה?

ההדגמה מוגדרת על מעבד רגיל ללא כרטיס גרפי, מה שבדרך כלל דורש המתנה של מספר שניות לכל זוג תמונות. כרגע המערכת כלל אינה מגיבה בגלל שגיאת ריצה.

האם אפשר להריץ את זה על המחשב שלי?

כן, הקוד נשען על חבילות פייתון סטנדרטיות כמו torch ו־gradio. אתם יכולים לקחת את app.py וקבצי המודל המקומיים ולהריץ אותם בסביבה פרטית משלכם.

מה קורה לקבצים שאני מעלה?

הקבצים נשלחים לעיבוד על תשתית השרת שמארחת את ההדגמה. מאחר שהרישיון ומדיניות השמירה לא פורטו, עדיף לא להעלות קבצים שאינם ציבוריים.

איך משתמשים

נכנסים לעמוד דרך הדפדפן, טוענים קובץ אחד לתיבת הקלט וקובץ שני לתיבת ההשוואה, או לוחצים על אחת הדוגמאות המוכנות. לאחר מכן מסמנים את סוג החלל ומפעילים את העיבוד בלחיצה.

הקוד מוגדר לרוץ על חומרת מעבד בסיסית, cpu-basic, כך שחישוב התאמות גרפיות עלול לקחת זמן מה בהשוואה למאיץ גרפי. כרגע לא תצטרכו להמתין לעיבוד כי העמוד נמצא במצב של שגיאת ריצה, מה שאומר שהוא לא מגיב עד שיתקנו את הקוד או סביבת העבודה שלו.

הרישיון

הרישיון של המרחב לא דווח, וזה אומר שאין אישור רשמי לשימוש מסחרי בקוד או בפלט שלו. בנוסף, כל תמונה שאתם מעלים להדגמה ציבורית כזו עוברת דרך השרתים המארחים, לכן אל תעלו לשם חומרים פרטיים או רגישים.

הרישיון המלא ב־Hugging Face ↗