EdgeSAM
רץ בדפדפןchongzhouרישיון לא דווח2023-12-08
הכלי מבודד אובייקטים מתמונות לפי נקודות לחיצה או תיחום מלבני. הוא מיועד למי שרוצה לבחון חיתוך תמונות קל משקל ישירות בדפדפן.
- —הורדות בחודש
- 45לייקים
מה זה
מעלים תמונה או בוחרים מתוך שמונה הדוגמאות המוכנות מראש בממשק. בוחרים לעבוד במצב נקודות או במצב תיחום, ומסמנים את העצם המבוקש. הפלט מחזיר שתי תמונות נפרדות: מסיכה בשחור לבן שמציגה את החיתוך המדויק, ותמונה גזורה שמבודדת את האובייקט מהרקע.
מאחורי הקלעים רצים המודלים chongzhou/EdgeSAM ו־An-619/FastSAM, לצד שימוש בספריית segment anything ובגרסת ה־ONNX שלה. הפיתוח נשען על מאמר משנת 2023 שעוסק בזיקוק מודל SAM לצורך הרצה מקומית על מכשירי קצה, כך שהעיבוד אמור להיות מהיר וחסכוני במשאבים.
מתאים ל
- חיתוך אובייקטים לפי נקודות
לחיצה על עצם בתמונה מקבלת מסיכה וחיתוך מבודד על בסיס מיקום הנקודה.
- בידוד פריטים באמצעות תיחום
סימון תיבה מלבנית סביב אובייקט כדי לגזור אותו ישירות מתוך הרקע.
- בדיקת ביצועי מודל דחוס
בחינת איכות המסיכות של EdgeSAM בהשוואה למודלי מקור כבדים יותר.
איפה זה נופל
הבעיה המיידית היא סטטוס התקלה של האפליקציה, מה שאומר שהיא לא תעבד שום קלט כרגע. מעבר לכך, הממשק מוגבל לפעולות חיתוך לפי קלט ידני בודד ולא מאפשר עיבוד אצווה או עריכה מתקדמת. הדוגמאות מציגות עצמים ברורים, ולא בטוח שהתוצאה תהיה נקייה באותה מידה על תמונות מורכבות עם תאורה חלשה.
שאלות
נפוצות
האם הכלי פועל כרגע בדפדפן?
לא, המצב הנוכחי מוגדר כתקלת זמן ריצה והמערכת אינה מגיבה לפקודות. כדי להשתמש בה יש להמתין שהמפתח יתקן את הקוד או להרים את היישום עצמאית מקוד המקור.
האם ניתן להריץ את היישום הזה מקומית?
כן, הקוד נכתב במפורש עבור שרת רשת מקומי ומשתמש בספריות מוכרות כמו PyTorch ו־ONNX. אפשר להוריד את הקבצים ולהפעיל אותם במחשב הפרטי עם תמיכה מתאימה ברכיבי החומרה.
איזה פלט מתקבל בסיום החיתוך?
הממשק מציג שתי תמונות נפרדות שאינן אינטראקטיביות. אחת היא תמונת מסיכה שמגדירה את גבולות העצם, והשנייה היא תמונה גזורה של האובייקט שחולץ מהמקור.
במה היישום שונה ממודל SAM המקורי?
הוא מבוסס על גרסה מזוקקת שפותחה בסוף 2023 ומיועדת לעבוד על חומרה קלה ועל מכשירי קצה. המטרה היא להגיע לזמני תגובה קצרים בהרבה תוך שמירה על רמת דיוק קרובה למקור.
איך משתמשים
נכנסים לממשק ובוחרים בלשונית הרצויה, נקודות או תיחום. לוחצים על התמונה כדי להוסיף או להחסיר נקודות, או מותחים תיבה סביב העצם, ומשתמשים בכפתורי האיפוס והניקוי לפי הצורך. השרת יושב על חומרת a10g-small שלא דורשת המתנה ממושכת, אך כרגע הדף מדווח על שגיאת זמן ריצה ולא ניתן להריץ עליו בדיקות בפועל.
הרישיון
הרישיון של המרחב לא דווח כלל במקורות המצורפים. בלי הגדרה ברורה של זכויות היוצרים והשימוש בתוכן, לא ניתן לדעת אם התמונות שנשלחות מוגנות או אם מותר להשתמש בפלטים לצרכים מסחריים.