segment-anything-model-2

מה זה

מעלים תמונה לתוך הממשק, בוחרים משקל של המודל ומצב עבודה, ומקבלים חזרה את אותה תמונה כשהעצמים שזוהו בתוכה מסומנים במסכות צבעוניות. אפשר לבחור גרסאות שונות של המודל, למשל גרסת tiny הקלה, ולהשתמש ברכיב פרומפטים כדי לסמן למודל מה לחתוך, או לתת לו לעבוד במצב יצירת מסכות מלא. העיבוד מאחורי הקלעים משתמש בספריית supervision של רובופלו כדי לשרטט את המסכות על גבי הפלט.

הממשק כולל דוגמאות מובנות מראש עם תמונות של כלבים שמוגדרות לרוץ על מצב מסכות אוטומטי. הן לא נשמרות במטמון אלא מעובדות מחדש כשלוחצים עליהן, כך שאפשר לראות ישר איך המודל מתמודד עם גבולות פרווה ורקעים מורכבים.

מתאים ל

• בדיקת חיתוך אובייקטים

  בחינה מהירה של יכולת זיהוי הגבולות של המודל על גבי תמונות עצמאיות ישירות מהדפדפן.

• השוואת גודלי משקלים

  מעבר בין משקלי המודל השונים בתפריט כדי לבדוק את הפשרה בין דיוק למהירות.

• חילוץ מסכות עם פרומפט

  סימון נקודות ידני על גבי תמונה כדי לבודד עצם ספציפי מתוך הרקע.

איפה זה נופל

ההדגמה מתמקדת בעיבוד תמונות בודדות בלבד, למרות שהמודל עצמו פותח במקור גם עבור וידאו. מי שמחפש לבדוק עקיבה אחרי אובייקטים ברצף פריימים לא יוכל לעשות את זה כאן. בנוסף, הדוגמאות המובנות מוגדרות על גרסת tiny, כך שרמת הדיוק המוצגת בהן נמוכה יותר ממה שמשקלים כבדים יותר מסוגלים לתת. כדאי לבדוק תמונות עמוסות משלכם ולא להסתמך רק על תוצאות הכלבים המוצגות.

איך משתמשים

טוענים תמונה מהמחשב או בוחרים באחת מדוגמאות הכלבים, מוודאים שנבחרו משקלי המודל והמצב הרצוי, ולוחצים על כפתור השליחה. ההרצה מתבצעת על מעבד גרפי מסוג A10G שמוקצה לפי דרישה דרך זירו ג'יפייו. זה אומר שאם המעבד היה במצב שינה תצטרכו להמתין כמה שניות להקצאת החומרה, אבל העיבוד עצמו מהיר ברגע שהוא מתחיל. אין צורך בהרשמה או התחברות כדי להריץ.

הרישיון

הקוד מופץ תחת רישיון אפאצ'י 2.0, שמאפשר שימוש חופשי כולל שימוש מסחרי והתאמה אישית. הרישיון חל על קוד ההדגמה עצמו. לגבי תמונות שאתם מעלים, הן מועברות לעיבוד על גבי השרת שמריץ את החומרה ולא מפורט בממשק אם הן נשמרות מעבר לזמן הריצה.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗