sapiens-seg
רץ בדפדפןfacebookcc-by-nc-4.02024-08-30
מבצע חלוקה למקטעים של גוף האדם מתוך תמונות בודדות. מיועד למפתחים וחוקרים שרוצים לבדוק ויזואלית איך מודל הסגמנטציה של פייסבוק מזהה חלקי גוף ואיברים.
- —הורדות בחודש
- 122לייקים
מה זה
אתם מעלים תמונת סטילס ומקבלים מפת סגמנטציה צבעונית שמפרידה בין איברים וחלקי גוף שונים, לצד קובץ npy להורדה שמכיל את הנתונים המספריים הגולמיים של החלוקה. הממשק מציג גם תמונה של מקרא צבעים כדי שתבינו איזה צבע מייצג כל איבר לפי מחלקות מוגדרות מראש.
בקוד מוגדרת רשימת דוגמאות מוכנות מראש לבדיקה מהירה, ויש תפריט נפתח לבחירת גרסת המודל שתרצו להריץ על התמונה. העיבוד עצמו נשען על מודלי Sapiens שפותחו בפייסבוק וממפים את גוף האדם.
מתאים ל
- בדיקת איכות סגמנטציה
העלאת תמונות מורכבות כדי לראות איך המודל מתמודד עם זוויות שונות של הגוף.
- הורדת מסכות npy
קבלת קובץ מערך מספרי של מקטעי הגוף לשימוש בעיבוד נתונים מקומי.
- השוואת גרסאות דגם
מעבר בין גרסאות המודל בתפריט כדי לבדוק דיוק מול מקרא המחלקות.
איפה זה נופל
ההדגמה הזו מיועדת לתמונות סטילס בלבד ולא מתאימה לווידאו או לזיהוי בזמן אמת. מעבר לזה שהיא כרגע מושהית, חומרת המעבד הבסיסית לא מציגה את הביצועים האמיתיים של המודלים, שיכולים לרוץ מהר בהרבה על מעבדים גרפיים חזקים.
שאלות
נפוצות
למה שום דבר לא קורה כשמנסים להריץ?
הדמו נמצא כרגע במצב מושהה. עד שמנהלי העמוד לא יפעילו אותו מחדש, אי אפשר להריץ תמונות ישירות בדפדפן.
האם אפשר להשתמש בתוצאות לפרויקט מסחרי?
לא. הרישיון הוא לא-מסחרי בלבד ומיועד לצרכי מחקר וניסוי.
האם אפשר להריץ את זה על המחשב שלי?
כן, הקוד בנוי בפייתון ומשתמש בספריות סטנדרטיות כמו PyTorch ו־OpenCV. אפשר להוריד אותו ולהריץ מקומית עם מעבד גרפי מתאים.
איך משתמשים
טוענים תמונה לחלון השמאלי, בוחרים דגם מתוך התפריט ולוחצים על כפתור ההפעלה. כרגע לא תראו תוצאות כי הדמו נמצא במצב מושהה ולא רץ בפועל. מעבר לזה, המרחב מוגדר על חומרת מעבד בסיסית, כך שגם כשהוא פעיל, עיבוד מודלים כבדים בלי מאיץ גרפי ייקח זמן ולא יעבוד מיידית.
הרישיון
הקוד והדגם מפורסמים תחת רישיון cc-by-nc-4.0. זה אומר שמותר להשתמש בהם למחקר ולניסויים אישיים בלבד, וחל איסור מוחלט לשלב אותם במוצר מסחרי או לייצר מהם רווח כספי.
- שינוי הקוד
- חובת ייחוס
- שימוש מסחרי: לא