FastSAM — הדגמה

קוד פתוח

An-619apache-2.02023-06-20

gradio

הדגמה של מודל סגמנטציה מהיר שמבודד עצמים בתמונות בזמן קצר בהרבה מהמודל המקורי של מטא. מיועד למי שרוצה לבדוק חיתוך אובייקטים בלי להרים סביבת פיתוח.

19.8 MBמשקל הקבצים
—הורדות בחודש
234לייקים

מה זה

מעלים תמונה ומקבלים מפות חיתוך ויזואליות שמפרידות בין האובייקטים השונים שנמצאו בה. מאחורי הקלעים רץ FastSAM, ארכיטקטורת CNN שמבוססת על שיטות מחקר מ־YOLACT וקוד מקור של YOLOv8, אשר אומנה על שני אחוזים בלבד ממאגר הנתונים SA-1B ששימש את SAM המקורי.

המטרה כאן היא לספק ביצועים שמשתווים לשיטה של מטא אבל במהירות ריצה גבוהה פי 50. ממשק המשתמש מבוסס על תבנית רשת שנלקחה מהפרויקט Grounded-Segment-Anything, כך שהעיבוד אמור להציג את שכבות המסכה ישירות על גבי הקובץ שהזנתם, אם כי הדף לא מפרט דוגמאות מובנות מראש.

מתאים ל

בדיקת דיוק מול SAM
השוואת איכות חיתוך העצמים בתמונה מורכבת מול המודל המקורי והכבד של מטא.
חיתוך רקעים מהיר
בידוד פריטים או עצמים בודדים מתוך תצלומים לצורכי עיצוב או קטלוג.
הערכת ביצועים לפיתוח
בחינה מעשית של מהירות הסגמנטציה לפני שמחליטים להטמיע את המודל בקוד עצמאי.

איפה זה נופל

הבעיה המיידית היא שהמרחב פשוט לא עובד כרגע בגלל שגיאת ריצה, ולכן אי אפשר לבצע בדיקות בדפדפן. מעבר לזה, המודל אומן רק על שבריר קטן מהדאטה של SAM, מה שאומר שבמקרים מורכבים של עצמים מוסתרים או גבולות עדינים רמת הדיוק עלולה ליפול מהמקור.

שאלות
נפוצות

האם אפשר להשתמש בהדגמה הזו עכשיו?

לא. המרחב נמצא כרגע במצב תקול של שגיאת זמן ריצה ולא מגיב. אם אתם רוצים להשתמש בו, תצטרכו להמתין לעדכון או להוריד את הקוד ולהריץ אותו במחשב שלכם.

האם השימוש פה עולה כסף?

לא, הגישה לדף חופשית לחלוטין ואין שום דרישה לתשלום. המשאבים מוקצים על גבי חומרה ייעודית של הפלטפורמה.

אפשר להריץ את זה באופן מקומי?

כן. הקוד ומשקלי המודל פתוחים לחלוטין תחת רישיון אפאצ'י 2.0. אפשר להוריד את המאגר מגיטהאב ולהריץ אותו על מעבד גרפי מקומי בלי תלות בעמוד הזה.

במה זה שונה ממודל SAM הרגיל?

המודל הזה בנוי על רשת CNN וקוד של YOLOv8 במקום ארכיטקטורת ה־Transformer של מטא. הוא אומן על שני אחוזים בלבד מהנתונים כדי לפעול במהירות גבוהה פי חמישים, במחיר של פשרה אפשרית בחלק מהמקרים הקיצוניים.

איך מריצים

בפועל אתם נכנסים דרך הדפדפן, טוענים תמונה לממשק Gradio ושולחים אותה לעיבוד. ההדגמה מוגדרת לרוץ על מעבד גרפי t4-small ללא צורך בהרשמה או התחברות לחשבון, אבל נכון לעכשיו היא נמצאת במצב של שגיאת זמן ריצה ולא תעבד קבצים עד שהמפתח יתקן אותה.

pip install -U huggingface_hub
hf download An-619/FastSAM

הקבצים

18 קבצים במאגר, 19.8 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הפרויקט מופץ תחת רישיון apache-2.0, שמאפשר שימוש חופשי כולל התאמה מסחרית והרצה פרטית. לגבי התמונות שאתם מעלים, הן נשלחות לשרתי Hugging Face שבהם המרחב מאוחסן, ואין מסמך פרטיות נפרד שמבטיח מחיקה אוטומטית שלהן.

שימוש מסחרי
שינוי הקוד
הפצה מחדש
שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗