tokenize-anything

מה זה

מעלים תמונה ובוחרים איך להנחות את המודל, בעזרת סימון נקודות ותיבות בלשונית Point+Box, או באמצעות ציור חופשי בלשונית Sketch. הקוד מריץ את tokenize_anything של BAAI, מעבד את התמונות בעזרת PyTorch ופונקציות ייעודיות לשינוי גודל ולחיבור תמונות, ומחזיר תמונה מקוטעת ומסומנת ברכיב AnnotatedImage.

הממשק כולל אפשרות לבחור בין עיבוד נקודות במצב Batch לבין Ensemble כדי לשלוט באופן שבו המודל מאחד את ההנחיות שלכם. יש גם דוגמאות מובנות בלשונית הלחיצות, כך שאפשר לראות את אופן הפעולה מיד בלי להעלות קובץ אישי מהמחשב.

מתאים ל

• סגמנטציה לפי סימונים

  סימון נקודות או תיבות על גבי אובייקטים כדי לבודד חלקים ספציפיים מתוך התמונה.

• חיתוך באמצעות סקיצה

  ציור קווי מתאר חופשיים על התמונה כדי להגדיר למודל אילו אזורים לנתח ולחתוך.

• בדיקת המודל של BAAI

  בחינת יכולות הסגמנטציה של tokenize_anything על דוגמאות מוכנות מראש בלי לכתוב קוד.

איפה זה נופל

כרגע אי אפשר להריץ את ההדגמה הזאת בכלל, כי העמוד מדווח על שגיאת זמן ריצה פנימית בקוד. מעבר לתקלה שמשביתה את הדף, הממשק דורש סימון ידני מדויק ואינו מיועד לפענוח אוטומטי של תמונות שלמות ללא התערבות. כדאי להמתין שהיוצרים יתקנו את ההרצה, או להוריד את הקוד ולהריץ אותו בסביבה פרטית משלכם.

איך משתמשים

בוחרים תמונה מקומית או משתמשים בדוגמה מוכנה, מסמנים נקודות או סקיצה על גבי האובייקטים, ולוחצים על כפתור Execute להרצה. אם רוצים להתחיל מחדש, לוחצים על Reset שמנקה את כל הסימונים מהמסך. המערכת מוגדרת לרוץ על מאיץ גרפי a10g-small בלי צורך בהתחברות או בהרשמה מראש.

הרישיון

הפרויקט מופץ תחת רישיון apache-2.0 המאפשר שימוש חופשי וגם מסחרי בקוד. לגבי התמונות שאתם מעלים, אין תיעוד מפורש בהגדרות הכלי לגבי אופן השמירה שלהן.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗