GroundingDINO_OWL

מה זה

אתם מעלים תמונה ומקלידים שמות של עצמים שאתם מחפשים, מופרדים בפסיקים. הממשק מריץ במקביל שני מודלים שונים לזיהוי אובייקטים פתוח, OWLv2 של גוגל בגרסת האנסמבל מול Grounding DINO של IDEA-Research. שניהם מנסים למצוא את מה שביקשתם ולסמן עליו מסגרת בתמונה.

בצד ימין ובצד שמאל מופיעות שתי תוצאות נפרדות, אחת לכל מודל, שמראות בדיוק איפה כל אחד מהם מצא את העצמים. יש בדף שתי דוגמאות מובנות מראש, תמונה של דבורה ופרח, ותמונה עם חתולים ורשת דייגים, שממחישות איך כל מודל מתמודד עם תיאורים קצרים.

מתאים ל

• השוואת מודלים

  בודקים איזה מודל מזהה טוב יותר עצמים ספציפיים על אותה התמונה בדיוק.

• איתור עצמים חופשי

  מוצאים פריטים בתמונה לפי שמות טקסטואליים בלי להגדיר קטגוריות מראש.

• כיול סף ביטחון

  משחקים עם הסליידרים כדי להבין איזה ציון סף מסנן רעשים ומזהה נכון.

איפה זה נופל

הטקסט חייב להיכתב באנגלית, שכן המודלים האלה אומנו על טקסט לועזי ולא מבינים עברית. בנוסף, ערכי הסף המוגדרים כברירת מחדל נמוכים מאוד, מה שעלול לייצר זיהויים שגויים בתמונות עמוסות אם לא מעלים את הרגישות ידנית.

איך משתמשים

גוררים תמונה לחלון, כותבים את התוויות ומכוונים את שני הסליידרים של הסף, ברירת המחדל עומדת על 0.16 ל־OWL ו־0.12 ל־DINO. לוחצים על הרצה, והעיבוד קורה על מעבד גרפי A10G של אנבידיה דרך מנגנון ZeroGPU. בגלל החומרה הזאת הזיהוי רץ מהר ולא דורש התקנה או חשבון.

הרישיון

הקוד מפורסם תחת רישיון apache-2.0, שמאפשר שימוש חופשי ופיתוח מסחרי. לגבי התמונות שאתם מעלים, הן נשלחות לעיבוד בשרת של Hugging Face כדי לקבל את התוצאה.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗