MEGA-Bench — הדגמה

מה זה

הממשק מציג טבלאות נתונים המדרגות ביצועים של מודלים שונים כמו Molmo, Ovis2 ו־Gemma בגרסאות מולטימודליות. אתם לא מריצים כאן פרומפטים ישירות על תמונות, אלא בוחרים קבוצות מודלים וקטגוריות מתוך רשימות כפתורים ומקבלים טבלת ציונים מפורטת. הנתונים נטענים מתוך מאגר הבדיקות של MEGA-Bench בעזרת רכיב טעינה פנימי בקוד.

בלשוניות הנוספות מוצגים פרטי המידע על הדאטהסט והסברים על תהליך הגשת תוצאות חדשות לטבלה. הממשק מציג השוואה סטטיסטית בלבד בין ביצועי ראייה ושפה של המודלים שנבחנו, בלי סביבת ניסוי אינטראקטיבית לחקירת תמונות בזמן אמת.

מתאים ל

• השוואת מודלי ראייה

  בדיקת ציונים בין מודלים שונים כדי להחליט באיזה מהם כדאי להשתמש לפרויקט מולטימודלי.

• הגשת מודל חדש

  קריאת ההנחיות בלשונית ההגשה והזנת תוצאות של מודל שפיתחתם ללוח התוצאות הכללי.

• בדיקת חלוקה לקטגוריות

  סינון הטבלאות לפי קבוצות מודלים כדי לראות מי מוביל במשימות ראייה שונות.

איפה זה נופל

זהו לוח ציונים בלבד ולא ממשק להרצת מודלים. אי אפשר להעלות לכאן תמונה, לכתוב שאלה ולראות איך מודל ספציפי עונה עליה. הטבלה מציגה את התוצאות הסופיות שנמדדו במבחן, ולכן היא לא משקפת בעיות כמו זמני תגובה, תמיכה בעברית או עלויות שימוש במודלים האלה בעולם האמיתי.

איך משתמשים

נכנסים לעמוד ולוחצים על כפתורי הבחירה כדי לסנן לפי קבוצות מודלים או קטגוריות ראשיות, והטבלה מתעדכנת במקום. כפתור הרענון טוען מחדש את הציונים אם יש שינוי. אין צורך בהרשמה או התחברות כדי לצפות בנתונים, והטעינה מיידית כי האפליקציה רצה על שרת בסיסי ורק מושכת טבלאות מוכנות מראש ללא חישובים כבדים.

הרישיון

הקוד פתוח תחת רישיון apache-2.0, שמאפשר שימוש חופשי כולל שימוש מסחרי והתאמה של הממשק. אין העלאה של קבצים פרטיים לאפליקציה בזמן העיון בטבלאות, כך שאין סכנת חשיפה של תוכן אישי.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗