leaderboard_legacy
רץ בדפדפןmtebרישיון לא דווח2025-02-04
לוח תוצאות היסטורי שמרכז ביצועי מודלי שיבוץ טקסט על פני משימות ושפות שונות. הוא מיועד למי שבוחר מודל שיבוץ ומחפש נתוני השוואה מקיפים במקום אחד.
- —הורדות בחודש
- 40לייקים
מה זה
אתם לא מעלים לכאן טקסטים לעיבוד אלא מקבלים לוחות השוואה מוכנים. הממשק מציג טבלאות נתונים שנבנו מתוצאות הריצה של מודלי שיבוץ שונים, שנלקחו ממאגר התוצאות של הפרויקט. אפשר לסנן את הטבלאות לפי שמות המודלים, סוגי המודלים וגודלם, וכן לעבור בין לשוניות לפי משימות שונות ולפי שפות ספציפיות.
ברקע, המערכת הזו נשענת על תוצאות שהופקו על מאגרי מידע מוכרים, ביניהם amazon massive intent ונתונים מקבילים של bornholmsk parallel. הטבלאות כוללות נתונים של מודלים מגוונים, כמו gte Qwen1.5 7B בגרסת GGUF או llm2vec croissant mntp, ומציגות ציונים עבור משימות דמיון טקסטואלי ומשימות סיווג שונות לפי מטריקות מוגדרות מראש לכל משימה.
מתאים ל
- בחירת מודל לחיפוש סמנטי
סינון לפי משימות דמיון סמנטי בשפה המבוקשת והשוואת ציוני הדיוק בין המודלים השונים.
- השוואת מודלים לפי גודל
שימוש במסנני הגודל כדי למצוא מודל קל שמתאים למגבלות חומרה בלי לפגוע בביצועים.
- בדיקת תאימות לספריות
סינון מודלים שתומכים ישירות ב־sentence transformers כדי לחסוך עבודת התאמה בקוד.
איפה זה נופל
זהו לוח ישן, גרסת לגאסי, ולכן הוא לא מתעדכן בצורה שוטפת כמו הלוח הראשי החדש של הפרויקט. אי אפשר להריץ פה מודל משלכם בזמן אמת, להזין טקסט כדי לבחון שיבוץ בפועל, או לקבל נתונים על מודלים שלא הוכנסו מראש לקבצי התוצאות השמורים. אם תרצו להוסיף מודל חדש, תצטרכו להריץ את הבנצ'מרק אצלכם ולהגיש תוצאות דרך המאגר החיצוני.
שאלות
נפוצות
האם הממשק פתוח בחינם?
כן, הצפייה בטבלאות והסינון פתוחים לגמרי בדפדפן בלי תשלום. אין צורך לפתוח חשבון כדי לראות את כל הנתונים.
האם אני מעלה לכאן קבצים שלי?
לא, אין שום אפשרות להעלות קבצים או להריץ שיבוץ על טקסט אישי. הממשק משמש רק כלוח תוצאות ומציג נתונים שכבר חושבו מראש.
האם אפשר להריץ את הלוח הזה במחשב שלי?
כן, אפשר לשכפל את הקוד מגיטהאב, להתקין את התלויות מקובץ requirements.txt ולהריץ את app.py באופן מקומי. אם רוצים תוצאות מעודכנות צריך להפעיל גם את סקריפט הרענון.
במה הדף הזה שונה מהרצת המודלים עצמם?
העמוד מציג טבלאות השוואה בלבד ולא מפעיל את מודלי השפה ברקע. כדי להשתמש באחד המודלים בפועל, צריך להוריד אותו ישירות מדף הדגם שלו.
איך משתמשים
נכנסים לעמוד ולוחצים ישירות על הלשוניות של המשימות או השפות שמעניינות אתכם. אפשר להקליד שם בתיבת החיפוש או לסמן צ'קבוקסים כדי לסנן מודלים קנייניים, מודלים עם הנחיות או מודלים שתואמים לספריית sentence transformers. הכל רץ על חומרת cpu-basic של Hugging Face, ואין צורך בהתחברות או המתנה בתור כי מדובר בטעינת טבלאות בלבד.
הרישיון
הרישיון של המרחב הזה לא דווח בעמוד. המשמעות היא שאין הגדרה רשמית לשימוש חוזר בקוד התצוגה עצמו, אך הנתונים המוצגים מגיעים ממאגר התוצאות הפתוח של הפרויקט בגיטהאב.