open_llm_leaderboard

מה זה

במקום להריץ בדיקות ביצועים בעצמכם, אתם מקבלים טבלה אינטראקטיבית שמרכזת נתוני הערכה על מודלי קוד פתוח שונים. הממשק מציג ציונים של מודלים, תומך בחיפוש סמנטי, ומציע סינון מתקדם ונעיצה של מודלים ספציפיים זה לצד זה כדי שתוכלו להשוות ביניהם ישירות.

מאחורי הקלעים רץ שרת FastAPI שמתחבר ישירות ל־API של Hugging Face כדי למשוך את הנתונים וההצבעות. בצד הלקוח יש ממשק React עם Material-UI וספריית TanStack Table, שמרנדרת את המידע בצורה מותאמת כדי להתמודד עם כמויות גדולות של שורות בלי להכביד על הדפדפן.

מתאים ל

• סינון מודלים לפי ביצועים

  סינון ומיון של עשרות מודלי שפה פתוחים לפי ציוני מבחנים כדי לבחור נקודת פתיחה לפיתוח.

• השוואה צד לצד

  נעיצת מספר מודלים ספציפיים בטבלה ובחינת ההבדלים במדדי הביצוע ביניהם לפני הורדתם.

• חיפוש סמנטי של מודל

  איתור מהיר של מודלים וצ'אטבוטים לפי תיאור ומשפחת ארכיטקטורה במקום לעבור שורה שורה.

איפה זה נופל

זהו לוח השוואה ותצוגת נתונים בלבד, ולא סביבה להרצת פרומפטים או בדיקת שיחה עם המודלים עצמם. אתם תלויים במדדים שהוזנו ובשקלול הציונים שמוצג בטבלה, בלי יכולת להזין טקסט חופשי ולראות איך המודל מגיב בזמן אמת, מה שלא נותן אינדיקציה לגבי איכות הפלט בעברית.

איך משתמשים

נכנסים לדף בדפדפן וכל המידע מופיע מיד בטבלה, בלי צורך בהרשמה או התחברות לחשבון. השימוש שוטף, שכן המערכת רצה על מעבד משודרג מסוג cpu-upgrade, ורכיבי התצוגה מבוססי וירטואליזציה כך שהגלילה, הסינון והחיפוש של המודלים מתבצעים במקום וללא המתנה לתור.

הרישיון

הקוד פתוח תחת רישיון apache-2.0, שמאפשר שימוש חופשי, שינוי והפצה גם לצרכים מסחריים. מאחר שלא מעלים לכאן קבצים אלא רק צופים בנתוני הערכה ומשווים בין מודלים, אין חשיפה של מידע פרטי שלכם.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗